搜外网>搜外问答>问答页面

百度蜘蛛抓取问题


1.蜘蛛抓取时间:[13/Feb/2023:14:00:12| 蜘蛛IP地址:116.179.37.114| HTTP状态码:404-2113-'http://www.ojudciz。Cn/szzx/18.html'| 
URL:http://你的域名/index.php?s=api&c=module&siteid=1&app=news&m=hits&id=18&callback=jQuery450049376632181510827_1676268012040&_=1676268012041
抓取:百度蜘蛛Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu。Com/search/spider.html)       百度蜘蛛为什么会抓取这样的?对收录有没有影响?怎么处理?[?]

追加问题
    6 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
B4rrenT 等 1 人赞同该回答

1、抓取返回码是404,不存在的死链,这种不会被收录; 

2、抓取这个是否页面里面就有这个URL,我看有的网页里面有这种。

人生=π
人生=π · 建站小程序空间域名服务器百度爱采购

网站中有什么样的url,都有机会被抓取

丫丫
丫丫 · 唵嘛咪叭咪吽

这不是百度WEB蜘蛛,这个好像是小程序蜘蛛。

楼上分析的很到位哦

这不是百度WEB蜘蛛

林飞
林飞 · 站长

你是不是弄了小程序,这个好像是小程序蜘蛛。