搜外网>搜外问答>问答页面

百度抓取诊断失败 悬赏3元 已结束

<p><a href="http://hzbdf.baikezh.com/" target="_blank" data-url="hzbdf.baikezh.com" class="show-5118-data" rel="nofollow">http://hzbdf.baikezh.com/</a> 进行百度抓取诊断,一直提醒抓取失败,有检查网站的robots文件,并没有禁止蜘蛛抓取。抓取诊断失败的结果反馈如下图:</p><p></p><p>有去清理本地的DNS缓存,第二天进行抓取诊断还是失败。有大神知道为什么吗?</p>

追加问题
    15 人参与回答
最佳回答
泳池设备
泳池设备 · 主营泳池循环水泵、过滤砂缸、消毒监控设备、空气能热泵、除湿热泵等泳池水处理设备及其他配套设备。

解决抓取总是出现失败的方法!

  1,查看Robots.txt有没有禁止抓取语句

  首先我们要检查robots.txt中是否有禁止抓取语句,教大家一个简单的方法,首先你要删除根目录下的robots.txt,然后在进行抓取诊断。如果抓取成功了,则证明是robots.txt的问题,大家需要整改这个文件了,如果依然抓取失败,请往下继续看。

百度站长平台抓取诊断总是出现抓取失败“DNS无法解析IP”

2,更换DNS解析(一般生效时间都是24小时)

  因为一般抓取失败都是提示DNS无法解析IP的问题,大家需要去切换自己域名解析的DNS,推荐大家切换成阿里云解析的DNS,生效时间比较快,当切换以后,大家最好等待24小时,全国生效以后,在进行抓取诊断,一般情况下都是可以解决这个问题的。

3,网站是否打不开,服务器不稳定,防火墙蜘蛛屏蔽

  第三点就是我们网站自身的问题,有时候会出现卡顿,导致蜘蛛抓取不成功,大家可以自己手动进行网站测速,然后在稳定性比较好,确认可以打开网站的情况下去测试蜘蛛的抓取,一般这种情况下,虚拟主机问题比较多。

  另外说下,有的服务器是带有硬防的,会自动阻止一些IP的抓取,或者你安装的防护软件自动屏蔽了抓取IP,因为防护系统会认为这类IP在攻击你的网站,你可以发工单让技术方不要关闭你的防火墙,你自己也关闭自己的防御软件,在进行测试就OK了。

 4,百度异常,查看日志是否有蜘蛛进来抓取

  如果以上方法都试过,但是你的抓取依然失败的话,不排除百度本身的问题,你可以通过日志看每天是否有蜘蛛来,如果有,而且很规律很正常,就可以不必理会百度后台的蜘蛛抓取了。

  其实百度后台的蜘蛛抓取,不代表实际的蜘蛛抓取,大家可以自行分析网站蜘蛛日志,当你发现一个蜘蛛都没有的情况下,正好百度站长后台抓取也是失败的情况下,这个时候,就是你的网站,或者服务器的问题了,如果以上说的问题,你都试过,无效的话,你可以考虑让空间商帮你换一个IP,或者换一台服务器试下。通常是可以解决这个问题的。

我的IP都不对了 反馈报错一个礼拜没处理...

MDL
MDL · 法律快车,权重6,友情链接QQ:1399332818

如果已经修改完成还没有解决可以先提交反馈然后再等百度更新

反馈一下客服会给你处理,要等一段时间

李春雷
李春雷 · 无尘|洁净车间工程 推广经理

上面都没有IP地址,点报错,让百度更新最新地址!!!

---环境检测权威检测机构广东华科检测为你解答疑问!

这种反馈看看是什么原因导致的

一般过一段时间就好了

人生=π
人生=π · 建站小程序空间域名服务器百度爱采购

联系服务器提供商看看,之前遇到过这种问题,服务器线路和抓取线路不吻合。

报错,反馈看是什么原因,一般没有问题的话更新就好

先报错在重新诊断一下看看

反馈一下,应该可以。过段时间就能恢复啦。

反馈一下。过段时间就好了

崔家大院
崔家大院 · 网站诊断、建站、快速排名

更换DNS解析,服务器不稳定,防火墙蜘蛛屏蔽,查看日志是否有蜘蛛进来抓取 就这几个原因卓一排查

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、蜘蛛模拟抓取一切正常可识别,网站也能正常访问; 

2、站点是新站绑定,还是重新搬家,网站可报错下ip,新站上线或者搬家会出现这种情况,报错ip,做好推送提交,过几日就会自己好的,没啥问题,担忧可反馈下,等几日。

反馈下报错,过一段时间就好了