搜外网>搜外问答>问答页面

百度资源抓取诊断出现DNS无法解析IP怎么办?

<p>百度资源抓取诊断出现DNS无法解析IP问题,但是360站长、搜狗站长都是正常诊断的,还有阿里云服务器测试也是没有出现IP错误的问题,网站地图也可以正常抓取,该怎么解决?麻烦大神帮忙看看!</p><p><br></p><p><br></p><p><br></p><p><br></p>

追加问题
    29 人参与回答
泳池设备
用户206752 · 主营泳池循环水泵、过滤砂缸、消毒监控设备、空气能热泵、除湿热泵等泳池水处理设备及其他配套设备。
用户136441用户208572 等 2 人赞同该回答

1,查看Robots.txt有没有禁止抓取语句

首先我们要检查robots.txt中是否有禁止抓取语句,教大家一个简单的方法,首先你要删除根目录下的robots.txt,然后在进行抓取诊断。如果抓取成功了,则证明是robots.txt的问题,大家需要整改这个文件了,如果依然抓取失败,请往下继续看。
2,更换DNS解析(一般生效时间都是24小时)

因为一般抓取失败都是提示DNS无法解析IP的问题,大家需要去切换自己域名解析的DNS,推荐大家切换成阿里云解析的DNS,生效时间比较快,当切换以后,大家最好等待24小时,全国生效以后,在进行抓取诊断,一般情况下都是可以解决这个问题的。
3,网站是否打不开,服务器不稳定,防火墙蜘蛛屏蔽

第三点就是我们网站自身的问题,有时候会出现卡顿,导致蜘蛛抓取不成功,大家可以自己手动进行网站测速,然后在稳定性比较好,确认可以打开网站的情况下去测试蜘蛛的抓取,一般这种情况下,虚拟主机问题比较多。

另外说下,有的服务器是带有硬防的,会自动阻止一些IP的抓取,或者你安装的防护软件自动屏蔽了抓取IP,因为防护系统会认为这类IP在攻击你的网站,你可以发工单让技术方不要关闭你的防火墙,你自己也关闭自己的防御软件,在进行测试就OK了。
4,百度异常,查看日志是否有蜘蛛进来抓取

如果以上方法都试过,但是你的抓取依然失败的话,不排除百度本身的问题,你可以通过日志看每天是否有蜘蛛来,如果有,而且很规律很正常,就可以不必理会百度后台的蜘蛛抓取了。

大家应该明白,其实百度后台的蜘蛛抓取,不代表实际的蜘蛛抓取,大家可以自行分析网站蜘蛛日志,当你发现一个蜘蛛都没有的情况下,正好百度站长后台抓取也是失败的情况下,这个时候,就是你的网站,或者服务器的问题了,如果以上说的问题,你都试过,无效的话,你可以考虑让空间商帮你换一个IP,或者换一台服务器试下。通常是可以解决这个问题的。

推推蛙
用户144761 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
用户187189用户208572 等 2 人赞同该回答

1、百度站长认证是否成功,提交报错即可;
2、新站和重新换空间服务器的都会遇到这种情况,如一切正常,后期自己会成功的,自己担忧的,可去反馈下,一般没太大问题。

子炘
用户173060 · 需要男性产品 加VX:N71869

楼上好多专业的大神已经解决了,我就来观摩一下 进来学习知识的

十六夜
用户201383 · 气象站-气象监测传感器-农业观测站设备-全自动气象站

来看大佬回复的

搜索百度,看看是什么原因

技术导航
用户195871 · 柒柒导航:专注收录天下名站

来学习知识的,哈哈

你这个是什么程序,可以分享一下不

金泰福
用户162305 · 西安金泰福进口越野车、商务车、房车等!

楼上好多专业的大神已经解决了,我就来观摩一下

进来学习知识的

Plum
用户139178 · 聚乙烯醇缩丁醛-天元化工网-小小站长,兢兢业业!

我就来看看下情况,哈哈

蜻蜓(butterpig.top)
用户193094 · 各类便捷智能的在线图片处理工具

还有种可能就是配置弄错了

混个链接。。。。。

馨苗绿化
用户39451 · 帝王洁具(浴室柜、智能坐便器、卫浴龙头、淋浴器、淋浴房2)

多抓取几次看看 不行就反馈一下

西北国际项目管理~总经办
用户139317 · 主要从事工程造价、招标代理业务,加盟合作。

试试提交报错

学到了 学到了

鹰米讲解器
用户163537 · 徽马科技鹰米导览是一家专业从事团队无线讲解器、自助导览机、展厅分区讲解系统的品牌生产厂家。

是刚上线还是换了服器?
可以用17ce去检测一下,看看各个区域是否解析正常。
改过域名解析一般0~24小时生成不到,某些区域生效比较慢。
如果过几天依旧这样建议换DNS解析服务商,试试。

1、遇到这种情况,先报错测试,几分钟后,再次抓取诊断,有恢复的可能
2、域名重新绑定解析

小鱼
用户137963 · 专业的ERP定制开发、小程序开发、软件外包、软件开发服务商, 定制化开发服务, 擅长小程序开发,微商城开发,PHP项

多抓取几次看看,不行就去反馈看看

标准答案已经在上面了。

就是无法解析出那个域名的ip有可能是DNS服务器的问题,也有可能是百度那边的问题,如果抓取失败就在cmd运行nslookup 然后解析你的网址, 正常解析出来就没问题。如果解析不出来,那要联系服务商检查服务器,如果服务器没有问题,那剩下的就是蜘蛛的问题了,剩下的就不用太担心了

夜场网
用户206120 · 全国招聘网

提交报错吧

迦洛
用户78784 · 驱蚊器-除虫菊素-别墅庭院驱蚊设备-必扑花园驱蚊系统

这个一般是刚解析的域名DNS的问题,换个常用的dns就好了,我一个新站前几天也出现这种情况,买过来是聚名的dns,换成阿里云的dns地址,点击提交报错,不到一两个小时就好了,抓取正常

唔知叫什么名好
用户144155 · 法律快车网站权重6,友情链接QQ1293815178

推推蛙已经给出了标准专业答案。

我也遇到过一次,但什么影响都没有,没去解决

多抓取几次看看 不行就反馈一下

重新再抓取试下

重新再抓取试下

人生=π
用户185412 · 建站小程序空间域名服务器百度爱采购

如果长时间出现这个问题,建议还是找空间商排查一下。以前遇到过这样的问题。