<p>描述如图</p>
受教了,感谢各位大侠不吝赐教。
自己在其他地方检测的Robots没问题的话,百度哪里也是没问题的
没啥大问题
只要测试蜘蛛可以正常爬行就可以吧
这个应该没啥用吧
很可能是因为你服务器端限制了某些UA访问,你先用抓取诊断工具测试下百度蜘蛛能否正常访问抓取你的网站, 然后再看看服务器那边是不是做了什么限制了。这个连不上其实没多大关系,就是测试用的
让更多人参与回答