<p>百度蜘蛛来抓取每次都是赚404页面怎么办</p><p align="center"><br></p><p>不抓html,只抓.php这些页面,这些页面抓了也是404。</p><p>而且网站中没有这些路径,请问怎么解决</p>
做一个404页面,然后在404页面上把所有的想收录的网址都做上超链接
这样就不会浪费蜘蛛
看一下蜘蛛得ip地址是什么 是否是真的百度蜘蛛
提交死链
状态码是多少啊
要看一下返回状态码是多少,如果返回状态码是404,那么说明网站有问题,如果返回的状态码是200,那么是正常的。
让更多人参与回答