<p>服务器日志分析出来很多404页面,蜘蛛404,这些页面都是之前服务器更换前的页面,而且之前做了死链和301的,可是还有很多404页面,大部分都是图片还有js以及css,那现在还要不要把这些在添加进死链并提交给百度呢?还有最近改了栏目的url地址,原来的地址路径太长了,现在优化精简了,抓取也有404,但是是能正常访问的,也做了301的。</p>
看是哪些页面,是否能正常访问
1、JS和css可以Robots屏蔽掉,不让蜘蛛抓取;
2、这些有没有被抓取收录,不影响;
3、查看百度站长里面抓取返回码有没有异常,没有异常不需要担心。若需帮助,请追问
可能是假的吧
假蜘蛛是啥
抓取到404百度会自行排除,慢慢的抓取404的页面会减少,提不提交都一样
1、JS和css可以Robots屏蔽掉,禁止蜘蛛抓取;
2、这些有无被抓取收录,无不影响;
3、查看百度站长里面抓取返回码有无异常,无异常不必担心。
改过变更过路径就算做了404和301 蜘蛛还是会访问到。要么本办法去这个文件路径删除,能访问到的就提交
匿名用户
因为404也是你们网站的页面,如果比较多就有点不太正常
另外,我也看了这些页面,只有少数是假蜘蛛,大多都是真蜘蛛
让更多人参与回答