搜外网>搜外问答>问答页面

服务器日志分析出来很多404页面,蜘蛛404,这是什么情况呢,求大佬解答 悬赏5元 已结束

<p>服务器日志分析出来很多404页面,蜘蛛404,这些页面都是之前服务器更换前的页面,而且之前做了死链和301的,可是还有很多404页面,大部分都是图片还有js以及css,那现在还要不要把这些在添加进死链并提交给百度呢?还有最近改了栏目的url地址,原来的地址路径太长了,现在优化精简了,抓取也有404,但是是能正常访问的,也做了301的。</p>

追加问题
    12 人参与回答

看是哪些页面,是否能正常访问

1、JS和css可以Robots屏蔽掉,不让蜘蛛抓取;

2、这些有没有被抓取收录,不影响;

3、查看百度站长里面抓取返回码有没有异常,没有异常不需要担心。若需帮助,请追问

A 0湖北楚胜汽车.谢非
A 0湖北 · 环卫洒水车、垃圾车、压缩式垃圾车、扫路车、清扫车等专用车销售

可能是假的吧

寕榏青楓
寕榏青楓 · 无锡华芯科技,霍尔元件,霍尔开关

假蜘蛛是啥

抓取到404百度会自行排除,慢慢的抓取404的页面会减少,提不提交都一样

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、JS和css可以Robots屏蔽掉,禁止蜘蛛抓取;

2、这些有无被抓取收录,无不影响;

3、查看百度站长里面抓取返回码有无异常,无异常不必担心。

施先生
施先生 · 资深的SEO/SEM工作者和管理者

改过变更过路径就算做了404和301 蜘蛛还是会访问到。要么本办法去这个文件路径删除,能访问到的就提交

因为404也是你们网站的页面,如果比较多就有点不太正常

冇搞头
冇搞头 · 成都全包家装公司报价_房子家居室内装修设计_二手房新房装修公司-U家工场

另外,我也看了这些页面,只有少数是假蜘蛛,大多都是真蜘蛛