搜外网>搜外问答>问答页面

我的网站是不是处问题了,那么多404页面怎么处理? 悬赏1元 已结束

<p>FTP后台上根本没有这样的文本,但是日志上每天都能查到那么多的404链接,robots文本也做了屏蔽了还是没有用这是什么情况,还要最后的汇总为什么只有404个,有知道怎么处理的吗,麻烦解释一下,谢谢!www.zhboyang.com</p><p></p><p></p>

追加问题
    13 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
博扬智能 等 1 人赞同该回答

1、真的蜘蛛是不会抓取不存在的网页文件,蜘蛛抓取爬行也是爬存在的路径;

2、百度站长抓取异常哪里看看有无异常,无异常,那么就不影响,如果不存在的页面,你屏蔽了,也屏蔽不了虚假模拟蜘蛛的抓取;

3、真蜘蛛爬行页面出现大量404页面,会出现在百度站长抓取异常哪里,如果没有无问题。

做好死链提交
要不就是老站的链接、要不就是挂马链接、蜘蛛肯定不会无缘无故的去爬不存在的页面

申虎包装-杨敏
申虎包装- · 上海厂家直供装盒机、灌装机、封口机、封尾机、旋盖机

哪些页面是你网站真实存在的吗?还是随便搜的

这个情况嘛,静观其变。。

❦༺༒༻❦
❦༺༒༻❦ · 知网全网营销~网站建设优化~短视频运营

多做检查,小心网站被挂马的风险

重庆联合教育
重庆联合教 · 重庆联合教育为广大学员提供自考、成教、网络教育等学历提升服务。

可能是虚假链接,不用管。

日志里有些是假蜘蛛,有些是用户访问

(1)首先有效的蜘蛛都是抓取存在的网页,而且是仅限于爬行路径:
(2)检查一下百度站长的抓取情况,要是没有异常,那么就没有太大的问题,另外也不用做屏蔽处理,因为根本无法做屏蔽无效的蜘蛛;
(3)出现的404页面如果抓取无异常,那就没太大的问题;

检查网站看是否有被挂马

有些在源文件找不到

历史页面的url,设置好404页面就行了,不要理会

屏蔽这些链接 我也碰到了

乐乐
乐乐 · 入行小白,求指教

没这个页面的话,是不是网站被挂马