搜外网>搜外问答>问答页面

网站日志显示很多404爬取怎么解决？

微信

做了404链接提交，但是发现近期还是有很多爬到这个入口的，无疑是浪费了蜘蛛资源，怎么解决呢？

网站日志 404 举报 本帖由用户发布，如有侵权联系删除 2022-04-22 发布573 次浏览

5 人参与回答

天朋 · 入行8年，企业站，建站，百度谷歌seo，sem，电商运营

内链排查一下就行，其他不用管，如果是从外链爬过来的想管也管不了。

客套企业名 · 一款可以搜索企业名录的CRM软件。

提交了404之后去看看有没有生效一般会延迟

布衣

要是觉得浪费，你直接Robots里面把这个路口给禁用了嘛。

推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo

1、有的是虚假蜘蛛，爬行不存在的页面，返回码404，这种不会被收录，忽略即可；
2、对于已收录的死链，返回码404，做死链提交删除即可，做好基础优化和提交推送引蜘蛛操作。

Plum · 聚乙烯醇缩丁醛-天元化工网-小小站长,兢兢业业！

提交下404死链到百度站长平台

收录宝