搜外网>搜外问答>问答页面

网站日志显示很多404爬取怎么解决?

做了404链接提交,但是发现近期还是有很多爬到这个入口的,无疑是浪费了蜘蛛资源,怎么解决呢?

追加问题
    5 人参与回答
天朋
天朋 · 入行8年,企业站,建站,百度谷歌seo,sem,电商运营

内链排查一下就行,其他不用管,如果是从外链爬过来的想管也管不了。

客套企业名录
客套企业名 · 一款可以搜索企业名录的CRM软件。

提交了404之后去看看有没有生效 一般会延迟

要是觉得浪费,你直接Robots里面把这个路口给禁用了嘛。

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、有的是虚假蜘蛛,爬行不存在的页面,返回码404,这种不会被收录,忽略即可;
2、对于已收录的死链,返回码404,做死链提交删除即可,做好基础优化和提交推送引蜘蛛操作。

Plum
Plum · 聚乙烯醇缩丁醛-天元化工网-小小站长,兢兢业业!

提交下404死链到百度站长平台

SEO培训招生中
188