搜外网>搜外问答>问答页面

百度一直抓取已经删除的链接，如何减少抓取这样的链接？

微信

百度一直抓取已经删除的链接，抓取404链接的占比已经是200链接的好几倍了，如何减少抓取这样的链接？在网站内链和网站地图已经剔除了这些链接，只有百度在疯狂的抓取，其它搜索引擎都不会大量抓取已经删除的链接。
由于url规则因素无法通过robots文件屏蔽掉。

Robots 网站内链 404 索引

本帖由用户发布，如有侵权联系删除 2022-05-28 发布790 次浏览

交换友情链接，就用搜外友链，方便！

3 人参与回答

用户213108 · 从业临床试药志愿者招募工作，很高兴认识你们！

近期波动很大，在5月中旬开始

用户210154 · 重庆不孕不育医院相关的不孕治疗及诊疗服务

百度可能在调整。

用户184508 · ——————免费推广论坛—————可以免费发布广告信息的论坛——————————bbs。jc3600。cn

一样近期一直发现这个问题，基本上各站一半

收录宝