百度蜘蛛一直抓取我的垃圾链接，怎么办？悬赏1元已结束

Question

回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法

本贴交流超时，回复已关闭

Answer 1

高飞儿

风继续吹等 1 人赞同该回答

你不想让他抓取的，在Robots,txt里面禁止抓取。

Answer 2

崔家大院 · 网站诊断、建站、快速排名

无量等 1 人赞同该回答

不用管。做好404就可以

Answer 3

顺时

百度垃圾

Answer 4

大型平台死链处理经验：

1、404必须做；

2、让死链入口消失；

3、整个栏目删除的Robots指定屏蔽蜘蛛；

4、通过指令找到收录的死链，生成文本站长平台提交死链（这个对于大型平台作用不大，小网站建议使用）。

5、删除前先通过抓取工具抓取要删除或修改的链接，删除后直接提交站长平台。

Answer 5

郭胜勇-G · 擅长网站seo快速排名

做个Robots文件吧不想让蜘蛛爬行的路径做一下规则，robots可以在站长平台编辑，做好上传到网站根目录就行了，多到站长论坛发发外链。

Answer 6

要管的，蜘蛛爬取一个网站的页面是有限的，抓取的垃圾网页多了，就浪费了自身优质网页的名额了，
做个Robots文件吧

收录宝