搜外网>搜外问答>问答页面

我已经提交死链了 但是百度蜘蛛每天还去抓取 这个该怎么办? 悬赏1元 已结束

<p>我已经提交死链了 但是百度蜘蛛每天还去抓取 这个该怎么办?   (</p><p>Robots也有做屏蔽)<br></p><p></p>

追加问题
    17 人参与回答
最佳回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
南北说 等 1 人赞同该回答

1、这种要是需要被删除的URL,这些URL千万不要屏蔽掉,蜘蛛来访抓取返回码404,说明是死链接,后期都会删除的;

2、你提交死链删除,蜘蛛也是需要去抓取爬行,确定下是否是死链,是死链就删除,如果你Robots屏蔽掉了,蜘蛛不能抓取,那么蜘蛛如何判断是死链,如何删除。

申虎包装-杨敏
申虎包装- · 上海厂家直供装盒机、灌装机、封口机、封尾机、旋盖机

提交死链文件以后要等待一个周期,不用着急

我是老王
我是老王 · 软装设计、全屋定制家居可以搜索悦鹿家居咨询------

他们说的都对,你现在需要的就是确定了就去删除

这种要是需要被删除的URL,这些URL千万不要屏蔽掉,蜘蛛来访抓取返回码404,说明是死链接,后期都会删除的

(1)你应该确定一下是不是已提交死链。
(2)要不你就去反馈一下,不过比较慢,别着急的,等等看看。
(3)或者你选择屏蔽死链,蜘蛛就抓取不到了。

长沙悦妍堂
长沙悦妍堂 · 长沙悦妍堂集养生、减肥、塑形、美容、抗衰为一体的大健康管理机构

投诉快照,机器比较蠢,理解一下

那蜘蛛就太无耻了

删除加反馈 没那快 要不就等等看看

提交过死链不是说蜘蛛就不抓了,蜘蛛还要确认这些链接是不是死链,肯定是要抓爬的,而且死链不能在Robots里屏蔽,你屏蔽了蜘蛛咋确认是不是死链。

副业教程
副业教程 · 免费分享自媒体,抖音带货,闲鱼,seo,短视频,剪切视频等一系列课程

投诉下快照试试

再去投诉下快照试试

提交下 自己再去投诉下快照

提交了死链就不用关了,百度自己会删除

萌面大叔
萌面大叔 · 无线投屏

死链 提交了 Robots 不要禁止 过一段时间就会删除了

客套企业名录
客套企业名 · 一款可以搜索企业名录的CRM软件。

多抓取几次知道真是死链接会删掉,后期应该就不会再抓了

加载更多
SEO培训招生中
188