搜外网>搜外问答>问答页面

关于百度死链处理机制的一个提问

经过研究发现一个网站死链多少不重要,重要的是当天百度抓取的死链数量,如果当天抓取的死链数量达到一个阈值网站就会受到惩罚,比如降权,收录变慢,收录率变低,甚至停止收录。
曾经有一个站也删除了大量文章,也没事,秒收。因为百度抓取频率是变化的,有时候突然暴涨一倍,两三倍也正常,有一天百度突然抓取频次暴涨一倍,,抓取频次高,那么当天抓取的死链必然多。被百度死链屏蔽过的死链,百度一样还是天天去抓,网站当天就停止收录,第二天抓取又降低,之后收录率大大降低,但也收录,比如偶尔收录一两条,但又有一天,抓取频次再次暴涨一倍,然后好几天停止收录了。

所以一个网站死链数量多少不重要,比如你网站有1万篇文章,其中有9000是死链,也没事,前提是百度抓取频次低,比如一天只抓取极少量,这样死链当天抓取量就不会触发惩罚的阈值。

那么站长如果有大量死链要处理,又不想网站受惩罚怎么办,我认为在站长后台降低百度抓取频次的最高值是一个方法。

第二个方法是,大家分批删除,比如你删除一些内容提交404,等百度屏蔽死链后,你robots屏蔽这个目录,这样百度不会再次抓取,这样逐步处理,这样的目的就是百度当天死链抓取量始终不会触发惩罚的阈值。因为你在不断的robots屏蔽被百度死链屏蔽的目录。理论上这样即使你删除网站90%的内容也不会触发死链惩罚机制。

但问题来了,这样被百度死链屏蔽的页面,做了robots后,百度在后续无法抓取的情况下,还会不会删除这些无效的索引。如果不删除,那么这些无效索引是对网站有害的。百度对死链索引的删除存在不存在一个多次确认的算法,必须多次确认是死链才删除索引,如果有这种算法那么站长这样处理死链的办法就不好

追加问题
    30 人参与回答

我都做了Robots,但是做了后反而没有百度蜘蛛

Spring
Sprin · 小状在线智能法务平台,让企业法务无忧!

我的网站去年崩溃过,出现了大量的死链。直接按要求提交了死链txt文档,当天就给我解决了。不用做robot屏蔽

真节能烘干机
真节能烘干 · 真节能污泥烘干机

我以前是删除一些无效索引的 做Robots目录屏蔽或者单个路径屏蔽 提交百度死链 过一段时间查看服务器日志 看百度的处理情况 结合后 继续再删除一批 如果量大的话 量少的话就一次性删除了 有效索引的先不动 需要删除的话 先屏蔽目录 过段时间再删除

泉水溪溪
泉水溪溪 · 鑫盛主营包装机设备,粉剂包装机,颗粒包装机,可用于面粉、粮食、化工、肥料行业

分析得有道理,没尝试过,坐等懂得人来看

小鱼
小鱼 · 专业的ERP定制开发、小程序开发、软件外包、软件开发服务商, 定制化开发服务, 擅长小程序开发,微商城开发,PHP项

分析的很有道理

文字太多了,直接略过。

wp操
wp操 · 网站精品主题插件模板资源绿色下载

只有网站改版,会产生很多死链,所以网站改版必然会被降权

前来学习的,看看大神是怎么做的。

隔壁老王情妇
隔壁老王情 · 菜鸟一枚,努力学习中......

这里大佬真多呀

梦梦
梦梦 · 泰海科技12年服务经验,专注于服务器租用

只有网站改版,会产生很多死链,所以网站改版必然会被降权

看看大佬如何解决,坐等推推蛙大佬解答

丫丫
丫丫 · 唵嘛咪叭咪吽

那么问题来了,为啥要产生这么多的死链接呢,不能从源头上杜绝或减少死链产生的数量麽

插个眼 坐等大佬解答

失踪人口
失踪人口 · 53品牌网,十大品牌排行榜

正确的做法是一次性删除 百度后台提交死链 不用做Robots屏蔽 做了屏蔽蜘蛛过不来快照就一直在影响网站 百度对于主动提交的死链是不会做惩罚的

坐等推推蛙来

加载更多