搜外网>搜外问答>问答页面

网站的百度蜘蛛获取,老是抓取到网站都不知道哪里的死链?

我做了好做的死链了,但是总还是会很多的死链产生,这是为什么呢?

追加问题
    4 人参与回答
PS
PS · Google SEO专家-Shuke.→SEO服务咨询微信:15877060841

应该是蜘蛛抓取了别的不该抓的链接吧

小七
小七 · 高德开放平台

如果死链很多,百度提交一下死链,如果不多,用Robots.txt屏蔽一下,我的站就是这样

唯爱シ念流年
唯爱シ念流 · 买网店,上猫元素!买卖网店便捷、安全、交易放心的电商综合性服务平台

正常~这种死链提交百度就行

这个很正常,有的是百度蜘蛛,有的可能是模拟UA的攻击测试。你修改Robots.txt用于规范蜘蛛抓取路径,把那些死链目录屏蔽掉。

SEO培训招生中
189