搜外网>搜外问答>问答页面

提交死链但是百度蜘蛛为什么还会抓取？

微信

提交死链但是百度蜘蛛为什么还会抓取？

追加问题
百度蜘蛛
本帖由用户发布，如有侵权联系删除  2021-05-15 发布651 次浏览
举报
其他问题
 
    7 人参与回答
用户178692

过一段时间应该会好一些的

4 年前
IP属地：山西
赞同 0 评论 0
收藏 举报
评论取消
用户192437 · 长沙悦妍堂集养生、减肥、塑形、美容、抗衰为一体的大健康管理机构

不用管，蜘蛛会自动识别的

4 年前
IP属地：湖南
赞同 0 评论 0
收藏 举报
评论取消
用户157263 · 环卫洒水车、垃圾车、压缩式垃圾车、扫路车、清扫车等专用车销售

会有一个缓冲期

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
用户159126 · 专业的有问必答平台

会有一个缓冲期的，过两天看看

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
用户175329 · 无锡华芯科技，霍尔元件，霍尔开关，专业霍尔生产厂家

之前抓的呗。

4 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
用户195494

提交死链更多的是为了让百度删掉收录。
想不让蜘蛛爬就从Robots.txt 添加禁止抓取

4 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
用户125573 · 一个热爱美食&且喜欢旅游的网站行业工作者&当然佛系#

过段时间就不抓了，你刹车能秒刹？

4 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消

收录宝

91637 97342 03085 08960 14829 20701 32490 38446 44276 50064 55933 61934 67761 73510 79380 85252 91084 97166 03038 08784

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司