搜外网>搜外问答>问答页面

提交死链但是百度蜘蛛为什么还会抓取？

微信

提交死链但是百度蜘蛛为什么还会抓取？

追加问题
百度蜘蛛 举报 本帖由用户发布，如有侵权联系删除  2021-05-15 发布514 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    7 人参与回答
痫来无事
痫来无事

过一段时间应该会好一些的

3 年前
IP属地：山西
赞同 0 评论 0
收藏 举报
评论取消
长沙悦妍堂
长沙悦妍堂 · 长沙悦妍堂集养生、减肥、塑形、美容、抗衰为一体的大健康管理机构

不用管，蜘蛛会自动识别的

3 年前
IP属地：湖南
赞同 0 评论 0
收藏 举报
评论取消
A 0湖北楚胜汽车.谢非
A 0湖北 · 环卫洒水车、垃圾车、压缩式垃圾车、扫路车、清扫车等专用车销售

会有一个缓冲期

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
三九问答
三九问答 · 专业的有问必答平台

会有一个缓冲期的，过两天看看

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
橙橙
橙橙 · 无锡华芯科技，霍尔元件，霍尔开关，专业霍尔生产厂家

之前抓的呗。

3 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
故宫简介
故宫简介

提交死链更多的是为了让百度删掉收录。
想不让蜘蛛爬就从Robots.txt 添加禁止抓取

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
大地旅人
大地旅人 · 一个热爱美食&且喜欢旅游的网站行业工作者&当然佛系#

过段时间就不抓了，你刹车能秒刹？

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司