百度对robots有适应期?为什么robots禁止了某文件夹,蜘蛛依然爬行。 推荐热议


百度资源平台已经显示不允许。


网站日志里蜘蛛依然爬行。



网站:www.chenifan.cn


追加问题
    6 人参与回答
叶童鞋
叶童鞋 · 菜鸟

应该会有缓冲时间吧!过几天再看看吧

唯爱シ念流年
唯爱シ念流 · 试管婴儿服务--可选性别、供卵

我也是禁止了还继续爬

是不是没有设置好呢

正常,不是说禁止他立马就不爬了,要过一段时间他就不会爬了,需要一个缓冲时间,现在百度蜘蛛天天爬我后台

没有吧,应该不是说禁了马上不爬,慢慢就不会爬了

回复问答禁止带推广链接,了解合理带链接的方法