搜外网>搜外问答>问答页面

新站上线，robots.txt屏蔽了全部蜘蛛，为啥被抓取并收录页面？

微信
追加问题
Robots 新站上线 举报 本帖由用户发布，如有侵权联系删除  2022-02-24 发布595 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    13 人参与回答
企业名录大全
企业名录大 · 客套企业名录，内置1亿+企业名录线索库，轻松开拓企业客户。

看看设置的对不对 或许是禁止错了

2 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
From the minute
From · 重庆PLC控制柜、次氯酸钠发生器、紫外线消毒设备、二氧化氯发生器厂家、重庆污水处理设备、重庆电气设备、机电设备维修、

过一段时间看看，不会立马生效的

2 年前
IP属地：重庆
赞同 0 评论 0
收藏 举报
评论取消
梅术
梅术

可能是你的操作出了问题。

2 年前
IP属地：云南
赞同 0 评论 0
收藏 举报
评论取消
迈斯特
迈斯特 · 北京汽车养护品厂家/OEM加工/三元催化器/进气/发动机清洗剂

需要有个缓冲期，识别时间缓一下

2 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
陈之虎
陈之虎 · 正在输入……

需要一段时间识别 没那么快的

2 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
清禾原素
清禾原素

过一段时间看看，刚改的话不会立马生效的

2 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
可凯可乐
可凯可乐

需要一段时间识别的

2 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
君子之交?
君子之交? · 外链

如果是刚改的暂时不会这么快生效的，需要一定的时间

2 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
梦梦
梦梦 · 泰海科技12年服务经验，专注于服务器租用

百度处理问题向来是很慢的，等待更新

2 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
天下爱我她最配
天下爱我她 · 我只是混外链 的

你厉害。。。。。。。。。。。。。。。

2 年前
IP属地：湖南
赞同 0 评论 0
收藏 举报
评论取消
艺赛旗
艺赛旗

应该是没有生效

2 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
三九问答
三九问答 · 专业的有问必答平台

过一段时间看看，刚改的话不会立马生效的

2 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
过眼云烟
过眼云烟

需要一段时间识别

2 年前
IP属地：海南
赞同 0 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司