搜外网>搜外问答>问答页面

如果用robots禁止百度抓某个目录下的页面,那之前该目录下已收录的页面搜索结果会被删除吗? 悬赏3元 已结束

如果用robots禁止百度抓某个目录下的页面,那之前该目录下已收录的页面搜索结果会被删除吗?


比如搜索引擎之前已经抓取了:http://www.epanel.cn/preview/[?]下的页面,

我把/preview/禁掉,之前收录的页面还会被搜索到吗?

追加问题
    14 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
氯化钠(殷丽云)权重蜘蛛-池出租 等 2 人赞同该回答

1、Robots中disallow功能是不再让其抓取,已收录的页面快照会一直存在,只要百度不自己取消会一直存在;

2、页面快照会一直存在,如果不想让快照继续存在,需要将这些页面变成404,才会被主动删除;

3、disallow是不再抓取,不是404,因此之前收录的快照还会存在,只不过后期应该不会被更新,后期可能回收,也可能一直留着。

权重蜘蛛-池出租 等 1 人赞同该回答

不会的,收录的页面还是会存在搜索引擎结果中


权重蜘蛛-池出租 等 1 人赞同该回答

楼上说得对


大地旅人
大地旅人 · 一个热爱美食&且喜欢旅游的网站行业工作者&当然佛系#
权重蜘蛛-池出租 等 1 人赞同该回答

并不会被百度从索引库中删除,Robots只是禁止抓取,并没有其他功能,但是因为你禁止的Robots,导致蜘蛛无法抓取其路径下的其他页面,那么有可能随着时间的推移,你所禁止的页面就会被百度从索引库中移除

权重蜘蛛-池出租 等 1 人赞同该回答

应该不会的

权重蜘蛛-池出租 等 1 人赞同该回答

来学习的

被遗忘的大侠
被遗忘的大 · 小小打杂
权重蜘蛛-池出租 等 1 人赞同该回答

不会,你可以去投诉一下之前的快照。

权重蜘蛛-池出租 等 1 人赞同该回答

看楼上回答已经全面了

叱咤风云
叱咤风云 · SEO优化|权重提升/快速收录
权重蜘蛛-池出租 等 1 人赞同该回答

按照我以往的经验,Robots禁止某个目录,那么索引量会逐步删除,但不是很快,需要时间沉淀

渣渣杨
渣渣杨 · 二营长建站优化wanhao_ya

会,被屏蔽的收录会消失

吾爱破解吧
吾爱破解吧 · 网站从业人员,一个悟道的秃头技术员

楼上说得对

这个是不会的,没事,也不影响

不会的