网站收录的低质量页面,通过robots屏蔽是否可以?
之前收录的低质量页面,我在robots.txt中Disallow了一下,这个页面百度会自动删除吗?
因为很多页面带参数的,后台删掉这个内容,这个页面还是存在的,只是内容为空了,不存在404这种情况,
我只是在robots.txt中Disallow了一下这个地址,行吗?百度会把收录的这个页面给删掉吗?
5 人参与回答
我的微信:sec_vip 等 1 人赞同该回答
你收录了的页面 只是会屏蔽掉他的更新
我的微信:sec_vip 等 1 人赞同该回答
已经收录的 可以删掉再提交死链
我的微信:sec_vip 等 1 人赞同该回答
我的微信:sec_vip 等 1 人赞同该回答
Disallow 应该之后就不会抓取那个网址了 之后收录可能会受影响
我的微信:sec_vip 等 1 人赞同该回答
不会哦,收录了的页面用Disallow只是屏蔽后续他继续抓取更新,没有收录的话还可以用来屏蔽收录