我在robots.txt中设置了禁止百度收录我网站的内容,为何还出现在百度搜索结果中?
要等待时间生效的
屏蔽之前百度已经收录了的,是不会消失的。
加了屏蔽之后,大约12个小时的生效时间,Robots做完上传之后,可在百度站长平台里面检测是否确定屏蔽了抓取。
匿名用户
如果其他网站链接了你Robots.txt文件中设置的禁止收录的网页,那么这些网页仍然可能会出现在百度的搜索结果中,但你的网页上的内容不会被抓取、建入索引和显示,百度搜索结果中展示的仅是其他网站对您相关网页的描述。
让更多人参与回答