网页被robots了,为什么还会被百度收录
漏网之鱼吧
有可能百度有一个反应时间
可能是在这个以前就被抓了,而且感觉已经被收录的在写在Robots里面的话可能要比较长时间才会去掉
看你Robots写正确没有。
首页感觉还是会被抓的样子
你应该没有写正确,或者说搜索引擎并不会按照你的Robots抓取
让更多人参与回答