百度是不是可以不遵守robots协议?
百度是不是可以不遵守robots.我的网站同一个网页收录了很多不同的url链接,
然后2月初设置了robots和伪静态。但是上周五一些老的url依然被收录和存在。这样会不会导致我的网站被降权?
1 人参与回答
可能 是之前已经收录了 后面才放出来
百度是不是可以不遵守robots.我的网站同一个网页收录了很多不同的url链接,
然后2月初设置了robots和伪静态。但是上周五一些老的url依然被收录和存在。这样会不会导致我的网站被降权?
可能 是之前已经收录了 后面才放出来