网站被挂马了，集中在一个栏目里面出来其他文章收录。然后把这个栏目加入robots文件做屏蔽，可是为啥这个栏目下还会有新的文章被收录？？？？是robots文件没起作用吗
现在Robots没什么作用了
蜘蛛比较喜欢那个栏目的内容，所以直接无视Robots
应该是没写好
Robots规则没有问题的话，我觉得可能以下情况： 1、蜘蛛还没有抓取到Robots 2、蜘蛛不遵守规则（这个可能性比较小） 3、Robots需要调整，一般屏蔽全站，该规则可以放在最前端（也就是重要的放前面）。
让更多人参与回答
