以前的二级目录改为二级域名，并做了301定向很久了。现在网站还大量抓取这个二级目录，大家说有必要禁止抓取么？有没有做过的，处理后效果怎么样？
没必要啊，多抓取总归是好的啊
希望排名就抓取，不希望排名就少弄点儿
做了301就不用管了，并不影响什么的
让更多人参与回答
