以前的二级目录改为二级域名,并做了301定向很久了。现在网站还大量抓取这个二级目录,大家说有必要禁止抓取么?有没有做过的,处理后效果怎么样?
没必要啊,多抓取总归是好的啊
希望排名就抓取,不希望排名就少弄点儿
做了301就不用管了,并不影响什么的
让更多人参与回答