搜外网>搜外问答>问答页面

二级目录改为二级域名后的抓取问题?

以前的二级目录改为二级域名,并做了301定向很久了。现在网站还大量抓取这个二级目录,大家说有必要禁止抓取么?有没有做过的,处理后效果怎么样?

追加问题
    4 人参与回答
流浪的战狼
流浪的战狼 · 电量变送器|电能质量分析仪|综合安规测试仪|功率分析仪|万用表

没必要啊,多抓取总归是好的啊

plank
plank · 上海力东科技有限公司是一家致力于各类生化试剂、标准品、小分子抑制剂、液体试剂等相关产品的研发与销售的企业。

希望排名就抓取,不希望排名就少弄点儿

婳酒
婳酒 · 发外链了

做了301就不用管了,并不影响什么的