中文网站里有一个英文栏目，要不要设置禁止抓取这个栏目。
如果你是主做外贸还是加上的好 单纯国内还是不要加了
可以Robots禁止英文内容被百度、360、搜狗蜘蛛抓取，可以不屏蔽谷歌的
没必要，如果栏目没用你可以删掉
这个栏目是否有存在的必要
1、这个栏目是否有存在的必要；
2、因为蜘蛛爬行收录英文页面，对搜索体验也不算友好，被收录，同时也分权，无必要可关闭或者Robots封禁。
让更多人参与回答
