网站有很多垃圾蜘蛛来大量抓取， 是否需要都禁用了？
网站有很多垃圾蜘蛛来大量抓取，比如：MJ12bot、SemrushBot、AhrefsBot等等，是否这些都需要禁用了？
3 人参与回答
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
