查看日志发现网站有很多蜘蛛，但是蜘蛛多数都是爬取页面重复，很少有不重复的蜘蛛爬取，怎么引导让蜘蛛重新被到底怎么合理的优化可以解决蜘蛛的问题，蜘蛛爬取重复的是咋回事呢？
网站内链规划优化一下
爬得多是好事情呀 我的他都不来爬呢
站内关键词优化做好。
是不是网站内链规划的不好啊
让更多人参与回答
