网站蜘蛛是按时每天都来网站爬取页面，爬取的次数也比较多，好多页面都是重复的太多，反复重复的页面爬取也没有什么效果，怎么引导蜘蛛爬取正常？为什么蜘蛛总是爬取重复的页面，有什么办法把蜘蛛先引导好？谢谢前辈的解答！
蜘蛛能引导，看你得操作了。
这个应该正常吧，你多给重复的页面加点其他内链引导一下
先确定要重点做哪个页面 把重复的做301过去。
进来看答案的，，，
百度不可以识别那么长
让更多人参与回答
