网站蜘蛛经常爬取页面，问题就是爬取页面都是重复的，怎么重复的爬取页面，有什么可以解决的办法让蜘蛛爬取正常，有什么好的办法？谢谢回答问题
多搞一点内链，把蜘蛛通过内链引去其他页面
你优化一下内链的路径
网站内链建设是不是不合理
让更多人参与回答
