网站最近蜘蛛爬取页面就是不正常，反复的爬取蜘蛛都是爬取页面重复的，每次爬取页面重复导致收录量不正常，怎么解决蜘蛛的问题，如何把蜘蛛引导正确的爬取方法？
那就想办法让蜘蛛不怕重复的
1、做好基础优化，提升域名信任度，产出优质内容；
2、引蜘蛛操作，提交推送，外链友链，蜘蛛池，收录宝都可以引蜘蛛。
ps：收录异常是怎样的异常，是不收录，还是收录了错误页面，具体分析，单纯引蜘蛛，就按引蜘蛛操作即可，确保网站安全稳定可抓取
多更新原创文章上去！！
爬虫会自动筛选吧
看看其他老板 的回答
让更多人参与回答
