网站蜘蛛最近抓取页面有问题，反复每次抓取重复的页面多次，这个怎么解决蜘蛛的问题引导蜘蛛不要反复抓取一个页面多次，其它页面没有被抓取过，这个怎么解决问题？蜘蛛就认定重复的页面了怎么办？
进来学习下，发布外链
可以反馈一下这个啊
多提交网站地图，多更新优质内容，做好推送接口
可以看看你页面有什么问题
这种情况是因为你那个页面做得比较好，所以才老抓取他，能吸引蜘蛛，不抓取的就说明有问题不好对蜘蛛都没吸引力，他都不想看，反复抓取同一个页面是好事，你应该分析一下这个页面有哪些地方做的比较好，所以总是能吸引他抓取，不抓取的要找原因
让更多人参与回答
