蜘蛛总是爬取页面重复怎么解决？
蜘蛛是怎么了，为什么一次次爬取页面都是重复的，反复爬取页面重复，这样爬取也没有什么作用，为什么蜘蛛一次次的爬取页面都是重复。怎么解决蜘蛛爬取的问题引导蜘蛛爬取页面正常？大家是如何解决的？
0 人参与回答
该问题还没有收到回答 :(
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
