搜外网>搜外问答>问答页面

蜘蛛爬取页面重复如何解决？

微信

蜘蛛最近反复的抓取爬取页面重复，重复的爬取页面作用不大，如何引导蜘蛛爬取页面正常，为什么次数很多都是重复的页面？这是什么情况？之前都没有这样过，蜘蛛爬取是怎么了？

本帖由用户发布，如有侵权联系删除 2022-12-20 发布397 次浏览

交换友情链接，就用搜外友链，方便！

0 人参与回答

该问题还没有收到回答 :(

收录宝