蜘蛛爬取页面重复太多怎么解决?
每次蜘蛛过来爬取页面,但是爬取页面都是重复的的太多,为什么页面重复的太多,怎么引导蜘蛛让蜘蛛爬取页面正常,每天更新文章就是为了吸引蜘蛛,蜘蛛到底是怎么爬取页面重复的也没有用啊?
4 人参与回答
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!了解合理带链接的方法
本贴交流超时,回复已关闭