蜘蛛抓取页面重复太高怎么解决?
网站的蜘蛛最近爬取页面不正常,多数是重复率太高了,怎么引导蜘蛛正式的爬取情况,网站如何让蜘蛛爬取页面正常,为什么蜘蛛奇怪了有时候爬取也没有记录,这是什么原因?多谢解答疑问的高手们!
2 人参与回答
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!了解合理带链接的方法
本贴交流超时,回复已关闭