百度蜘蛛重复抓取一个页面?
蜘蛛是如何来我们网站抓取的,蜘蛛经常来网站,百度蜘蛛同时抓取两次重复的页面,其他页面不被抓取是什么原因?可以让蜘蛛不要重复抓取一个页面吗?比如指定的页面,让蜘蛛抓取。
7 人参与回答
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!了解合理带链接的方法
本贴交流超时,回复已关闭