主动推送一些其他的页面，或者提交Sitemap
想办法减少抓取次数被
被抓取多次并没有什么问题啊,如果你看的是蜘蛛访问记录抓取多次也可以是某条连接过来的,比如随机随机推荐的链接,或者外部广告。 如果你查的出来源,还是发现多次短时间内同时抓取,那么有可能这个页面当时访问受限,或者打开不流畅,应该考虑优化服务器,或者换个空间,具体原因需要你自己查”
重复抓取难道不好吗
让更多人参与回答
