3 人参与回答
我的微信:sec_vip 等 1 人赞同该回答
什么时候来抓取,取决于你的站内内容更新大致时间,比如你的站点一直保持在早上9点更新内容,蜘蛛每次来的时候都能抓取到你的最新内容,那么就会形成一个固定的抓取时间。
而这个时间可以通过最近收录的页面快照来决定,就是快照收录时间之前更新内容,就能赶在每天蜘蛛抓取时被抓取。
我的微信:sec_vip 等 1 人赞同该回答
抓取时间和抓取频次以及服务器稳定程度有关
我的微信:sec_vip 等 1 人赞同该回答
抓取时间和抓取频次以及服务器稳定程度有关