请问蜘蛛是怎么判断网站更新的?
百度会根据以往抓取资源的规律进行预判
如果网站更新保持一定频率,那么蜘蛛就会养成习惯在那个时间点进行抓取,同时当我们把链接提交到搜索资源平台时,就相当于是告诉百度我内容更新了,让他派蜘蛛来抓取
发布内容就会产生新页面,蜘蛛发现这个页面之前没有爬过,就会认为这个就是新的内容了,一般都这样
发布内容就会产生新页面,蜘蛛发现这个页面之前没有爬过,就会认为这个就是新的内容了,
学习了乐乐乐乐乐乐
看日志,状态码是不是304就知道了
网站产生新连接
发布内容会产生新页面的亲
让更多人参与回答