搜外网>搜外问答>问答页面

请问蜘蛛是怎么判断网站更新的？

微信

请问蜘蛛是怎么判断网站更新的？

追加问题
网站更新
本帖由用户发布，如有侵权联系删除  2020-03-27 发布1,421 次浏览
举报
其他问题
 
    10 人参与回答
用户150352

百度会根据以往抓取资源的规律进行预判

5 年前
IP属地：香港
赞同 0 评论 0
收藏 举报
评论取消
用户144201 · 佛系佛系，排名随缘，收录随缘，转化随缘

如果网站更新保持一定频率，那么蜘蛛就会养成习惯在那个时间点进行抓取，同时当我们把链接提交到搜索资源平台时，就相当于是告诉百度我内容更新了，让他派蜘蛛来抓取

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户140638 · 同步带轮

发布内容就会产生新页面，蜘蛛发现这个页面之前没有爬过，就会认为这个就是新的内容了，一般都这样

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户152773 · 永锢壳体，铝合金外壳，铝合金机箱CNC加工定制厂家

发布内容就会产生新页面，蜘蛛发现这个页面之前没有爬过，就会认为这个就是新的内容了，

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户156668

学习了乐乐乐乐乐乐

5 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消
用户156616 · 健身教练培训

看日志，状态码是不是304就知道了

5 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
用户128309 · ✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈㊣伸出发财的小手帮我点一下=。=

网站产生新连接

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户165235 · 激光切割机

发布内容会产生新页面的亲 

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消

收录宝

j/120 .com/ y/121 y/122 y/123 y/124 oduct m/Com y/134 y/135 y/136 y/137 y/138 y/139 y/140 y/141 y/142 y/143 y/144 y/145

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司