搜外网>搜外问答>问答页面

怎么知道有没有蜘蛛来过？

微信
追加问题
本帖由用户发布，如有侵权联系删除  2020-12-31 发布770 次浏览
举报
其他问题
 
    12 人参与回答
用户72586 · 北京汽车养护品厂家/OEM加工/三元催化器/进气/发动机清洗剂

百度资源平台看看有记录

5 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
用户171490

你知不知道有个东西叫网站日志

5 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
用户177206 · 首汽租车-旅游大巴租赁400-622-2262

日志了解一下

5 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消
用户103266 · 南京车位涂鸦

看网站日志啊

5 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
用户133447

看百度站长平台最准确。

5 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消
用户183845 · 星雅图顶墙定制，集成墙面，集成吊顶原材料厂家（不含施工）

楼上正解    作为多年站长useragent  我都没去看过 直接抓取频次  完事

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户183609 · 爱云查

看useragent里面有没有包含Baiduspider,Baidu|Googlebot,Google|Sosospider,SoSo|YoudaoBot,YouDao|bingbot,Bing|Sogou web spider,SoGou|Yahoo! Slurp,Yahoo|Alexa,Alexa|360Spider,So

5 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
用户187096

简单直接点，看百度站长后台的抓取频次，有抓取自然是有蜘蛛来过了

5 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消

收录宝

49151 58169 71169 81612 92182 02796 99843 08942 36348 48760 61343 73887 86425 11591 99178 24302 36799 49342 19682 29955

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司