搜外网>搜外问答>问答页面

怎样区分蜘蛛真假呢? 悬赏1元已结束

微信

怎样区分蜘蛛真假呢? 比如蜘蛛是真的百度蜘蛛还是伪装的采集蜘蛛呢？

以及怎样查询每天蜘蛛或者IP的访问量有多少的呢？（在服务器里看）

百度蜘蛛举报 本帖由用户发布，如有侵权联系删除 2023-03-19 发布797 次浏览

交换友情链接，就用搜外友链，方便！

10 人参与回答

不念

看蜘蛛量可以用工具分析一下网站日志

网站log日志下载下来，利用蜘蛛分析工具进行分析

丫丫 · 唵嘛咪叭咪吽

可以根据IP字段来判断

杭州继保 · 微机保护行业

同意楼上的说法

MR.No

同意楼上的说法

浅语

点击“开始”-“运行”-“cmd”-“输入nslookup IP地址”-“回车”

武荣网络 · 网站建设/仿站、美团点评运营、云服务器、DIY小程序、网站优化(SEO)、竞价托管(SEM)、网络推广。☛☞

　　区分蜘蛛真假的方法：

　　一般来说，真正的蜘蛛都会有自己的 User-Agent，还有来源IP等等特征，通过这些特征可以判断蜘蛛是否是真的，而不是伪装的采集蜘蛛。比如，百度蜘蛛的User-Agent是"Baiduspider"，而伪装的采集蜘蛛一般没有这个User-Agent。

　　查询蜘蛛或者IP的访问量：

　　可以通过在服务器上查看日志来查询每天蜘蛛或者IP的访问量。一般来说，服务器的日志文件记录了每个请求的来源IP、User-Agent等信息，可以通过这些信息来统计访问量。具体的方法需要根据不同的服务器和操作系统来确定，一般通过shell命令或者日志分析工具来实现。