网站最近蜘蛛不来了，有时候还爬取重复的页面，我想查询看看蜘蛛记录情况有没有正常爬取，我可以通过什么方式去查询蜘蛛的情况？除了日志分析，有什么工具可以查询吗？谢谢大家推荐一款吧！
下载网站日志，找个在线日志分析工具，爱站也有
工具查看日志
有很多日志分析工具，搜搜就知道了
一般这些数据只有你服务器相关工具可以获取，常规就是看日志了。
宝塔有插件
让更多人参与回答
