网站蜘蛛好久没有爬取页面了，有时候爬取也是重复的内容，除了日志分析蜘蛛，有好用的工具可以查询蜘蛛吗？SEO优化什么工具可以查询蜘蛛爬取情况？麻烦大侠推荐一个，谢谢了！
空间服务器下载，dao 第二
空间服务器下载
百度站长后台的蜘蛛抓取反馈和自己服务器的日志分析。
服务器里面不是有一个网站日志么，看那个
很多在线看日志的网站， 比如好日志啥的
看网站日志吧，站长平台的抓取频次也可以参考一下
查看百度蜘bai蛛爬行记录的方法：
第一，前往du空间服务器，下载网站日志zhi。dao
第二，打开网站日志文件，搜索：Baiduspider。
百度（Baidu）爬虫名称：Baiduspider
第三，鉴别百度蜘蛛的真伪。
由于很多站长工具会模拟百度蜘蛛的名称来爬抓网站，因此，需要我们鉴别百度蜘蛛的真伪。
鉴别方法：
开始—运行—输入 cmd ，用命令nslookup +ip
只要是百度的IP段，代码中会有出现：name：baiduspider，如果没有出现，那就不说不是真的百度IP段
要么你去百度站长平台看看，要么就日志了，因为想要查看蜘蛛是咋爬取的要看IP，所以服务器里下载日志然后分析
让更多人参与回答
