怎样查看蜘蛛是否爬取过网站？有什么工具可以查询判断比较准确的，我想看看蜘蛛有没有来我的网站爬取，一般蜘蛛爬取正常要怎么判断？
服务器日志 可以看呀。
百度站长平台的抓取频次不就可以看吗
让更多人参与回答
