我想看看百度蜘蛛有没有按时来网站,有时候觉得来的次数挺多,抓取频率怎么样,怎样查看百度蜘蛛的抓取情况?用什么工具查询还是咋查看?谢谢帮我解答!
看日志 绑定站长搜索平台
绑定百度资源站长平台
百度站长后看
我的是西部数码的虚拟主机,在根目录有一个叫logs的文件夹,里面都是压缩包形式的log文件,下载解压就行,log文件有蜘蛛访问记录
百度用于抓取网页的程序叫做Baiduspider - 百度蜘蛛,我们查看网站被百度抓取的情况主要是分析,网站日志里百度蜘蛛Baiduspider的活跃性:抓取频率,返回的HTTP状态码。 查看日志的方式: 通过FTP,在网站根目录找到一个日志文件,文件名一般包含log,下载解压里面的记事本,这即是网站的日志,记录了网站被访问和操作的情况。
让更多人参与回答