Baiduspider-render/2.0是什么蜘蛛

3,935 次浏览

从3月15号左右,日志里就开始有Baiduspider-render/2.0 这个蜘蛛了,抓取的文件有图片、JS、css 字体文件 

以下提供两天日志记录(来自不同站)

2017-03-15 21:33:26 GET /other/iconfont.woff - 111.206.221.101 HTTP/1.1 Mozilla/5.0+(iPhone;+CPU+iPhone+OS+9_1+like+Mac+OS+X)+AppleWebKit/601.1.46+(KHTML,+like+Gecko)+Version/9.0+Mobile/13B143+Safari/601.1+(compatible;+Baiduspider-render/2.0;++http://www.baidu.com/search/spider.html)   (这里省略域名)/css/common.css 200 0 0

----------------------------------

2017-03-16 14:57:15 GET (这里省略域名)/wp-content/cache/wpfc-minified/5c344c24b8cb2a6a5505419901ce0cdb/1489586996index.js - 111.206.221.5 HTTP/1.1 Mozilla/5.0+(iPhone;+CPU+iPhone+OS+9_1+like+Mac+OS+X)+AppleWebKit/601.1.46+(KHTML,+like+Gecko)+Version/9.0+Mobile/13B143+Safari/601.1+(compatible;+Baiduspider-render/2.0;++http://www.baidu.com/search/spider.html) (这里省略域名) 200 0 307

大家的日志里有没有这个蜘蛛,大家觉得 这个蜘蛛会是干嘛的

(貌似user agent都相同)

追加问题
    2 人参与回答

Time:2017-06-12.12:45:19 robot:Baiduspider URL:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) APPleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
page:/nbquan/285.html

是百度专门访问CSS、Javascript和图片信息的UA