求助,近一周内,有2个异常的IP段,不断的爬取我的网站,请大家看一下,有遇到过吗? 悬赏1元 已结束
2个IP段:*号代表着0-255不断换
14.215.176.*;Version/4.0 Chrome/76.0.3809.89 Mobile Safari/537.36 T7/11.19 SP-engine/2.15.0 baiduboxapp/11.19.5.10 (Baidu; P1 8.0.0)"
36.110.199.* ;Version/4.0 Chrome/76.0.3809.89 Mobile Safari/537.36 T7/11.21 SP-engine/2.17.0 baiduboxapp/11.21.3.10 (Baidu; P1 9)"
可以看到,后面写的是baiduboxapp,网上查了一下,好像有说是百度的移动蜘蛛,但是现在是每天凌晨1点准时来爬取,一直到晚上7点多才停止,而且爬了一周了,总是爬不完。
请教大家一下,有遇到过这2个IP的访问吗?或者有谁确切的知道,这是不是百度的蜘蛛?
9 人参与回答
起来了吗