20 人参与回答
这个是正常的,网站能正常访问,没有问题
谷歌的也没太大作用
正常的,网站能被蜘蛛正常爬取,就行了
这个是正常的,不可能一个网站都是正常的蜘蛛爬取
没见过这种蜘蛛?
这个是正常的,不可能一个网站都是正常的蜘蛛爬取
如果觉得多了,屏蔽这个ip
一般这种情况都是正常的
正常的,只要是200的返回码就行
正常啊,是200码就行了
可能是错误显示吧,看IP和看状态码都是正常的。
是不是网站最近改变了,或者有变动?!之前站点改变了就特别多这种蜘蛛,不过影响不大的
蜘蛛抓取有很多因素的,不会正常影响网站的
