<p>从今天凌晨一直爬行到现在这都是些什么ip,伪装成百度蜘蛛的吗?来个大神分析下</p><p></p>
1、如果抓取的量并未导致站点服务器空间挂掉,一般也无影响;
2、这几个ip抓取爬行的是首页和Robots文件,这几个非百度蜘蛛;
3、虚假蜘蛛来访也是正常的,做网站经常会遇到这种情况,有的是为了扫描网站漏洞;
我一直以为就我的网站里面出现这个情况,原来大家都有呀?通过这段时间的观察。这些IP疑似采集IP,前段时间屏蔽了,就没有了采集,这段时间放出来,开始了采集收录。
另外科普一下,现在的百度蜘蛛已经换方式了,不是这种类型了,链接发不出来,没办法了
屏蔽掉就可以了
这个是不是屏蔽掉就可以了
屏蔽掉就可以了,不用管
学习了,谢谢楼上的为我解答
屏蔽掉就可以了,阿里云的ip,假百度蜘蛛
估计你用的服务器是阿里云的吧,这些IP是阿里云巡视你网站内容的
让更多人参与回答