为什么我网站每次来百度蜘蛛抓取总会带几个其他IP但是后缀是百度蜘蛛,
但是IP是中国江苏的,可以理解是夹带着来的,上下差不了一两秒。
然后我把这几个IP屏蔽了,然后百度蜘蛛就不来了,这几天。这是什么情况
想要更多的蜘蛛,可以找我代引
把屏蔽去掉能恢复正常,那就是百度的蜘蛛
把屏蔽关掉再看看百度蜘蛛是否能再次来网站抓取
可以借助部分工具查看是否为百度蜘蛛,如果不是百度蜘蛛再去屏蔽对应的ip也不迟,但是不建议屏蔽,有的时候屏蔽错了可能是屏蔽了用户的ip
我们网站也是一样的,进多个不同IP的百度蜘蛛,这是正常的啊,你把屏蔽关掉再看看百度蜘蛛是否能再次来网站抓取。
让更多人参与回答