8.134.65.20[?] 这个ip一直爬,一天爬那么多?用log好显示是百度蜘蛛,但是这个应该不是百度蜘蛛吧?这软件不靠谱啊。。。。这种不是百度蜘蛛的ip要屏蔽吗?
1、ip显示的是阿里云的ip;
2、这种ip没必要去专门的屏蔽,网站被模拟蜘蛛或者其他蜘蛛来访都是正常的,只要他的抓取并没有使得你网站打不开,或者不稳定,可以忽略即可。
这种IP蜘蛛吗?好像我也有,坐等大佬来回答问题。
那你屏蔽下看看有什么损失
那你屏蔽下看看有什么损失,这样做好分析
没必要吧,除非你的网站不想公开
这是一个来你网站摸鱼的蜘蛛,等下班
坐等大佬来回答问题
让更多人参与回答