220.181.51.*IP疯狂抓取网页情况，都谁有？导致网站卡死 推荐热议 悬赏5元 已结束
220.181.51.*这个IP段
疯狂抓取网页情况，都谁有？直接导致网站带宽占满，网站访问极慢
UA是 "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/48.0.2564.116 Safari/537.36"
大家都谁有这个情况？
这个IP 好像是百度，因为禁掉后，百度站长平台就抓取不到，不禁吧，带宽又不行，求解决办法，
曾经试过调整百度抓取上限制，但是不好用，还是疯狂访问
首先，百度不会为难你，除非你作弊，还是你网站本身的问题，至于蜘蛛过多来访纯扯淡，你刷了吗，就算刷了也是好事，不过不排除你网站空间的问题；跟你谈点历史。
很久以前有一个浏览器名字叫 NCSA Mosaic,紧接着也出现了一个 Mozilla 的浏览器 (Mozilla 的意思是 Mosaic 终结者),后来
Mozilla 的正式发布版本是 没有风光多久，微软也推出了自己的 IE浏览器
。IE浏览器也支持框架,但是很遗憾，网站管理员们不认识它呀，因为IE的 User-Agent 没有Mozilla
所有没有人理它。后来微软抓狂了，你们不就是只认识User-Agent 头里有 Mozilla
字符的浏览器么，于是宣称自己是“兼容Mozilla”的，开始模仿Netscape，把自己标称为Mozilla/ (compatible; MSIE
Windows 95)。这样一来 IE 也有了Mozilla (其实是伪装的…) 所以那些框架也能看到了.
至于具体的你可以网上看看，我感觉你是浏览器的问题，当然还有我上述提到的问题。
是不是被d了？
没看懂，看来我需要学习的还有很多
有可能是被采集了
假蜘蛛
蜘蛛抓取不会导致网站奔溃的，除非假蜘蛛
有可能是采集你网站的内容
记得这个IP好像是蜘蛛啊
假蜘蛛吧
不是百度的吧
这个究竟是什么呢？
带宽升级一下吧
直接屏蔽了
这类情况我也经常遇到
这类情况我也经常遇到，我就直接屏蔽了
