蜘蛛到访消耗服务器资源大嘛? 悬赏1元 已结束
蜘蛛到访也占据cpu,内存,带宽的资源吗,如果有的话,消耗资源大嘛?蜘蛛太多也会导致网站打不开的情况吗? (就是有种情况,明明没多少搜索访客,配置看上去也够用,但是蜘蛛到访很多,但是就是经常网站打不开<排除其他问题的情况下>)
15 人参与回答
除了流量站 其实大部分站都不影响
除了流量站 其实大部分站都不影响
蜘蛛抓取量大 频次高,会影响到服务器
看推推蛙说的
这个少吧,除非抓取量很大的
一般蜘蛛抓取出现服务器崩溃的很少,基本上是采集的ip过多才会出现网站卡且容易服务器内存大,打开非常慢,建议直接在日志分析屏蔽相应的采集ip
楼上分析的很对哦