搜外网>搜外问答>问答页面

Bytespider是什么蜘蛛?每分钟上千次抓取?

<p><br></p><p><br></p><p>我 2cpu 4G内存 5M宽带,被这玩意弄得 502错误了</p><p>可以屏蔽它不?</p><p>https://www.44886.com</p>

追加问题
    8 人参与回答
唯爱シ念流年
唯爱シ念流 · 买网店,上猫元素!买卖网店便捷、安全、交易放心的电商综合性服务平台

屏蔽呀

我的网站  也遇到了这个Bytespider爬虫。你们是怎么解决的?

短荟APP
短荟APP · 短荟APP-短视频创业交流社区

不是百度,360,搜狗.神马就屏蔽掉咯

我的其它站点也发现这个了,楼主是否已经屏蔽?怎么处理的? 

楼上说不管的我也是笑了,它能把服务器拖垮信不。首先Robots禁止抓取,不知道遵不遵守robots,不遵守就封ip

蘋果與蛇
蘋果與蛇 · Google SEO,外贸企业的必备增长引擎,微信:15877068041

可以屏蔽掉

留个眼,等大佬解答。

爱约拍  突兀街

不知道,不管他

SEO培训招生中
189