搜外网>搜外问答>问答页面

app下载网站,蜘蛛疯狂抓取我的下载文件地址带宽被跑满,怎么破 悬赏8元 已结束

如题,带宽跑满的原因可能是蜘蛛抓取,或者被恶意采集?不知道怎么处理的呢。

下载地址是个二级域名,我能robos屏蔽蜘蛛?还是怎么搞呢?有没有做过高权重下载站的朋友请教一下!

追加问题
    12 人参与回答
最佳回答
IMG
IMG · 品牌运营互联网推广大拿,有问题追问,一般GPT回答不对的会手动回复。

下载站不太可能是真实蜘蛛。同样也做下载站的,蜘蛛主要抓取的还是页面,不会抓取文件。大概率是被人爬了,你看看你站长里的抓取按比例能对的上数么?并且可以使用抓取诊断看百度蜘蛛,他会爬么?

免费在线备课命题组卷出卷
免费在线备 · 免费在线出卷组卷,千万资源免费在线浏览~
流沙。 等 1 人赞同该回答

是不是被盗链了?

流沙。 等 1 人赞同该回答

可以先屏蔽蜘蛛试试

艾克SEO
艾克SEO · ⚫新站快收⚫K站恢复 ⚫网站建设外贸 商城小程序 ⚫SEO优化 诊断 托管 运营 ⚫QQ/微信:97358052
网站建设 等 1 人赞同该回答

1、蜘蛛抓取占带宽不明显的,除非集中大量的蜘蛛爬取才会明显占用带宽;
2、下载可以限制下载速度、IP限制多久下载一次等等;
3、向服务器商反馈处理。

重工机械小刘 等 1 人赞同该回答

建议去提交工单,问问啥问题咋解决,官方的回复参考下
是不是那个插件占用带宽,或者哪里出问题,但靠下载地址不至于这样,先去问问,看咋解决

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
罗凌峰 等 1 人赞同该回答

1、不想分权和蜘蛛进一步抓取深入,Nofollow即可,如果想禁止蜘蛛抓取可封禁URL;
2、带宽总是跑满,看看是否是因为别的因素影响,可以去提交工单,让服务器官方去检测下,看是哪里带宽占据很大,是否真的ip访问,以及有何建议,服务商也会根据情况给出解决办法。

qwoeyhoii333
qwoey · 奈斯导航为广大网民精心筛选、整理国内外各类优秀的网站大全,各位站长可以免费提交收录。==》

一般Robots可以屏蔽,如果是假蜘蛛那么需要根据IP段屏蔽了

可以屏蔽掉它,不让百度蜘蛛抓取

先屏蔽蜘蛛试试,反馈服务商问问客服

PE管厂家
PE管厂家 · pe管生产厂家18956729555,专业生产pe给水管、钢丝网骨架复合管、mpp电力管、燃气管、ppr管

有问题服务商解决,

丫丫
丫丫 · 唵嘛咪叭咪吽

可能不是真蜘蛛,先把该频段IP屏蔽试试