搜外网>搜外问答>问答页面

某段时间我的网站做大幅调整,导致百度蜘蛛抓取压力非常

某段时间我的网站做大幅调整,导致百度蜘蛛抓取压力非常大,我们想先拒绝百度蜘蛛访问,又不能进行封禁,该怎么办

追加问题
    4 人参与回答

调整一下抓取大小呗

程东
程东 · 免费注册公司就找云算账

可能是你的调整吸引蜘蛛爬行,如果不影响的话不用管的

有个调整抓取大小的,你找下

你可以在根目录文件里禁止蜘蛛访问啊,改完在打开就行,我记得之前有改站申请还是啥来着,你可以提交一下