1167 次浏览

Zhongc

他还没有填写个人简介

2019-12-01 加入搜外
未设置 现居
2 回答
1 赞同
2277 浏览

百度蜘蛛大量来,头条蜘蛛就退场,为什么 抓取频次 百度蜘蛛

您好,我是头条搜索的工作人员,我们在持续优化蜘蛛的压力控制策略,近期改善也比较明显。目前我们的spider策略会结合网站抓取的失败率和延时情况智能调整抓取压力。出现图示的现象可能和这个原因有关,怀疑当时网站运行本身有些异常。此外搜索引擎蜘蛛……