<p>基本每天抓取耗时都很长,404也不少抓,也是每天重复抓那几个404页面;现在就是网站数据不稳定,词库一天涨一天降,但是总的流量还行,小幅上涨。不要回答说反馈百度了,没点用!<br><br></p>
1秒是最好,最多4至5秒也可以接受,如果时间再长,恐怕蜘蛛会过段时间再来了。
问题不大,只要不出现抓取错误
但是把这个和关键词排名数据和日期对比的话,好像也没啥多大的联系; 比如一段时间抓取耗时很长,但是关键词大幅增加
让更多人参与回答