浏览 读诗人 评论于 5 年前· 人参与回答 首先谢谢各位的热心解答, 主机卡爆的问题,我分析了一上午,也不断改进了一上午。 如果没有这些搜索结果,主机是非常平稳的,CPU利用率基本在10以内。 但突然加上过百万的链接,每条链接都需要读取数据库。所以一直卡住了。 最后把缓存时间设为:3……
浏览 读诗人 评论于 5 年前· 人参与回答 个人认为如果能解决快照问题,说不定会有所起色,毕竟每天一过0点就更新快照,说明百度蜘蛛爬行频率还是很好的,不知道是犯了百度哪条规则,一直卡住,动不 了。……