网站蜘蛛长时间抓取一个页面咋处理?
蜘蛛其它页面没有抓取过，总是抓取一个页面，反复抓取重复的页面，长时间抓取重复的页面，是网站存在问题还是什么原因？为什么会这样子，抓取重复的页面？
1 人参与回答
我也是来看看
蜘蛛其它页面没有抓取过，总是抓取一个页面，反复抓取重复的页面，长时间抓取重复的页面，是网站存在问题还是什么原因？为什么会这样子，抓取重复的页面？
我也是来看看
