网站突然之间蜘蛛来的次数挺多，问题是抓取页面都是重复的，怎么会抓取页面重复太多？我怎么处理蜘蛛的问题，让蜘蛛抓取正常？蜘蛛每次来的正常，都是重复的作用不大，咋回事？
你得提高一下你其余内容的质量了
说明重复抓取的那个页面质量高，其他页面质量差
因为你网站的内容质量不高
让更多人参与回答
