蜘蛛来网站抓取页面重复太高咋回事?
网站突然之间蜘蛛来的次数挺多,问题是抓取页面都是重复的,怎么会抓取页面重复太多?我怎么处理蜘蛛的问题,让蜘蛛抓取正常?蜘蛛每次来的正常,都是重复的作用不大,咋回事?
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!了解合理带链接的方法
本贴交流超时,回复已关闭
网站突然之间蜘蛛来的次数挺多,问题是抓取页面都是重复的,怎么会抓取页面重复太多?我怎么处理蜘蛛的问题,让蜘蛛抓取正常?蜘蛛每次来的正常,都是重复的作用不大,咋回事?