网站蜘蛛爬取重复的页面怎么办?
网站蜘蛛每天都会来爬取,爬取的页面多数是重复的,这是什么原因为啥蜘蛛爬取重复的页面,不爬取别的页面?我怎么让蜘蛛爬取正确?谢谢回答问题!
3 人参与回答
我的微信:sec_vip 等 1 人赞同该回答
制作网站地图,发一些外链
我的微信:sec_vip 等 1 人赞同该回答
多做些外链引流,内链引导,蜘蛛就爬取内页了
我的微信:sec_vip 等 1 人赞同该回答