搜外网>搜外问答>问答页面

网站蜘蛛抓取重复页面多次怎么解决?

网站的蜘蛛是每天都来爬取,爬取次数是正常的唯一是抓取的页面都是重复的,怎么才能让蜘蛛不要重复的爬取页面链接?蜘蛛为什么光爬取重复的页面,其它无爬取情况?

追加问题
    4 人参与回答
刘畅
刘畅 · plc视频教程

这个影响不大吧

素材网
素材网 · 素材网,网站模板,网站素材,视频教程,sucaipro。com

找高手处理一下吧

诚笃企服
诚笃企服 · 诚笃公司注册企服 诚信为本,优质服务

做网站地图了吗?

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、如新站,蜘蛛只抓取首页也是正常的,持续优化提升信任度;
2、想要蜘蛛来访抓取内页,可以引蜘蛛操作,做好基础优化提升域名信任度,做好外链友链蜘蛛池收录宝指向不收录的内页,可以引蜘蛛去爬行内页。

SEO培训招生中
189