搜外网>搜外问答>问答页面

蜘蛛爬取重复页面如何解决?

网站蜘蛛有来爬取页面,都是爬取的重复页面,百度根本没有收录,有啥办法不让蜘蛛爬取重复页面可以增加nofollow标签禁止吗?那么也影响蜘蛛正常爬取吗?

追加问题
    9 人参与回答

没必要

人生如Xi
人生如Xi · 聘达人是帮助求职者找工作、企业招聘员工的蓝领招聘平台,招聘求职找工作,找靠谱蓝领,马上聘达人!

没影响 不要在意

没什么大问题

应该是没啥大问题的

素材网
素材网 · 素材网,网站模板,网站素材,视频教程,sucaipro。com

这个应该正常的吧,不影响

燕子
燕子 · 达尔文服装智造平台_为跨境电商企业提供服装货源的供应链

什么重复页面 是一直爬同一个页面吗 很正常呀 我首页 和栏目页 每天被同样ip百度蜘蛛爬好多次

对应链接放入新文章入口就好

巴黎只有塔
巴黎只有塔 · 喜欢护肤,进入护肤行业!

一般加Nofollow标签都是不想传递权重的无用链接,建议别用,你网站本身的链接就是有助于内链排布的

我觉得没有问题吧 没必要写Nofollow吧 不然他不抓了 肯定也是收录不了了