搜外网>搜外问答>问答页面

蜘蛛爬取页面重复怎么解决？

微信

蜘蛛每天来网站爬取页面，但是每次爬取页面都是重复的页面，为什么网站蜘蛛会多数爬取重复的页面，如何解决蜘蛛的问题不让蜘蛛爬取页面重复了？需要怎么做呢，怎么引导蜘蛛，麻烦各位大神指点感谢！

追加问题
举报 本帖由用户发布，如有侵权联系删除  2022-09-09 发布317 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    4 人参与回答
多多呀ᥫᩣ
多多呀ᥫᩣ

老板说的真对·

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
想象
想象

同意楼上的观点哦

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
一年之计
一年之计 · 南瓜号

同意楼上的观点哦

1 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
A拉卡拉小高
A拉卡拉小

如果你觉得这些被重复抓取的页面没有用，可以设置Nofollow；

其次，及时提交想要被抓取的目标页面（写进Sitemap，主动提交等等都行）；

最后，注意目标页面的链接入口，通过内链和外链等优化，来促进搜索引擎蜘蛛抓取。

1 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 网站排名到底要怎么做才能稳定
  • 如何提高网站的访问速度？
  • 站长们，做SEO还有前途吗
  • 新站50天才收录首页，真的是慢啊
  • 网站出现static目录的404死链如何处理
  • 索引量过万突然暴涨很多怎么回事？
  • 哪位大神帮忙看看，是被K了吗？
  • 同服务器上可以放几个站会不会分散权重？
  • 怎么增加高质量的外链
  • 开源程序pbootcms 和dede都还能用吧 你们都用啥
    • SEO培训招生中
    190
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司