搜外网>搜外问答>问答页面

蜘蛛爬取页面都是重复怎么处理?

微信

网站页面蜘蛛来爬取了，但是爬取的页面都是重复的，爬取重复的没啥用，有方法引导蜘蛛到其它页面爬取吗？蜘蛛反复无常，太奇怪了怎么办？

追加问题
举报 本帖由用户发布，如有侵权联系删除  2020-12-31 发布537 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    3 人参与回答
浮生挽歌
浮生挽歌 · seo、网站建设

内链引导去爬别的内容页。

3 年前
IP属地：广西
赞同 0 评论 0
收藏 举报
评论取消
冷却塔
冷却塔 · 冷却塔

这没有关系 是真的还是假蜘蛛

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
鹰米讲解器
鹰米讲解器 · 徽马科技鹰米导览是一家专业从事团队无线讲解器、自助导览机、展厅分区讲解系统的品牌生产厂家。

不想让爬取的内容，可以将其链接放在Robots，不让其抓取

3 年前
IP属地：安徽
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 公司改名之后，网站以前发布的内容要不要重新更改下？
  • 百家号怎么提高粉丝数量?
  • 怎么Google的排名呢？
  • 小语种那些类型的网站好做，什么小语种好，内容怎么来？
  • 百度一直不收录是什么原因？
  • 搜狐里面怎么才能做这种外链？
  • 老域名，网站关了一个多月，排名还会回来了吗
  • 内页有收录 为什么site没有呢？
  • 我的网站是 PC：www.cmerzh.com 移动：m.cmerzh.com
  • 大佬们问下阿里云备案要多久？
    • SEO培训招生中
    189
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司