搜外网>搜外问答>问答页面

怎么禁止蜘蛛爬取页面重复率太高？

微信

网站怎么禁止蜘蛛反复的爬取页面重复，每次爬取的都是重复的页面，多次爬取怎么禁止，如何引导蜘蛛爬取页面正常，有什么好的办法可以让蜘蛛爬取正常？除了发链接，还能做什么有利于的？

追加问题
举报 本帖由用户发布，如有侵权联系删除  2022-11-14 发布396 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    2 人参与回答
多多呀ᥫᩣ
多多呀ᥫᩣ

不要蜘蛛爬取那么多，那就弄个roboits协议就完事了呗、；

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
阿信
阿信

不要蜘蛛爬取那么多，那就弄个roboits协议就完事了呗、；

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 百度竞价推广效果怎么样如何加入？
  • 如何抓取百度搜索出来的内容网址
  • 现在还有什么免费流量软件吗？
  • 百度是不是取缔了SEO优化啊
  • 新站如何提交怎么向百度第一次提交？
  • 百度提示网站存在风险模式怎么解决？
  • seo优化怎么提高流量权重？
  • 搜外滴滴友链怎么交换成功？
  • 网站香港服务器不备案会影响流量吗？
  • 网站改版有什么事项要注意？
    • SEO培训招生中
    190
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司