搜外网>搜外问答>问答页面

网站上线初期设置robots禁止抓取是否对收录有影响?

微信
追加问题
Robots 举报 本帖由用户发布，如有侵权联系删除  2023-02-16 发布319 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    4 人参与回答
尴尬了
尴尬了 · seo小小小的N次方白

都禁止了哪来的收录

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
天行健咨询
天行健咨询 · 精益生产管理与六西格玛管理咨询，培训机构

我们要回答这个问题，首先要了解为什么要设置Robots的意义，我们一般设置robots是为了提高蜘蛛爬取效率，降低垃圾蜘蛛的骚扰，如果站点内容多，蜘蛛抓取数量提高之后，对服务器也是有一定影响，再加上网站初期由于内容没有完善，并不想让用户看到搜索结果，所以我们可以适当屏蔽蜘蛛抓取，一般我们会设置成这样：

User-agent: *
Disallow: /

这个命令是屏蔽所有蜘蛛抓取，这样的话，所有蜘蛛不会爬取网站数据。

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
人生＝π
人生＝π · 建站小程序空间域名服务器百度爱采购

肯定有影响。都被禁止了。蜘蛛肯定不来了

1 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 网站的Robots.txt文件如何设置？
  • 网站的文章都是采集别人权7权8的网站，以后网站起来了，会被告知侵权吗？
  • 独立移动端网站有必要设置robots吗
  • 百家号新手期作品未推荐可以撤回吗？
  • 哪里可以免费发布外链免费？
  • nofollow标签对于蜘蛛有没有什么影响？
  • 如何通过ALT标签提升网站的排名?
  • 搜外6系统建站，两个页面调用的同一个页面模版 ，不会独立生成可编辑的页面吗？现在是修改一个 两个一起
  • 广西景之道环保科技有限公司 垃圾玩意，逮住我一个站文章使劲抄，就改个公司名称，有意思嘛
  • 网站跳出率在75-80%之间算高吗
    • SEO培训招生中
    190
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司