现在搜索引擎都不去抓爬robots.txt了吗

微信

访问了四个网站几天的网站日志，但都没发现百度、360、搜狗这些搜索引擎有爬取robots.txt的痕迹，现在都不抓爬了？

追加问题
Robots 网站日志 搜狗 举报 2021-03-30 发布91 次浏览
最新问题
最新悬赏
滴滴友链蜘蛛池
广告位出租-排名优化
    3 人参与回答
A 0湖北楚胜汽车.谢非
A 0湖北 · 环卫洒水车、垃圾车、压缩式垃圾车、扫路车、清扫车等专用车销售

需要提交的啊

2 周前 赞同 0 评论 0
收藏 举报
评论取消
香港服务器租用
香港服务器 · 磐石云天海外服务器 香港服务器租用 美国服务器租用 香港站群服务器租用

需要提交的

2 周前 赞同 0 评论 0
收藏 举报
评论取消
张东明
张东明 · 纹绣培训，化妆品OEM

Robots.txt主动提交啊

2 周前 赞同 0 评论 1
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
交换友情链接，就用滴滴友链，方便！ 发布回答
  • 最近百度收录一直掉，文章一直都有更新
  • 机械类的企业站没那么多文章怎么办？
  • 网站莫名多了带有nofollow的反链，还是黄色网站，对我的网站有影响吗？该怎么取消呢？
  • 百度爱采购推广一个月多少钱三千够吗?
  • H1标签加在title标签上，这个操作给几分
  • nofollow标签增加多了影响收录吗?
  • 怎么样可以尽快提高网站的收录量
  • 网站如何写好一篇文章seo掌握什么技巧?
  • 公司的网站的跳出率太高怎么搞？要崩溃了
  • 网站404页面怎么处理404页面?

    • 专栏文章

  • 2017年最新百度快速收录新站技巧!
  • 云南SEO：三条链接轻松做seo优化排名
  • 抖音SEO，你知道吗？没错！抖音短视频也可以做SEO
  • 云南昆明SEO企业网站怎么优化？
  • 云南昆明SEO浅谈网站seo优化的20个问题
  • 蜘蛛进行网站日志爬行参数的详细说明
  • SEO优化之新页面如何打开：究竟是新窗口还是原窗口？
  • 如何对网站内容进行分类？
  • 云南seo张俊:新手对搜素引擎SEO优化有哪些误区?
  • 2017年最新百度排名规则及算法
    • SEO培训招生中
    153
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2021 SEOWHY 深圳市夫唯伙伴信息咨询有限公司