robots已经屏蔽了动态url，为什么蜘蛛还在抓

微信

微信图片_20200707094736

微信图片_20200707094721


首先跟技术沟通过动态url做跳转，但是忘记技术说什么原因了，好像是说现在这些动态url其实都是空的没办法做，我就把动态url都屏蔽了，但是蜘蛛缺每天还在大量的抓，是何解，为什么不尊重我的robots协议

追加问题
Robots 跳转 举报 2020-07-07 发布584 次浏览
最新问题
最新悬赏
滴滴友链蜘蛛池
广告位出租-排名优化
    4 人参与回答
A 0湖北楚胜汽车.谢非
A 0湖北 · 环卫洒水车、垃圾车、压缩式垃圾车、扫路车、清扫车等专用车销售
权重蜘蛛-池出租丨支持测试 等 1 人赞同该回答

需要时间来沉淀啊

9 个月前 赞同 1 评论 0
收藏 举报
评论取消
j
jane ·
权重蜘蛛-池出租丨支持测试 等 1 人赞同该回答

要不跟百度那边反馈一下，生效了呀

9 个月前 赞同 1 评论 1
收藏 举报
评论取消
惊蛰、
惊蛰、

aspx后缀的文件也用Robots屏蔽了，也是每天都抓，非常奇怪，应该如何操作，求大神讲解下

9 个月前 赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 网站里面放产品宣传视频对优化有影响吗？
  • 为什么site查收录的时候有一些带www的链接，有一些不带www的链接
  • 百度前几页排名是不是一个萝卜一个坑
  • 网站日志中出现很多不是网站上的目录或文件，404错误怎么回事呢？
  • 百度蜘蛛抓取时间问题
  • dede系统 怎么手机端点网页变成手机端！求解答
  • 网站每天提交，啥时候能收录呢
  • 我的网站是动态链接，有一些收录，不过不多，这个时候改成伪静态链接会不会好一点？
  • 友链对关键词排名起到的作用大不大？
  • 死链快照被收走，什么时候可以增加快照？

    • 专栏文章

  • 2017年最新百度快速收录新站技巧!
  • 云南SEO：三条链接轻松做seo优化排名
  • 抖音SEO，你知道吗？没错！抖音短视频也可以做SEO
  • 云南昆明SEO企业网站怎么优化？
  • 云南昆明SEO浅谈网站seo优化的20个问题
  • 蜘蛛进行网站日志爬行参数的详细说明
  • SEO优化之新页面如何打开：究竟是新窗口还是原窗口？
  • 如何对网站内容进行分类？
  • 云南seo张俊:新手对搜素引擎SEO优化有哪些误区?
  • 2017年最新百度排名规则及算法
    • SEO培训招生中
    153
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2021 SEOWHY 深圳市夫唯伙伴信息咨询有限公司