今天咱们共同探讨研究一下到底百度蜘蛛喜欢抓取什么样的url

  我们都知道url层级只要不超过三层,百度蜘蛛还是会抓取的,但是我们今天不研究url的层级,主要研究百度蜘蛛喜欢抓取什么样的url,具体请看下面的介绍吧。
  这是列表页
  http://www.SEOwhy.com/a/
  http://www.SEOwhy.com/b/
  http://www.seowhy.com/c/
  http://www.seowhy.com/1/
  http://www.seowhy.com/2/
  http://www.seowhy.com/3/
  http://www.seowhy.com/a1/
  http://www.seowhy.com/b2/
  http://www.seowhy.com/c3/
  http://www.seowhy.com/baidua/
  http://www.seowhy.com/baidub/
  http://www.seowhy.com/baiduc/
  这是文章页
  http://www.seowhy.com/1.html
  http://www.seowhy.com/2.html
  http://www.seowhy.com/3.html
  http://www.seowhy.com/a.html
  http://www.seowhy.com/b.html
  http://www.seowhy.com/c.html
  http://www.seowhy.com/baidu1.html
  http://www.seowhy.com/baidu2.html
  http://www.seowhy.com/baidu3.html
  有时候我们的url层级非常短,文章质量非常高,网站结构也适合seo优化,可是百度蜘蛛就是不抓取我们想要让他抓取的url,哪怕是死链接,并且做过屏蔽的死链接依然抓取,两三个月,半年、一年这些死链接依然抓取,隔三差五的抓取,抓取量还非常大,这让很多站长头疼不已,同时整个互联网99.99%懂得seo的都知道,搜索引擎不喜欢抓取动态的url,于是我们把动态的屏蔽蜘蛛,但是依然抓取,而且还收录,收录量有时候比静态页面还多,所以今天就和大伙们一起研究一下,百度蜘蛛到底喜欢什么样的url?
  就拿上面的url为例子,请教各位大神发表你们的看法,都来研究一下。
  最后说清楚我对百度蜘蛛的看法,我认为百度蜘蛛比较喜欢抓取这样的url,不知道你们的观点如何?记得不研究url层级问题,你知道的
  http://www.seowhy.com/baidu1.html
  http://www.seowhy.com/baidu2.html
  http://www.seowhy.com/baidu3.html
  http://www.seowhy.com/baidua/
  http://www.seowhy.com/baidub/
  http://www.seowhy.com/baiduc/

追加问题
    8 人参与回答
刘清云
刘清云 · 10年SEO实战经验,与大家一起来探讨。
黄演和曾辉 等 2 人赞同该回答

谢邀请,问题答案可以参考http://ask.seowhy.com/question/10318

谭剑洪
谭剑洪 · 喜欢就微我“洪眉庄主”——微信:SEM963
黄演和 等 1 人赞同该回答

URL形式没有硬性好坏,只要点击路径够浅即可,蜘蛛就可以瞬间抓取,从美观及长短方面可以考虑一下。

刘振兴
刘振兴 · 搜外论坛咨询区版主 微信&QQ:870837079

感谢邀请,楼主说的百度喜欢什么样的URL,个人建议根据百度站长工具页面抓取压力来确定,跟URL关系不大,百度对于什么样的URL都可以抓取,所以我觉得URL简单,能够让百度识别就可以。

邓立博
邓立博 · I am 门老师,欢迎关注我的微信公共账号:menlaoshi001

阿门,佩服楼主的精神。

不过我以为只要层级够浅的话,网站结构更是一大要素。即是说,网站结构应该是决定某些URL是否被抓取的主要原因。

付科凯
付科凯 · 资深媒体人,百度站长社区版主,QQ:2786192861,微信:birazon,曾运营大型B2B网站,目前负责某跨境

楼主这是第二次提问这类问题了吧,之前大家都给你回答了,不明白为何你还提问,你是想给搜外多几个404页面吗?

钟锦源
钟锦源 · 玩魔术的seo从业者

不是很明白你为什么那么纠结这个问题,可能你是想通过url来提升收录排名
这个问题在你上一个问题贴中就说得很清楚了,百度蜘蛛不在乎url的形式的,只要是规范化的url,目录不深,url没有太多得参数,百度都是会抓取的。
你想提高网站的收录数,你要做的是提供优质的内容,入口明确,流畅的蜘蛛爬行,就可以了。
URL形式都是浮云。

吴星
吴星 · 文艺极客QQ群 255363059

你的问题是百度蜘蛛喜欢抓什么形式的 URL。
而增加了百度蜘蛛抓取次数后,索引量亦会上涨。
索引量上升后百度收录量会增多。
百度收录量多了以后,就能从百度带来流量。





但实际上百度蜘蛛抓取次数,可以人为操控。。。
上面截图的网站1个月来没有调整过 URL,只不过最近调高了百度站长工具中的压力反馈,于是抓取次数就涨了几倍。
所以百度蜘蛛喜不喜欢 URL 形式都没关系,只要能抓取到就行,那就让蜘蛛们每天把网站全爬一遍就好了。
黄演和
黄演和 · SEOer,从事各类推广:建站、seo、微信hyanhe

关于url的问题就不要纠结了~!
确保路径不会过深,字符串不过长即可