百度蜘蛛大量抓取列表分页怎么办? 推荐热议
<p>如下图,我是B2B网站,百度每天大量抓取用户商铺信息列表分页,带宽加到10M了都一样跑满。有抓取是好事,但site当天新收录的信息又寥寥无几。这个怎么破,要root分页抓取吗?求高手解答!</p><p><br></p>
48 人参与回答
有事没事提交一下,应该会有点用
百度现在收录机制是要高质量的文章,百度不收录只能说明你每天更新的文章不够好! 而且还有一种情况是这样的今天更新一篇文章 明天更新一万篇文章也是不可以的! 今天六点更新 明天十二点更新也是不行的 ,要有好的更新规律
华美波丽减肥网
啊啊啊,熊掌提交天级收录会比较快点
有一种叫蜘蛛协议,限制抓取就好了,不会操作可以来看,
这种东西很简单的,轻松解决从夫抓取的问题
建议主动提交这样比较好
这样不好吗
啊啊,好哒的一个蜘蛛啊,哦,原来你是只猪啊!
主动提交链接试试
那就你把个人资料页面优化下title。
我就是自己主动提交的,效果很好
这个没有关系吧?百度能够收录就是好事啊,最怕它不收,看我的网站,除了首页,啥也没有收,一个月了
做个自动推送试试
我们每天都被蜘蛛爬很久
不是特别理解你的担忧是什么。
1、抓取太多,你的宽带不够用了?
2、抓取了大量重复页面,权重分散?
如果是第一个的话,那就禁止呗,第二个的话,百度有个重要页面声明,建议可以试一试
我的也出现了这种情况,栏目页收录了好几条列表,这样会不会影响权重
新站一月 收录90多篇 现在一下子到了30多篇 这是咋回事 www点hichiba点com