726
浏览
提交死链但是百度蜘蛛为什么还会抓取？ 百度蜘蛛
提交死链但是百度蜘蛛为什么还会抓取？
百度蜘蛛
相关话题
1640
问题
726
浏览
怎么去识别百度蜘蛛 发现很多蜘蛛都是国外的 百度蜘蛛
怎么去识别百度蜘蛛 发现很多蜘蛛IP都是国外的 严重浪费服务器资源
725
浏览
百度蜘蛛怎么提升抓取次数多些？ 引蜘蛛 百度蜘蛛
蜘蛛抓取爬取次数越来越少了，每天保持更新了内容，可是蜘蛛爬取抓取次数没有以前多了，如何吸引蜘蛛提升蜘蛛的抓取量，当蜘蛛越来越少是哪里问题，怎么让蜘蛛爬取的多些？从之前的好几百一天，到现在的几个访问量，这个怎么解决？……
725
浏览
一年多的网站已经8个月没有收录新页面了，怎么破？ 伪原创 百度蜘蛛 文章
开站前五个月收录正常，从第6个月到现在没有收录一个新页面，每天百度蜘蛛也有200左右，但是只爬五个月以前添加的文章，不爬以后添加的文章。内容是伪原创的，问题是流量还可以，有500-800左右。想不通应该怎么办……
724
浏览
百度蜘蛛抓取少，不稳定，有什么办法解决？ 百度蜘蛛
百度蜘蛛抓取少，不稳定，有什么办法解决？
724
浏览
百度蜘蛛抓取时间突然爆表，这是啥情况~ 百度蜘蛛
<p><br></p><p>小站www.mengchuangweiye.cn 抓取时间突然爆表，这是啥情况~<br></p>……
724
浏览
723
浏览
百度蜘蛛如何抓取网站数据的，搜索引擎蜘蛛爬取网站，抓取数据的规则是什么? 百度蜘蛛 索引
百度蜘蛛如何抓取网站数据的，搜索引擎蜘蛛爬取网站，抓取数据的规则是什么?
723
浏览
722
浏览
722
浏览
众搜索引擎排名主要依靠两点 排名 百度蜘蛛 文章
众搜索引擎排名主要依靠两点：网站与关键词的相关性及网站真实权重，因为任何搜索引擎都不会告诉站长他是怎么来判断网站真实权重的，也没有官方的解释，所以只能靠猜了。每当发布者发布一篇文章后，百度会根据发布的内容以及历史行为给你打分，然后重新计算你……
722
浏览
奇怪，新站百度蜘蛛没来抓取却收录了 日志分析 百度蜘蛛
最近新站一直在关注百度蜘蛛的来访情况，通过日志分析来的百度蜘蛛都是假蜘蛛，没看到一个真实的蜘蛛，结果网页却收录了三个，莫不是那些隐藏的假百度蜘蛛有真实的百度蜘蛛……
721
浏览
721
浏览
一般的企业网站百度蜘蛛抓取频次多少范围算正常的？ 抓取频次 百度蜘蛛
一般的企业网站百度蜘蛛抓取频次多少范围算正常的？
720
浏览
720
浏览
百度蜘蛛为什么不直接屏蔽垃圾链接或是不传递权重呢？ 垃圾链接 百度蜘蛛
百度蜘蛛为什么不直接屏蔽垃圾链接或是不传递权重呢？
720
浏览
720
浏览
百度蜘蛛不来网站是什么意思呀？ 引蜘蛛 百度蜘蛛
蜘蛛都长时间没有来了，为什么百度蜘蛛不过来网站抓取页面内容，我都更新了很多的内容了，可是依然没有看到蜘蛛的存在当蜘蛛不过来爬取是什么意思呀？有没有什么方法可以吸引蜘蛛的，长时间都两个星期没有见到蜘蛛了，蜘蛛到哪里去了咋不来我的站内了，真的特……
719
浏览
719
浏览
这些IP是干嘛的？天天来冒充百度蜘蛛抓取频道 百度蜘蛛
<p>我全部给他屏蔽了，天天冒充百度蜘蛛来抓取网站的所有频道页面。看着好烦</p><p></p>……
719
浏览
718
浏览
717
浏览
717
浏览
716
浏览
百度蜘蛛不访问抓取怎么办？ 网站优化 百度蜘蛛
网站优化过程中，但是蜘蛛没有来网站访问抓取页面，每天保持正常的更新，为什么会蜘蛛不来了，如何才能解决蜘蛛的问题，怎么引导蜘蛛的爬取页面是正确的？平时大家如何优化的？……
716
浏览
百度蜘蛛爬取页面不正常有什么解决的办法？ 百度蜘蛛
网站查询发现蜘蛛抓取页面不正常，每次抓取页面都来访问也有痕迹，就是多数都是重复的页面，反复爬取页面重复率太高了，有什么好的方法可以让蜘蛛爬取正常，为什么爬取重复的页面？……
716
浏览
716
浏览
715
浏览
网站被k了还会有百度蜘蛛来吗？ 网站被k 网站恢复 百度蜘蛛
网站被百度彻底K站了，没有想到就是被K了，现在剩下一个首页还在，请问网站被K了后还有百度蜘蛛爬取页面吗？如果有了蜘蛛爬取页面，对网站恢复是不是有作用呢？我的站真的被K了郁闷吧？怎么办？……
714
浏览
网站来的蜘蛛太多了，现在只想让百度蜘蛛抓取，有什么方法？ 百度蜘蛛
现在我的网站被很多蜘蛛爬，我想只让百度蜘蛛爬，百度蜘蛛IP多少？能设白名单么？
714
浏览
714
浏览
百度蜘蛛爬几次网站能收录？ 引蜘蛛 百度蜘蛛
网站每天保持更新了，长时间都是更新也没有断开为什么蜘蛛不来网站，百度蜘蛛完全不来网站内了，有什么可以吸引蜘蛛的方式，蜘蛛不来了我怎么引导蜘蛛，一般百度蜘蛛爬取几次才被收录内容？当蜘蛛不过来的时候有什么办法？……
713
浏览
713
浏览
为什么新站半个月没有收录，蜘蛛也不抓取？ JS 百度蜘蛛
学了一点搜外的基础知识，做了一个房贷计算器(www.fdjsq.com.cn)的网站，里面包括的内容有房贷计算器，公积金资讯，提前还款资讯，商业贷款资讯，公积金怎么提取，但是百度蜘蛛就是不抓取？……
713
浏览
我又回来了，大佬们，最近发现一个问题，就是百度蜘蛛抓取问题 JS 百度蜘蛛 索引
<p>不知道为啥，我网站的百度蜘蛛一直在抓取一些乱七八糟的东西，js、css、图片等文件频繁的抓，但是就是不抓栏目页，每天栏目页抓取少的可怜，如图所示，但是谷歌等其它搜索引擎蜘蛛抓取的就正常，有没有大佬知道这是怎么回事</……
712
浏览
百度蜘蛛不来网站抓取怎么解决？ 引蜘蛛 百度蜘蛛
蜘蛛一次次的都不来网站了，一般蜘蛛爬取多少次才被收录，怎么增加蜘蛛的到来，让蜘蛛爬取我的网站页面，有哪些可以提升蜘蛛的，蜘蛛有时候不来了，这个怎么办？如何吸引蜘蛛的到来呢？蜘蛛很久一个星期不来了，咋回事？……
712
浏览
网站安装地图对蜘蛛有用吗？ 引蜘蛛 百度蜘蛛
网站安装地图对网站吸引蜘蛛有没帮助，百度蜘蛛会爬取抓取地图的链接吗？可以安装地图吸引蜘蛛抓取吗？网站也是刚安装地图，以前没有安装过地图，现在安装一样吧！……
711
浏览
robots设置只抓取指定目录和首页 Robots 百度蜘蛛
虽然百度识别出了都是无效页面，但大量的抓取严重影响了服务器性能，因此通过robots设置只允许百度蜘蛛抓取指定的目录和首页，来解决这个问题。……
