839
浏览
百度蜘蛛
相关话题
1640
问题
839
浏览
百度蜘蛛来的次数越来越少，怎么办 根目录 百度蜘蛛
https://www.67bqg.com 之前偶尔还能来一次，现在十天半个月也不来，哪位大神能帮忙分析一下，根目录的一个TXT文件已经删除了，蜘蛛是可以抓取的。测试抓取也没问题。……
836
浏览
建站8个月了，百度蜘蛛还是不来抓取，一天仅来一两次 百度蜘蛛
<a rel="dofollow" href="https://www.fgba.net/" title="富贵论坛">富贵论坛</a>www.fgba.net建站8个月了，百度蜘蛛还是不来抓取，一天仅来一两次。……
836
浏览
835
浏览
835
浏览
百度蜘蛛每天有1万左右，但是最近几天只有几个？ 百度蜘蛛
百度蜘蛛每天有1万左右，但是最近几天只有几个？什么情况呢？
835
浏览
百度蜘蛛只抓取老页面不抓取新页面有没有什么办法破？ 百度蜘蛛
百度蜘蛛只抓取老页面不抓取新页面有没有什么办法破？
833
浏览
网站被攻击，百度蜘蛛访问全都都是死链怎么解决？ 网站被攻击 百度蜘蛛
最近网站老是被攻击，出现大量的503，百度蜘蛛访问全都都是死链怎么解决？
833
浏览
833
浏览
百度蜘蛛来了只抓图片 百度蜘蛛
今天查看了一下网站日记，发现百度蜘蛛来了 只抓取图片，不抓页面 这是怎么回事？
833
浏览
百度蜘蛛抓取很少，应该怎么解决？每天都有发文章 百度蜘蛛 文章
<p></p>
832
浏览
多城市分站怎么统计百度蜘蛛 泛解析 百度蜘蛛
我们是做多城市的，域名开启了泛解析，每个城市都做了一个分站域名 一个后台，请问下 怎么统计这些分站的蜘蛛抓取情况呢？……
832
浏览
网站上线一个星期，收录了首页，但百度蜘蛛太少 百度蜘蛛
每天就一次两次的爬怎样解决
831
浏览
831
浏览
关于robots的写法，对先后顺序有没有要求，如图 Robots 百度蜘蛛
<p>如只允许百度蜘蛛，禁止其他一切蜘蛛，这两种写法哪种是正确的呢？</p><p>1、先允许后禁止</p><p><br></p><p>2、先禁止……
831
浏览
百度蜘蛛只抓取图片，如何处理，影响是什么？ 百度蜘蛛
<p></p>
830
浏览
为什么网站日志里没有百度蜘蛛爬取记录，站长后台有抓取1次啊？ 网站日志 百度蜘蛛
为什么网站日志里没有百度蜘蛛爬取记录，站长后台有抓取1次啊？啥情况www.suliaomanggou.com这个站……
830
浏览
百度蜘蛛突然只爬旧链接，不爬最新链接了怎么办 百度蜘蛛
百度蜘蛛突然只爬旧链接，不爬最新链接了怎么办一直都是每天正常更新呢，百度蜘蛛突然只爬旧链接，不爬最新链接了怎么办有个网站百度只爬半年前的旧链接，根本不爬新链接，即使每天原创再好，不爬，一直都不收录，有啥好办法破解吗？……
829
浏览
老站突然停止收录大概多久恢复 网站收录 百度蜘蛛 文章
今年手里有3个老站，因为S帖过多，造成停止收录，或收录效果变差，有一个之前秒收的，现在好几天才收录一两条，但是提交新发布的链接，蜘蛛立即来抓取，但是没有释放出来。之前发10条收10条，现在发10条最多释放出一条收录。还有一个老站也是因为S帖……
829
浏览
工具类的网站，页面长期没有变化，影响收录吗 百度蜘蛛
最近做的一个图像处理工具类型的网站www.butterpig.top 做好之后页面内容是长期不会变化的，这样岂不是会被蜘蛛给抛弃吗？百度蜘蛛是不是只有经常更新内容的站才会爬取和收录……
829
浏览
百度抓取频次个位数怎么搞？ 抓取频次 百度蜘蛛
<p>都一个多月了，就收录个首页。百度蜘蛛抓取次数很低，最近只抓首页，这种情况收录内页有希望吗？</p><p></p>……
828
浏览
827
浏览
为什么百度蜘蛛爬取文章页的状态码显示的是404 404 百度蜘蛛 文章
/www.域名。com/xx.htlm 爬取的URL链接是这样的 然后蜘蛛状态码是404
826
浏览
826
浏览
网站内容每天都被百度蜘蛛大量抓取，但不收录，是什么情况？ 网站日志 百度蜘蛛 文章
事情是这样的，我现在负责的网站每天都发的是原创文章，我几乎每天的早上都去分析网站日志，发现每天都被百度蜘蛛爬行N次。这是为什么呢？……
826
浏览
81.71.60 这是什么IP段 模仿百度蜘蛛抓取？ 百度蜘蛛
81.71.60 这是什么IP段 模仿百度蜘蛛抓取？81.71.60 这是什么IP段 模仿百度蜘蛛抓取？81.71.60 这是什么IP段 模仿百度蜘蛛抓取？看着不是百度蜘蛛……
825
浏览
这些IP是干嘛的？冒充百度蜘蛛，全部是用的阿里云服务器 阿里云 百度蜘蛛
不过非常的好奇 他到底是干嘛的，没日没夜的循环几百次爬行我网站的各个频道页面，当然我肯定全部屏蔽掉了8.134.107.2518.134.54.2438.134.65.208.134.52.558.134.93.358.134.69.168……
824
浏览
百度蜘蛛长时间不来网站怎么处理？ Robots 引蜘蛛 百度蜘蛛
我也检查了robots.txt没有任何问题，没有屏蔽蜘蛛怎么蜘蛛完全不来网站了，长时间未来网站特别担心，是什么原因为什么蜘蛛不来访问网站，一个星期一次蜘蛛的痕迹都没有，究竟怎么回事为什么蜘蛛不来了，有什么办法可以引蜘蛛？……
822
浏览
百度蜘蛛不来网站抓取怎么引导蜘蛛吸引？ 引蜘蛛 百度蜘蛛
百度蜘蛛不来网站抓取页面，怎么引导吸引蜘蛛来网站抓取页面，以前是抓取次数蛮多，后来就不怎么来了，也不抓取页面了，有时候过来抓取还没有记录，这是什么情况？……
821
浏览
网站百度蜘蛛经常抓取波动较大应该怎么办？ 百度蜘蛛
<p><br></p>
821
浏览
百度蜘蛛爬取内页之后，做什么优化处理比较好 百度蜘蛛
经过两三周内容填充之后，百度蜘蛛已经开始爬取内页了，那么，接下去做哪些方面的优化比较好呢？http://www.mzrzx.com/，http://www.kdlxs.com/……
821
浏览
百度蜘蛛重复抓取一个页面怎么解决? 百度蜘蛛
最近一直蜘蛛抓取重复的页面，每次来网站都是重复的多次，日志可以查看到一些数据，怎么引导蜘蛛爬取正确的页面不要重复的多次爬取，各位大佬在优化中有什么经验可以分享一下？谢谢了。……
820
浏览
百度蜘蛛长时间不来网站会怎么样？ 引蜘蛛 百度蜘蛛
百度蜘蛛长时间没有来网站了，怎么没有蜘蛛的到来，如何吸引蜘蛛更多增加蜘蛛的抓取？哪些方式可以获取蜘蛛来网站里，蜘蛛一直不来会怎么办？我怎么把蜘蛛吸引过来？……
820
浏览
如何让百度快速抓取内页 Robots Site Sitemap 百度蜘蛛
今天看了百度日志，百度蜘蛛有200多个抓取网站，但是主要主要抓取robots和sitemap文件，像产品内页和新闻内部都不抓取。这是怎么回事？有没有大神指点一下。www.snow-china.com……
820
浏览
820
浏览
网站被k了还会有百度蜘蛛吗？ 网站被k 百度蜘蛛
网站已经被百度K站了，是突然被K站了要不要反馈一下，我也没有违规就被K了，导致被K的原因还真不知道，我怎么解决被K的问题，当网站被K后还有蜘蛛爬取页面吗？怎么更好的把网站早点恢复正常，我的网站这次彻底完了怎么办？……
819
浏览
118.190开头的是百度蜘蛛吗 百度蜘蛛
118.190开头的是百度蜘蛛吗
819
浏览
蜘蛛一个月就来了1个。怎么破 百度蜘蛛
百度蜘蛛一个月就来了1个。怎么破
819
浏览
网站内容每天都被百度蜘蛛大量抓取，但不收录，是什么情况？？ 百度蜘蛛
网站内容每天都被百度蜘蛛大量抓取，但不收录，是什么情况？？
