1608
浏览
百度蜘蛛总抓取之前网站的内容链接，robots屏蔽也没用，怎么回事？ Robots 百度蜘蛛
蜘蛛老是抓取之前网站内容的链接，robots屏蔽也没用，可是之前网站我已经都删除了啊？
百度蜘蛛
相关话题
1640
问题
1608
浏览
百度蜘蛛一来，字节跳动的蜘蛛就走了 百度蜘蛛
我写了个实时蜘蛛统计，这种情况已经发生了好几次
1607
浏览
百度对我的网站抓取频太小应该怎么办？ 站长工具 百度站长工具 百度蜘蛛
建站也有一段时间了，但是通过百度站长工具查看我的网站https://www.bbyys.com/，发现百度蜘蛛对我的网站爬取频率太小，是什么原因呢？……
1606
浏览
为什么百度蜘蛛抓取了我网站内没有存在的链接？需要提交死链吗 404 百度蜘蛛 文章
百度蜘蛛抓取了我网站内没有存在的链接，我的文章链接是www.xxx.com/abc/def/40.html，而百度蜘蛛抓取了www.xxx.com/def40html，而且是404。这是怎么回事，而且是这个月才发现有这样的问题的。需要提交死……
1606
浏览
网站上架快两个月了，内页没有收录。可以帮忙看看蜘蛛分析吗？ 百度蜘蛛 文章
<p><br></p><p>这是18号的蜘蛛分析，昨天更新了3篇文章，都是深度为原创的</p><p>发布文章过后我就直接提交百度了，但是今天来分析百度蜘蛛，看到并没有抓……
1606
浏览
1604
浏览
百度蜘蛛从10万降到两千什么情况 百度蜘蛛
<p>百度蜘蛛从10万降到两千什么情况</p><p><br></p>
1602
浏览
网站不知道什么原因，没有查抓百度蜘蛛的抓取频率都为0 百度蜘蛛
<p>如图：</p><p><br></p>
1601
浏览
新站的百度蜘蛛抓取量翻倍增加是不是代表要大幅收录了 百度蜘蛛
新站的百度蜘蛛抓取量翻倍增加是不是代表要大幅收录了 http://anqing.mdmin.com/
1599
浏览
如何查看百度蜘蛛来过没有？ 百度蜘蛛
我建站很久了，一直不知道蜘蛛来过我的站没有，怎么查看网站的蜘蛛有没有来过网站？除了分析日志，还有什么办法知道蜘蛛情况？……
1598
浏览
为什么百度蜘蛛总是大量爬行DZ系统分类信息地址？ 百度蜘蛛
<p>为什么百度蜘蛛总是大量爬行DZ系统分类信息地址？ 帖子内页的很少爬行 ，大部分90%以上 都是爬行的分类信息的页面。</p><p>连续半年索引一直再掉 掉了2w'索引了 相比去年 百度带来的……
1596
浏览
百度蜘蛛抓取服务器连接超时是几个意思？ Robots 404 百度蜘蛛
蜘蛛爬取日志全部是404，就连robots文件都是404，请问是什么原因
1595
浏览
1594
浏览
新站2周了，百度蜘蛛还是只收录和访问首页 百度蜘蛛
只能等吗？Google平均每天新增收录200个页面左右，少吗？
1587
浏览
百度蜘蛛每天来爬这么多，中间三位的IP是怎么回事？ 百度蜘蛛
<p>百度蜘蛛每天来爬这么多，中间三位的IP是怎么回事？</p><p><br></p><p>80.108.179 中间这些只有三位是怎么回事？</p>……
1586
浏览
检查日志发现百度蜘蛛抓取不少网站不存在的栏目和页面 网站日志 老网站 404 百度蜘蛛
<p>分析网站日志，发现有不少404状态码，发现是百度蜘蛛抓取了不少网站不存在的栏目和页面，很奇怪网站都不存在，怎么抓取的呢。</p><p></p><p>就是不少类似这种的，网站是……
1584
浏览
新网站，每天都有很多蜘蛛来访问，就是没收录。 网站日志 百度蜘蛛
新网站，每天都有很多蜘蛛来访问，就是没收录。每天通过网站日志看到都有几十次的百度蜘蛛来，但是就是没收录这是什么情况？https://www.tuzios.com……
1578
浏览
百度蜘蛛老是抓取网站没有的目录，并返回404是什么原因 404 百度蜘蛛
百度蜘蛛老是抓取网站没有的目录，并返回404是什么原因，关键是特别多，几百条www.hdtdwl.cn……
1576
浏览
一个月了百度就收录了首页，还要坚持吗？ 索引量 百度蜘蛛 索引
<p>域名之前做过网站，闲置了几个月收录全掉了（这种情况应该算Ｋ站了吧，听说要好久才恢复），然后又重新做了其他类型的网站，搞了一个月才收录了首页，虽然现在每天百度蜘蛛抓取也越来越多，但是内页还是没收录，索引量也没增加。大神帮忙看……
1575
浏览
1575
浏览
百度蜘蛛，抓取频次和抓取时间是否有关联？ 抓取频次 百度蜘蛛
<p>百度蜘蛛，抓取频次和抓取时间是否有关联，这个有没有大佬研究过？<br></p><p><br></p>……
1574
浏览
百度蜘蛛一天就来两次咋整？ 百度蜘蛛
https://www.ad2.cn各位帅哥美女都来帮我点点，一人奖励一个雷霆嘎巴
1571
浏览
久违的百度蜘蛛终于来爬了。都一个星期没来了。 百度蜘蛛
<p>久违的百度蜘蛛终于来爬了。都一个星期没来了，之前被拔的只剩首页了，今天发现多了一个内页。不知道算不算好兆头。</p><p><br></p><p><br>……
1571
浏览
1568
浏览
网站最近改版了，百度蜘蛛1次都不来，为什么呢？ 百度蜘蛛
最近网站改了源码模板，之后百度蜘蛛一次都不来，为什么呢？ 手赚大全 www.wlzqdh.com
1565
浏览
用爱站工具包分析网站日志发现百度蜘蛛都不经常抓取怎么办？ 网站日志 百度蜘蛛
要怎么增加蜘蛛抓取次数呢
1560
浏览
1557
浏览
网站被黑导致被K，已经40天了，还有希望吗 站长平台 网站被黑 百度蜘蛛
<p><b>40天前网站被人黑了，当天百度蜘蛛来访次数一下子增加了几十倍，虽然发现以后及时处理了。</b></p><p><b>但是第二天全站就被K了，并且被百度站长平台……
1555
浏览
网站总是被攻击，应该怎么办？ 百度蜘蛛
每次攻击很久打不开，3-4小时才可以访问，这样下去百度蜘蛛都跑了，网站会被降权吧！被攻击了怎么处理最好？……
1555
浏览
网站能正常访问，为什么百度蜘蛛抓取不了呢？ 域名解析 百度蜘蛛
<p>网站能正常访问，但是百度蜘蛛不能抓取，问服务器提供商说是域名解析的问题，问域名提供商说是服务器的问题。</p><p><br></p><p><br>&l……
1555
浏览
通过生成一个利于优化的二级域名网址来优化主网站，可行吗？ 二级域名 代码 百度蜘蛛 索引
主站点的网页代码无法被搜索引擎识别。所以专门为网站所有页面生成了一个以seo开头的网址，例如为www.123.com生成的seo.123.com的页面，然后判断是否是百度蜘蛛，如果是蜘蛛，就抓取seo.123.com。这种优化方法，现在还可……
1553
浏览
为什么百度蜘蛛一直只抓取爬行首页?不理其他页面？？？ 百度蜘蛛
如题！！！！大家来研究研究一下！~！~~~
1551
浏览
上线30天了，百度还没有收录？ 抓取频次 百度蜘蛛
上线30天了，www.zhusuba.com 百度还没有收录？访问日志里很多百度蜘蛛，百度站长里边抓取频次显示0，这个是什么情况？……
1550
浏览
1549
浏览
怎么才能知道百度蜘蛛来过网站 推荐热议 百度蜘蛛
怎么才能知道百度蜘蛛来过网站.
1546
浏览
百度蜘蛛停留时间太短，是什么原因造成的，要怎么做才好 百度蜘蛛
<p><br></p><p>这是什么回事，网站：www.ah-teacher.com</p>
1541
浏览
我曹一个站死活不爬内页，一个站上线7天频繁爬内页 百度蜘蛛
百度蜘蛛这是什么意思？做的好的站还不爬内页
1541
浏览
116.179.37.*** 这个号段今天一直在爬我网站 是百度蜘蛛吗 新站一个星期左右 百度蜘蛛
116.179.37.*** 这个号段今天一直在爬我网站 是百度蜘蛛吗 新站一个星期左右www.qsk123.com
