3065
浏览
网站改版，千万级页面被删，日志分析爬虫每天有40%死链的抓取，做死链提交？还是302？ 推荐热议 网站改版 日志分析 跳转
网站进行改版，内容需要审核重新上线，量级达到千万级别，目前前端已无死链，日志分析，百度爬虫抓取死链占爬虫每天抓取的40%，如果考虑每天分析日志，提交死链，效率太低，规则提交不能实现（同一目录下：有死链+正常页面），长时间周期的死链抓取，降低……
日志分析
网站日志是记录web服务器接收处理请求以及运行时错误等各种原始信息的以·log结尾的文件，确切的讲，应该是服务器日志。网站日志最大的意义是记录网站运营中比如空间的运营情况，被访问请求的记录。通过网站日志可以清楚的得知用户在什么IP、什么时间、用什么操作系统、什么浏览器、什么分辨率显示器的情况下访问了你网站的哪个页面，是否访问成功。
相关话题
924
浏览
每次看到大家说日志分析爬虫，本人SEO小白，请问这个东西在哪里看的呢 日志分析 移动端
真的很想把网站做好最近www.fyt888.com移动端终于有权重了，深圳租车等关键词也大有提高，有相似行业的可以跟我换链接哈！但是每次看到大家说日志分析爬虫，本人SEO小白，请问这个东西在哪里看的呢？……
1028
浏览
网站服务器日志分析应该怎么分析 日志分析
<p>这张图是网站的日志分析情况，这么多低权重蜘蛛爬行这种页面是不是不好？</p><p><br></p>……
1350
浏览
日志里面没有真蜘蛛，感觉我太难了 ，该咋搞 日志分析
www.brmrzx.com 用金花日志分析 删除假蜘蛛 百度IP地段的真蜘蛛为0。。。每天都有发外链 求大佬看看是怎么回事……
1048
浏览
谁能帮我看下这个网站日志分析百度住区了也停留了怎么百度搜索没有收录 网站日志 日志分析
<p>谁能帮我看下这个网站日志分析百度住区了也停留了怎么百度搜索没有收录1条。www.ykjzx.com</p>……
1278
浏览
网站突然没有百度蜘蛛抓取。这是怎么回事，有大神指教一下吗？ 日志分析 百度蜘蛛
www.brmrzx.com 用金花日志分析 删除假蜘蛛 百度IP地段的真蜘蛛为0。。。每天都有发外链 求大佬看看是怎么回事……
1054
浏览
谁帮我看看这个日志分析的状态蜘蛛返回代码是404，什么意思。 日志分析 404 代码
<p><br></p>
1022
浏览
日志分析：蜘蛛爬的路径和实际路径不一样，哪位大神遇到过 404页面 日志分析 404
<p><br></p><p>路径是以htmll结尾 不是以html结尾，导致出现大量的404页面，哪位大神遇到过。 通过日志分析的</p>……
1399
浏览
如何从网站log日志判断百度蜘蛛来抓取过？ 日志分析 百度蜘蛛（baiduspider）
怎么从网站log日志判断百度蜘蛛来抓取过，有什么好方法？
2262
浏览
百度蜘蛛真假如何判断？ 日志分析 百度蜘蛛（baiduspider） 真假蜘蛛
百度真假蜘蛛是如何定义的？有时候我们会发现爬去我们网站的百度蜘蛛都是虚假的，这个怎么回事，遇到这样的问题又该如何应对呢？……
3687
浏览
爱站日志分析出很多一搜蜘蛛访问抓取网站，这个一搜蜘蛛怎么样？ 日志分析
爱站日志分析出很多一搜蜘蛛访问抓取网站，这个一搜蜘蛛怎么样？
1220
浏览
网站有收录没有排名流量怎么办？ 友情链接 日志分析 排名
没有流量和排名，半年的站权1，有收录量，没有流量排名怎么办？网站没有交换友情链接，就是偶尔发外链和文章，看日志分析蜘蛛抓取还可以，怎么提升流量呢？各位哥哥姐姐给我点建议多谢。……
1229
浏览
日志分析中404都需要给百度提交吗 日志分析 404
<p><br></p><p>检测日志发现状态码404的好多 有的是后台地址 有的是图片 有的是roobt文件 这些都需要给百度提交死链吗</p>……
1550
浏览
日志分析工具求推荐，最好能筛选的！ 网站日志 日志分析
求网站日志分析工具，可以筛选的
1323
浏览
光年日志分析工具用户状态码404是什么情况！ 日志分析 光年日志分析 404
点击链接以后，看到url，网址是小写，目录变成了大写！举例：光年日志看到的网址是：www.AAA.COM我的目录名字是mlm点击链接打开网址看到的是：www.aaa.com/MLM就很好奇为什么目录名是大写导致404……
1066
浏览
log日志分析抓取了wwroot.sql 和很多压缩文件还显示404 是怎么回事，该怎么解决？ 日志分析 404
<p>log日志分析抓取了wwroot.sql 和很多压缩文件还显示404 是怎么回事，该怎么解决？</p><p><br></p><p><br></p……
1022
浏览
网站日志是不是要用日志分析软件才可以看 网站日志 日志分析
今天下载了网站的日志结果看得一脸懵逼，听别人说网站日志要用特定的分析软件看，是不是真的。……
2942
浏览
请问下大家网站日志分析用什么工具？ 网站日志 日志分析
网站爬虫日志下载下来了，请问下用什么分析工具比较好啊？
1299
浏览
1473
浏览
爱站日志分析，用户状态码返回是302，是不是不利于内页收录？是要作成301吗？ 日志分析 5118 301跳转 排名
<p>爱站日志分析，用户状态码返回是302，是不是不利于内页收录？是要做301永久性链接吗？现在内页都没有收录，也没有排名。目前网站的排名都是首页来的。5118查询有17个左右的排名。<a href="https……
1880
浏览
有啥好用的站长工具，日志分析工具还有死链提取工具的？ 站长工具 日志分析
有啥好用的站长工具，日志分析工具还有死链提取工具的？
1534
浏览
网站被降权了，找不到降权原因怎么解决？ 友情链接 日志分析
我已经把所有友情链接删除了，服务器和日志分析没有找到原因，这个降权怎么办？如何恢复正常？多谢各位解答。……
2002
浏览
为什么日志分析结果什么都没有？ 日志分析
<p>多个网站下载的日志文件都如图这样</p><p>这些网站，有2个站已经存在3个月以上 ，并且在百度、搜狗和谷歌首页，平时也有些零星的人加微信，虽然流量小，不可能一点数据没有啊。</p>&l……
1396
浏览
网站日志分析出来要怎么看？小白求教 网站日志 日志分析
<p><br></p><p>完全不知道从哪里下手 哎看样子得去找点相关资料了</p>
1328
浏览
网站日志分析百度有抓取 在百度站长抓取诊断却是抓取失败是怎么回事啊？ 网站日志 日志分析
<p><br></p>
1909
浏览
网站日志怎么查看，如何利用网站日志分析工具查看日志 网站日志 日志分析
一直不知道网站日志是什么以及如何查看网站日志，更不知怎么分析网站日志曾经我对怎么追女生也是一无所知的人，直到我看了情圣欧阳的文章后才知道了原来追女生是一件多么简单的事情，他的写的文章里有很多追女生的干货，想要看的兄弟可以去网上搜情圣欧阳就可……
2122
浏览
不会看蜘蛛日志分析工具，请问我的站点的蜘蛛日志正常吗？ 日志分析
<p><br></p>
1446
浏览
你们用光年日志分析网站 有没有这种情况 怎么解决？ 日志分析 光年日志分析
<p><br></p>
1597
浏览
1906
浏览
网站日志分析那个软件比较好？ 网站日志 日志分析
如上述标题，恳请大佬们推荐一款功能比较强大，容易看懂的网站日志分析软件。
1285
浏览
进行日志分析，发现百度蜘蛛都没有爬行，这是怎么回事了 日志分析
（www.nanry.com）进行日志分析，发现百度蜘蛛都没有爬行，这是怎么回事了，请大神帮忙诊断一下……
4944
浏览
2062
浏览
关于网站抓取频次和日志分析的问题 日志分析 抓取频次
为什么 通过日志分析 网站的蜘蛛抓取次数和百度站张后台的蜘蛛抓取频次不一样普遍通过日志分析的百度蜘蛛的抓取比站长后台的抓取频次高很多 比如说站长后台的抓取频次是5 通过日志分析当天抓取是40多……
3725
浏览
关于蜘蛛来访和抓取次数的问题 日志分析 更新频率
通过日志分析一个新站 蜘蛛来访不到10 抓取 100其他的站 来访才40多 抓取也40多1、蜘蛛来访和抓取是什么关系，怎么增加每次来访的抓取次数2、另外问一下 页面更新度和蜘蛛抓取有关系吗 ： 比如这个页面……
1318
浏览
站点收录忽然变很差！ 日志分析 Site 索引量
站点上线半年了，新站保护期和过了新站保护期的那段时间收录都是比较可观的,但是最近收录忽然变的非常低 site站点一周内都没有数据 站长后台索引量更新情况也不是很理想 站点日志分析发现蜘蛛爬的都是老页面 各位大神其帮忙分析一下！……
2775
浏览
跪求高手网站日子中显示异常的数据，怎么解读啊？ 日志分析
网站从上线后一直不理想，今天下载是昨日的日志分析，发现只有在网站异常数据有17条，其中有些是非本网站数据连接，点开后是404错误页面，而有些是网站的正常维护的数据，不知道这个异常是什么意思。请高手指点一下：203.208.60网站异常(17……
2410
浏览
日志分析蜘蛛返回状态码内容页出现大量304怎么办，有点慌 日志分析
<p><br></p><p>70多条，全是内容页，每天的日志都是，这怎么解决？有点慌。</p>……
1935
浏览
网站日志分析一片空白是什么原因？要么就只有用户状态码 网站日志 日志分析
<p>网站日志分析一片空白是什么原因？要么就只有用户状态码，蜘蛛是有抓取的，还有不知道为什么抓取波动这么大？</p><p><br></p><p><br>&l……
