1375
浏览
加急探讨！网站拔毛了，被降权被k，site快照全无 Robots Site
各位seo的专业人士，一起探讨分析一下这个网站吧：https://www.vcg.com 网站被拔毛，快照只留主域，其他都被删除，不予检索展现，被降权的现象，看robots.txt和服务器稳定性，没有啥问题，看到搜索页面存在大量30……
Robots
中文称：爬虫协议。简单说，robots.txt文件用于告诉搜索引擎哪些页面不被开放、禁止抓取。大多数搜索引擎公司都会自觉遵守该协议内容，一方面可以保护用户隐私数据，另一方面也可以通过此协议控制爬虫抓取范围，从事减少网站带宽。
相关话题
1374
浏览
网站采集内容做聚合页面robots怎么写？ Robots 聚合
各位大佬有做过，解释一下谢谢大佬了。
1370
浏览
网站tag标签放了主关键词，是不是会影响首页的主关键词排名？ Robots Tag标签 排名
<p>网站核心词老师在第二三页不动，很不稳定，有时候到首页百度已更新又没了甚至找不到，是不是因为tag标签里放了主关键词导致的权重分散了呀，要不要删除还是robots屏蔽了呢，主关键词：cpa联盟，cpa广告联盟，广告联盟，网站……
1370
浏览
百度https认证成功，但是抓取诊断一直显示抓取失败是怎么回事 robots文件也一直更新不过来 Robots
百度https认证成功，但是抓取诊断一直显示抓取失败 显示服务器错误 是怎么回事啊 robots文件也一直更新不过来……
1370
浏览
关于手机移动端的问题 Robots 二级域名 移动端
网站之前是把手机端放在域名二级目录下，现在手机端已经有几百个收录了，现在还是想单独用二级域名来挂手机端，需要怎么做才能保持尽量平稳过度，不掉收录？手机端二级域名出来后，原来的二级目录下的网站是需要马上关闭还是用robots限制抓取？……
1369
浏览
你们有这个问题吗？robots测试，显示服务器配置有问题，怎么解决 Robots
<p><br></p><p>你们有这个问题吗？robots测试，显示服务器配置有问题，怎么解决？错误码是301，但是网站是可以正常打开的</p>……
1360
浏览
网站如何设置robots？ Robots
网站如何设置robots？怎么做
1359
浏览
百度资源平台robots检测出问题了，你们呢 Robots 百度资源平台
<p><br></p>
1359
浏览
网站Robots：www.eshewang.com Robots
User-agent: * Disallow:是因为robots文件设置有误的原因？
1355
浏览
robots访问没问题，但是蜘蛛日志百度蜘蛛爬取robots.txt显示404。 Robots 404
robots访问没问题，但是蜘蛛日志百度蜘蛛爬取显示404。大佬们知道这是什么情况嘛？还会一直抓取一些错误的链接，应该如何处理好呢，小白求救哇……
1353
浏览
移动端网站seo优化的小技巧 Robots URL结构 PC网站 文章
一、域名和robots设置。 1、域名尽可能简短易记，大部分手机端网站的域名是PC端网站的二级域名，当然这个也很好，与传统网站保持一致，更让重视用户信赖。但是如果是专门的手机网站，最好起一个简短而且易记的域名。比如百度推荐使用以m开头……
1350
浏览
如果用robots.txt屏蔽所有后缀为aspx的文件 Robots
我在robots.txt中写的是Disallow: /*.aspx$，但是好像还是抓取，请教一下该如何写
1349
浏览
如何检查robots文件的正确性？ Robots
如何检查robots文件的正确性？
1346
浏览
从朋友那边，收了一个2年的博客站，改版后2周了 不收录，有没有什么见解呢？ Robots Site PHP 代码
<p>各位大神，帮忙分析一下，小弟在此谢过了。<br></p><p>大概2周前，正式让解析到我服务器。替换之前搭建的demo站点，由于本地测试中 它原有博客现有程序 使用盗版 改动官方底层代码……
1346
浏览
谷歌蜘蛛抓取网站搬家前的路劲？而且访问量过高？ 云主机 Robots 阿里云 虚拟主机
<p>我是网站搬家，以前这个网站在阿里云虚拟主机上的，现在搬到其他地方。但现在谷歌蜘蛛还在不停的抓这个链接，量很大，每秒都有，这个链接是原来阿里云主机的网站路径，已经在robots里加了Disallow: /data/ 但他还……
1344
浏览
网站之前设置了robots禁止蜘蛛抓取所有页面，修改后一个星期了，还是显示限制搜索引擎抓取？ 推荐热议 Robots 搜索结果 文章
之前有几个月没打理网站就一直禁止蜘蛛抓取所有页面，最近更新了一些文章，title也修改了，但是搜索结果还是以前的。提交了链接给百度，但一个星期了，百度搜索资源平台后台显示网站没有任何抓取和索引。感谢大神们指点：www.chuangyeok.……
1344
浏览
用百度统计检测我的robots，现在无法连接服务器，是什么问题？ Robots 百度统计
<p>百度统计检测robots，显示 “百度暂时无法连接您的服务器，请确保您网站的服务器工作正常。”</p><p>是不是我的网站服务器有什么问题啊，我自己也是觉得有问题，但是不知道问题出在哪</p&……
1343
浏览
网站没有robots，没有sitemap，排名很好？ Robots Site
一个网站没有robots，没有sitemap，排名倒是挺好，pc权1，移动权2，不外链，不内容，不友链，没有任何优化操作，排名杠杠的。怎么做到的？我想不明白，我的网站不停更新，就是没有排名。……
1342
浏览
大家网站的robots检测都能成功检测吗 Robots
<p>大家网站的robots检测都能成功检测吗 我这边一直都不成功 很久了。 你们有这种情况吗</p><p><br></p>……
1341
浏览
百度蜘蛛一直不断地爬取：/plugins/weshare/index.html 这个页面是什么问题 Robots APP 百度蜘蛛 公众号
百度蜘蛛一直不断地爬取：/plugins/weshare/index.html 这个页面是什么问题这个目录打开是：{"appid":"wxa6f5faf9d4f44ca","timestamp":168586068,"nonceStr":"……
1341
浏览
内容页文章收录很慢，然后我把内容页目录的添加到Robots Robots 文章
<table><tbody><tr><td><div><div><div><table><tbody><tr><t……
1340
浏览
网站如何添加robots文件？ Robots 网站结构
优化小白提问，想知道优化网站robots文件该如何添加呢？哪位大神能教一下方法，还有我的网站结构方面，还有什么改进的地方吗？www.naiom.com帮我看一下呗。……
1340
浏览
一直听别人讲SEO，自己弄个站今天第19天，前天还收录60个，今天site只有49个页 CMS Robots Site
一直在看别人写的关于SEO文章，自己也做了一个网站，用的是.com域名，阿里云服务器，dedecms,10月10日上线，域名www.faxpp.com 做喷淋塔废气处理的，上线前产品内容基本都完善了，新闻等几个栏目，各上了5个。每天记录网站……
1339
浏览
外贸通宝：GOOGLE SEO站内优化怎样才算合格？ Robots H1标签 404 排名
<p>1. 给您的网站创建网站地图</p><p>网站地图可以让你的网站快速地被google抓取和收录，如下图： ↓</p><p><a href="https://w……
1336
浏览
网站地图放在目录里面和直接放在根目录有什么区别 Robots Site Sitemap 文章
网站栏目和文章数量多，直接生成sitemap地图会有很多分页，把地图生成在sitemap一个文件夹，然后robots中添加地图的目录指引，这样可行吗？和直接生成sitemap.xml有什么区别？……
1336
浏览
我的网站爱情robots.txt文件要不要加Sitemap进去呢? Robots Site Sitemap
网站写上Sitemap: https://www.aiqingqu.net/sitemap.xml和不写Sitemap: https://www.aiqingqu.net/sitemap.xml有什么区别呢……
1336
浏览
百度为啥老是收录php页面 Robots 百度收录 PHP
<p><br></p><p><br></p><p>百度收录了我的静态页面，然后又收录了php这个页面，请问能用robots限制吗？</p>……
1335
浏览
大家帮忙看看这是什么问题？ 推荐热议 Robots 搜索结果
<p>网站是五月份上线的，现在两个多月了，内页一直没收录，今天发现一个问题，就是首页有两个搜索结果，一个是带www，一个不带www，不带www的提示robots.txt文件存在限制指令，实际上robots.txt禁止是上线前设置……
1327
浏览
网站首页突然消失，该怎么恢复？ Robots
网站之前用asp做的，后来更换成dede的模板，上线后robots禁止抓取，前两天解禁了，但是首页消失了，请问哪位大神遇到过这种情况，该怎么解决啊？……
1313
浏览
SEO外链人员如何发外链？ Robots SEOer Site JS
SEO外链专员在国外是一份高薪且极为重要的职务，在中国则是属于比较底层的职位，薪资范围大概在2000-3000元/月，对学历几乎没有什么要 求，普通高中毕业的学生经过简单培训，就能上岗，甚至完全不要求有工作经验。应聘这个职位的SEOer(其……
1313
浏览
2个域名同时绑定到一个网站，请问如何屏蔽搜索引擎 Robots
2个域名同时绑定到一个网站，我想让搜索引擎只收录其中一个，请问怎么写robots实际情况是：A域名被微信屏蔽了，所以重新加了一个B名，但是我在外宣传都是A域名，seo也做的A域名，A域名在微信暂时还没申诉成功。所以我2个域名都能单独访问，但……
1306
浏览
我的robots这样写可以吗？把所有的sitemap都写上去了 Robots Site Sitemap
<p><br></p><p>网站是www.gdjinglan.com，6个都写在robots里面了，会不会冲突</p>……
1306
浏览
robots已经取消了,为啥百度还是不来抓?测试都正常 Robots
<p><br></p><p>robots取消后页面多久才能恢复正常？用百度的robots测试正常通过。</p>……
1302
浏览
网站抓取失败，显示“更新IP和Robots”，请问大神这是什么意思？ Robots
<h1>网站这几天发布的东西一直显示流量数为零，跟之前一发就有浏览数反常，并且收录也只有几条，<br></h1><p><a href="http://javascript:;&……
1299
浏览
网站只收录首页和新闻页，是什么原因？ Robots 网站建设 根目录 文章
由于是新网站所以搜索引擎都有一个初审期，也就是搜索引擎对于一个新网站的判断期;以前百度算法没有更新的时候，一般对于新站的初审期一般都是1个月左右。而现在只要有规律的文章更新没有太多的采集文章，这个时间大概也就1-2个星期;记住!新站一定不要……
1293
浏览
robots.txt文件如何翻译 Robots
<p><br></p>
1291
浏览
robots其中的一个写法请教，各位老铁新年好 Robots PHP 404
<p>我想不让蜘蛛抓取网址结构是：域名/index.php?s=/vod-type-id-1-type--area-%E7%BE%8E%E5%9B%BD-year-0-star--state--order-hits-p-52.h……
1290
浏览
请问大家百度蜘蛛不爬取新站原因都有哪些？ Robots 网站程序 伪原创 文章
新建了一个网站quan116.com 有一段时间了 也一直推送百度提交收录 但是百度蜘蛛一直不爬取网站 robots设置没有问题网站程序是织梦自适应的 内容是伪原创 就是空间是买的香港虚拟主机 很便宜 一直怀疑是空……
1290
浏览
网赚外联找不到，怎么办 Robots Site 竞价 JS
http://daohang.254.com.cn/ 首尔底部链接Powered by www.lusongsong.com模板如下：<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Tran……
1287
浏览
Robots.txt这个文件这样弄对吗，因为没有nofollow源码后台 Robots Nofollow
# robots.txt generated at http://tool.chinaz.com/robots/ User-agent: * Disallow: User-agent: * Disallow: /bin/cgi/http:……
