搜外网>搜外问答>问答页面

新站点,二十多天不收录站点,然后没有蜘蛛访问?? 悬赏3元 已结束

<p>新站点,二十多天不收录站点,然后去站长平台弄自动推送后<a href="http://www.wanjiadenhuo.com/" target="_blank" data-url="www.wanjiadenhuo.com" class="show-5118-data" rel="nofollow">http://www.wanjiadenhuo.com/</a></p><p><br></p><p>然后我怀疑是吧蜘蛛给屏蔽掉了吗<a href="http://www.wanjiadenhuo.com/robots.txt" target="_blank" data-url="www.wanjiadenhuo.com" class="show-5118-data" rel="nofollow">http://www.wanjiadenhuo.com/robots.txt</a>感觉也没问题啊</p><p><br></p><p>然后我就下载了网站日志<a href="http://www.shuiguiyuan.com/logfiles/" target="_blank" data-url="www.shuiguiyuan.com" class="show-5118-data" rel="nofollow">http://www.shuiguiyuan.com/logfiles/</a></p><p><br></p><p>发现都没有蜘蛛、</p><p><br></p><p><br></p><p>而且还都是304有大佬知道什么原因吗?</p><p>急死了</p><p><br></p>

追加问题
    31 人参与回答
等 1 人赞同该回答

你抓取诊断全部抓取失败,这表明的意思就是蜘蛛抓不到你网站,考虑下是否是哪里屏蔽蜘蛛了,试试把Robots里面那些Disallow全部删掉看看。

你在robots里设置屏蔽根目录文件夹干嘛?这些目录在你网站前端能访问到吗?蜘蛛会从首页开始顺着链接层级爬,你网站前端页面有/templets/这个目录?

robots还是不要乱加的好

抓取不成,要找原因,是不是屏蔽了蜘蛛,或者用了CDN没回源还是CDN屏蔽了

你把百度蜘蛛挡在门外啦,抓取不到网页怎么收录呢

百度vs梦想
百度vs梦 · 擅长百度优化,网站搜索营销及网站优化分析 Q305114474

查日志,建议用拉格好 loghao cn  ;刚刚查了一下,你的网站是有蜘蛛的

查看Robots文件,看看是否某个目录被屏蔽了

商标网
商标网 · 商标注册、商标查询、商标转让

站长工具模拟测试抓取正常的,,,我碰到过类似的  是服务DNS问题 你吧服务器DNS修改下 基本就可以抓取成功了 然后在过个一星期左右百度会正常抓取了

SEO木子木
SEO木子 · 西瓜商学院官网SEO优化,擅长cms建站、网站优化、电商运营等,如果说对自己网站有什么疑问的,可以点击右侧免费咨询。

做个网站地图,引导蜘蛛,然后做好内部优化和内容即可

weixin_ww584211
weixi · 互联网8年:SEO/SEM/媒体广告,免费咨询合作【微信:ww584211】

最近发现新站域名不太好收录,不管怎么做,好像没有找到好的办法

在线客服代理
在线客服代 · 接快排,全平台优化1048436727

先来一波蜘蛛

你这个网站有没有做竞价推广,如果有,当天就回被收录首页,呵呵

抓取失败,要百度站长平台反馈一下

说一个别人都不知道的

百度资源平台里面有一个站点属性设置,我们可以在这边修改站点属性,注意:这个站点属性修改后亲测百度蜘蛛会在抓取一遍网站

你这抓取不成功是咋回事啊

李&amp;amp;amp;amp;amp;amp;amp;amp;amp;amp;amp;♯039;&amp;amp;amp;amp;amp;amp;amp;amp;amp;amp;
李& · 铁腰板治疗仪,铁腰板治腰突是真的吗,铁腰板官网

抓取失败肯定无法收录,虽然你的链接是可以打开,但是百度抓不到任何链接,那么你的站上线不上线其实没有区别。

首先新站前期Robots 不要设置那么多禁止,其次,robots的格式,你看下,Sitemap不要放在最上面。写在最后,robots的禁止是基于你网站有了一定的 抓取基础上,你可以把无意义是屏蔽了,但是屏蔽的时候请确认你屏蔽的根目录文件夹里是否包含静态页面和图片之类的。

然后在检查下链接在服务器返回的状态码是不是200。

抓取不成功,网站怎么会收录,查询下原因吧

加载更多