<p>这是测试页,目前加了robots.txt不知道写的对不对。</p><p></p><p></p><p><br></p><p>测试页反而是被收录了</p><p>有没有办法不抓取测试页呢</p>
1、如果不想被抓取,直接整站屏蔽即可,不用详细到这么多蜘蛛,还有雅虎、有道好像没这个蜘蛛了;
2、还有这个是你的二级域名,不想被收录,可以选择不解析绑定,用临时域名就能查看。
直接删除禁止
其实做SEO久了你就会发现并不是所有的问题你去百度申诉都可以解决的,那么这种情况下我们能做的就是把除此之外其他的方面都做好了即可,这也算扬长补短吧。
删除测试页,做404就行了,搞这么麻烦
测试页测试完你就删除,不要一直留在那,降低整体页面质量
收录了就把改成一个二级目录网站不更好吗
最后一条就够了。
roboot如果需要所有搜索引擎都试用,那就不用一个个写。最后一行,你是不想收录吗?
直接全部禁止
让更多人参与回答