25 人参与回答
SEO迷途者
SEO迷途 · SEO迷航者,希望能够共同学习...

可以,这样写就是禁止某个准确的页面不让抓取

小鱼
小鱼 · 苏州微信小程序,微商城,微信公众号,软件定制开发,拥有十几年的开发经验!

可以这样写的

应该可以的,可以去搜索引站长平台试一下

新站提交免费收录
新站提交免 · 来提交你的网站,免费做高权重免费外链

可以。允许的没必要写

太细了吧。。

Allow是没必要强调的,只写disAllow就可以了。

花无痕
花无痕 · 花开的时间很美丽

这个不需要设置,也是可以收录的

可以没问题的

是可以的啊,主要是设置抓取哪些而已,不知道为什么要这样设置,一般都是允许所有搜索引擎爬取

我是老王
我是老王 · 软装设计、全屋定制家居可以搜索悦鹿家居咨询------

没啥毛病,可以只写抓取或者不允许抓的,不用都分开写出来

视频一号
视频一号 · 因为有你,世界更精彩

差不多就行了

Harry添義
Harry · 加推-构建企业赋能全员的销售增长解决方案 咨询热线18126258141

这样写也是可以的

徽马智能展示
徽马智能展 · 徽马科技鹰米导览是一家专业从事互动讲解的展示柜、展示架、电子导游、互动屏、导游机解决方案的设计和生产商

百度有提供测试的工具 检测一下robot.txt 在百度资源平台 “数据统计”>“Robots
底部可以校验一下是否被阻止。

加载更多
SEO培训招生中
158