搜外网>搜外问答>问答页面

谁有空帮我分析一下，这样写的robots.txt文件对不对啊悬赏1元已结束

微信

<p></p>

Robots 举报 本帖由用户发布，如有侵权联系删除 2022-07-20 发布881 次浏览

交换友情链接，就用搜外友链，方便！

20 人参与回答

最佳回答

延选人才网 · 诚人延选-延时喷剂哪个牌子好?口碑好的延时喷剂评测=================================

怡合达YHD、沈晨晨等 2 人赞同该回答

书写 Robots 文件时需要注意以下细节：
1、一定不要写绝对路径，就是不要带网站域名，用/代替即可。
2、注意 robots 文件中的所有符号都是在英文状态下写的，比如 Disallow: /admin/ 中的:是英文状态下的。
3、注意空格，例如 Disallow: /admin/ 中:后面紧跟着一个空格。
4、注意大小写，例如 Disallow: /admin/ 中 Disallow 的D是大写的。
5、robots 是有生效时间的，是由百度决定的，几天或者两个月以内，所以一定不要随便屏蔽整站。
6、还有一点要弄清楚，Disallow: /help 的意思是禁止蜘蛛访问/、/、/help/ 等所有带 help 的文件及文件夹；Disallow:/help/ 则是禁止蜘蛛访问 /help/ 这种形式的路径，允许访问 /、/。