Disallow: /admin
Disallow: /images
与
Disallow: /admin/
Disallow: /images/
有区别吗?
"Disallow:/admin"是指/admin. html 和/admin/index. html都不允许搜索引擎蜘蛛抓取。
"Disallow:/admin/"是指允许搜索引擎蜘蛛抓取/admin. html,而不能抓取/admin/index. html。
设置完Robots,可操作使用百度站长robots功能检测看是否生效,效果如何。
没有看懂什么意思,想学习学习
一个允许一个不允许
肯定有区别,建议去百度官方看下相关说明
建议直接去百度机器人协议说明找你要的问题
看了看,就走了
来学习一下
让更多人参与回答