在网上找到了这个写法:
User-agent: *
Disallow: /zb_users/ Disallow: /zb_system/ Sitemap:https://www.asmry.cn/sitemaps.xml[?]
可以使用吗?有没有更好的写法?
你这样些可以的, User-agent: * 表示所有的搜索引擎都可以抓取 Disallow: 表示拒绝搜索引擎抓取的目录
让更多人参与回答