网站robots.txt问题，我这样写可以吗？需要添加sitemap吗

Question

回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法

本贴交流超时，回复已关闭

Answer 1

Lylef

能加Sitemap好，不需要写那么麻烦，全部搜索引擎抓取就可以了

Answer 2

申虎包装- · 上海厂家直供装盒机、灌装机、封口机、封尾机、旋盖机

不同重复允许抓取所有，但是你还要禁止抓取你的后台等文件，可以设置一个允许抓取Sitemap

Answer 3

天朋 · 入行8年，企业站，建站，百度谷歌seo，sem，电商运营

你这个Robots写了等于没写，Sitemap很有必要也稍微麻烦一点

Answer 4

不忘初心

生效了就没问题，网站地图可以加可以不加

Answer 5

添加上一个Sitemap会更好，其它的看不出什么问题

Answer 6

日式小吃 · 鸣门鲷烧本铺，经营日式小吃，产品有关东煮、章鱼小丸子、鲷鱼烧、玉子烧等

用 * 泛指代替那些浏览器不简单点吗我没有加地图你可以直接参考下百度站长平台的Robots 规范

收录宝