搜外网>搜外问答>问答页面

网站robots.txt问题,我这样写可以吗?需要添加sitemap吗

目前是这样写的,可以吗?然后我看有的人写的里面有sitemap,这个有必要添加吗

追加问题
    7 人参与回答

能加Sitemap好,不需要写那么麻烦,全部搜索引擎抓取就可以了

申虎包装-杨敏
申虎包装- · 上海厂家直供装盒机、灌装机、封口机、封尾机、旋盖机

不同重复允许抓取所有,但是你还要禁止抓取你的后台等文件,可以设置一个允许抓取Sitemap

天朋
天朋 · 入行8年,企业站,建站,百度谷歌seo,sem,电商运营

你这个Robots写了等于没写,Sitemap很有必要也稍微麻烦一点

生效了就没问题,网站地图可以加可以不加

添加上一个Sitemap会更好,其它的看不出什么问题

日式小吃
日式小吃 · 鸣门鲷烧本铺,经营日式小吃,产品有关东煮、章鱼小丸子、鲷鱼烧、玉子烧等

用 * 泛指 代替那些浏览器不简单点吗 我没有加地图 你可以 直接参考下 百度站长平台Robots 规范

SEO培训招生中
171