搜外网>搜外问答>问答页面

网站robots文件这样写的格式对了吗

微信

<p><br></p><p><br></p>

追加问题
Robots 举报 本帖由用户发布，如有侵权联系删除  2020-05-26 发布968 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    8 人参与回答
微笑
微笑
香港服务器租用、 权重蜘蛛-池出租 等 2 人赞同该回答

这种格式可以，没啥问题，如果是一个/的话，那就是这个根目录下的所有文件都被禁止抓取

4 年前
IP属地：安徽
赞同 2 评论 0
收藏 举报
评论取消
钢护筒
钢护筒
权重蜘蛛-池出租 等 1 人赞同该回答

没有问题

4 年前
IP属地：河北
赞同 1 评论 0
收藏 举报
评论取消
A金顺通塑胶软管
A金顺通塑
权重蜘蛛-池出租 等 1 人赞同该回答

省点事都抓取他不香吗

4 年前
IP属地：山东
赞同 1 评论 0
收藏 举报
评论取消
jane
jane ·

Sitemap可以写进来的吗

4 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
阿尔帕西诺
阿尔帕西诺 · 器物有魂

可以的

4 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
apple
apple

没有问题

4 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消
保温钢管厂家
保温钢管厂

没毛病

4 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司