搜外网>搜外问答>问答页面

robots该怎么写？ 推荐热议

微信

robots该怎么写？有没有规范

追加问题
Robots 举报 本帖由用户发布，如有侵权联系删除  2021-01-02 发布821 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    14 人参与回答
多用户商城系统
多用户商城 · 主营小程序，微分销系统，app商城，直播商城

爱站工具包

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
战略规划
战略规划 · 专业的战略咨询顾问

直接都允许

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
民间偏方大全
民间偏方大 · 中医世家，擅长PS，平面设计，织梦seo等

站长工具

3 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
134源码网
134源码 · 游戏源码,整站源码,网站制作,网站seo优化

看你是什么内核的

3 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
螺旋钢管
螺旋钢管 · 专注SEO优化12年

看别人怎么写

3 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
吉他大象
吉他大象

直接都允许就行   我感觉尽可能多抓

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
风雷建站
风雷建站 · 低价模板建站、仿站扒站、定制建站，客户遍布370+城市，同行甩单合作56家

屏蔽掉不想抓取的页面就行了

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
此后故乡只有冬
此后故乡只 · 爱云查

看别人怎么写

3 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
天下爱我她最配
天下爱我她 · 我只是混外链 的

百度一下   教程多

3 年前
IP属地：湖南
赞同 0 评论 0
收藏 举报
评论取消
左叶
左叶 · 贵州省茗北网络科技有限公司www,snmky,org☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛点击领取优化工具☞☞☞

我之前好像在站长工具里面看到

3 年前
IP属地：贵州
赞同 0 评论 0
收藏 举报
评论取消
淋淋的脸
淋淋的脸

我之前好像在站长工具里面看到过

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
东莞瑞刚装饰
东莞瑞刚装 · 专注厂房、办公室装修

站长工具里面有

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
A方向
A
  • 1. Robots.txt可以告诉百度您网站的哪些页面可以被抓取，哪些页面不可以被抓取。
  • 2. 您可以通过Robots工具来创建、校验、更新您的robots.txt文件，或查看您网站robots.txt文件在百度生效的情况。
  • 3. Robots工具目前支持48k的文件内容检测，请保证您的robots.txt文件不要过大，目录最长不超过250个字符。
3 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司