搜外网>搜外问答>问答页面

robots该怎么写？ 推荐热议

微信

robots该怎么写？有没有规范

追加问题
Robots
本帖由用户发布，如有侵权联系删除  2021-01-02 发布1,007 次浏览
举报
其他问题
 
    14 人参与回答
用户176661 · 主营小程序，微分销系统，app商城，直播商城

爱站工具包

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户182093 · 专业的战略咨询顾问

直接都允许

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户187263 · 中医世家，擅长PS，平面设计，织梦seo等

站长工具

4 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
用户148382 · 游戏源码,整站源码,网站制作,网站seo优化

看你是什么内核的

4 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
用户191296 · 专注SEO优化12年

看别人怎么写

4 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
用户116205

直接都允许就行   我感觉尽可能多抓

4 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
用户187050 · 低价模板建站、仿站扒站、定制建站，客户遍布370+城市，同行甩单合作56家

屏蔽掉不想抓取的页面就行了

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
用户183609 · 爱云查

看别人怎么写

4 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
用户189442 · 我只是混外链 的

百度一下   教程多

4 年前
IP属地：湖南
赞同 0 评论 0
收藏 举报
评论取消
用户172206 · 贵州省茗北网络科技有限公司www,snmky,org☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛☛点击领取优化工具☞☞☞

我之前好像在站长工具里面看到

4 年前
IP属地：贵州
赞同 0 评论 0
收藏 举报
评论取消
用户176834

我之前好像在站长工具里面看到过

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
用户181374 · 专注厂房、办公室装修

站长工具里面有

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户74552
  • 1. Robots.txt可以告诉百度您网站的哪些页面可以被抓取，哪些页面不可以被抓取。
  • 2. 您可以通过Robots工具来创建、校验、更新您的robots.txt文件，或查看您网站robots.txt文件在百度生效的情况。
  • 3. Robots工具目前支持48k的文件内容检测，请保证您的robots.txt文件不要过大，目录最长不超过250个字符。
4 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消

收录宝

34885 43945 54388 63406 72130 96594 05779 15010 26921 38663 49151 58169 71169 81612 92182 02796 99843 08942 36348 48760

蜘蛛池

疏通管道电话
搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司