搜外网>搜外问答>问答页面

robots.txt文件写法规则是怎么的？

微信

robots.txt文件写法规则是怎么的？

其中写了

Disallow:/*_gaoqi/

意思是

Disallow:/123_gaoqi/

Disallow:/eee_gaoqi/

Disallow:/9e9_gaoqi/

这种类型的都拒绝蜘蛛抓取吗？

追加问题
Robots
本帖由用户发布，如有侵权联系删除  2022-07-30 发布837 次浏览
举报
其他问题
 
    6 人参与回答
最佳回答
叮咚之声
用户137443

百度站长后台Robots那里不是有效验功能么 测试一下就知道了

3 年前
IP属地：安徽
赞同 0 评论 0
收藏 举报
评论取消
宏星
用户215638

不太懂，我也想知道

3 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
江南
用户197320

百度站长测试一下

3 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
泉水溪溪
用户215151 · 鑫盛主营包装机设备，粉剂包装机，颗粒包装机，可用于面粉、粮食、化工、肥料行业

测试一下就知道了

3 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
弹指春秋
用户6183

理论上是这么回事

3 年前
IP属地：福建
赞同 0 评论 0
收藏 举报
评论取消
三九问答
用户159126 · 专业的有问必答平台

测试一下就知道了啊

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消

收录宝

p/244 /p/55 /p/56 /p/57 /p/58 /p/59 /p/61 /p/62 /p/65 /p/52 /p/51 /p/66 /p/67 /p/68 /p/69 /p/70 /p/71 /p/72 /p/73 /p/75

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司