搜外网>搜外问答>问答页面

百度老是抓取这样的url,robots该怎么写禁止

微信

<p><br></p><p></p>

追加问题
Robots
本帖由用户发布，如有侵权联系删除  2020-12-23 发布1,098 次浏览
举报
其他问题
 
    8 人参与回答
用户183609 · 爱云查

百度抓取的，并且是随机抓取的

4 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
用户153190 · 精益生产管理与六西格玛管理咨询，培训机构

楼上看起来很厉害

5 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户186836

加Disallow: / index . PHP/* 这样的格式看看

5 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消
用户185733

大神来给排忧解难哦

5 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
用户189805 · 315防伪标签办理中心-全国315产品防伪查询中心

厉害，真是大佬

5 年前
IP属地：北京
赞同 0 评论 1
收藏 举报
评论取消
用户96944 · 【精】 比做SEO更重要的是网站安全，站长必学的网站攻击与防御技术。又懂啦官网www..youdongla..com 

Disallow: /*
5 年前
IP属地：广东
赞同 0 评论 1
收藏 举报
评论取消
用户188544

好厉害

5 年前
IP属地：天津
赞同 0 评论 0
收藏 举报
评论取消
用户170711 
Disallow: / index . PHP/*
5 年前
IP属地：山东
赞同 0 评论 5
收藏 举报
评论取消

收录宝

75262 54787 67831 28072 36880 45732 54412 63220 72154 80881 89814 08898 17662 25843 34817 50378 59482 68500 77433 86367

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司