搜外网>搜外问答>问答页面

other-bot爬行这是个什么蜘蛛怎么屏蔽的？

微信

请问other-bot爬行这是个什么蜘蛛怎么屏蔽的？有大神知道吗？

追加问题
本帖由用户发布，如有侵权联系删除  2021-11-07 发布3,296 次浏览
举报
其他问题
 
    3 人参与回答
用户159126 · 专业的有问必答平台

没用的蜘蛛禁止点，浪费资源

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
用户6183

Robots协议禁止

4 年前
IP属地：福建
赞同 0 评论 1
收藏 举报

收录宝

om/so deo-m sol/d ull-f l/aic sol/s com/s sol/s /sol/ sol/p m/sol enter ol/di white timiz timiz -oper -oper manag ion-g

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2026 SEOWHY 深圳市夫唯伙伴信息咨询有限公司