搜外网>搜外问答>问答页面

如何禁止搜索引擎爬虫(Spider)抓取网站页面？

微信
追加问题
索引
本帖由用户发布，如有侵权联系删除  2023-03-27 发布540 次浏览
举报
其他问题
 
    5 人参与回答
用户189805 · 315防伪标签办理中心-全国315产品防伪查询中心

直接在网站添加协议就可以了

2 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
用户182844

给网站添加 Robots协议

2 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户159126 · 专业的有问必答平台

Robots协议你可以了解一下

2 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
用户224358

给网站添加 Robots协议

2 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消

收录宝

ngxin ngxin ngxin gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs gongs yscpt

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司