搜外网>搜外问答>问答页面

求解:假如我要屏蔽下面这个 robots要怎样写?

假如我要屏蔽这个/syzl-business-api/base/clearHistory

 robots要怎样写呢?下方这种写法,屏蔽了还是依旧会抓取

Disallow: /syzl-business-api/base/clearHistory

追加问题
    9 人参与回答
权重蜘蛛-池出租 等 1 人赞同该回答

查百度啊

权重蜘蛛-池出租 等 1 人赞同该回答

没啥毛病。

橙子
橙子 · 苗木种植知识,seo优化技术,入行时间1年
权重蜘蛛-池出租 等 1 人赞同该回答

对的就是这样写

瑞通钢管
瑞通钢管 · 专注企业seo
权重蜘蛛-池出租 等 1 人赞同该回答

写法没有问题

古木参天
古木参天 · ~仿站改版,SEO排名整站优化,挂马中毒处理,新站快速收录,有需要详聊Q44313-5860
权重蜘蛛-池出租 等 1 人赞同该回答

写法没有问题啊,是以前抓取的吧?

冢
· 四川九州时代装饰,换链接私聊

到百度看一下刷新没有

很正常  刚添加上 不会马上停抓,,要等一段时间,

SEO培训招生中
189