搜外网>搜外问答>问答页面

网站日志某度蜘蛛抓取js css robots给禁了，为什么一星期过去了抓取还是那么多呢？某歌不抓了

微信

怎么才能让它们不抓取啊cs.maofasx.com

Robots 网站日志 JS 举报 本帖由用户发布，如有侵权联系删除 2020-12-18 发布613 次浏览

4 人参与回答

此后故乡只 · 爱云查

百度抓取的，并且是随机抓取的

柠檬可乐 · 2021年祝搜外的-每一位大哥大嫂过年好▄█▀█●——帮小弟点一下—▄█▀█●——感激不尽——▄█▀█●☛☛☛☛☛☛

这个需要一定时间反应的吧

网络部

你都禁了它咋进去的

收录宝