搜外网>搜外问答>问答页面

robots文件必须要屏蔽哪些目录

微信

Robots

本帖由用户发布，如有侵权联系删除 2020-06-28 发布1,295 次浏览

交换友情链接，就用搜外友链，方便！

6 人参与回答

用户160364

用户196011 等 1 人赞同该回答

没用的页面，不希望分权重的就可以屏蔽了

用户157263 · 环卫洒水车、垃圾车、压缩式垃圾车、扫路车、清扫车等专用车销售

用户196011 等 1 人赞同该回答

没必要啊

用户171709 · 超声波清洗机研发定制，22年行业经验

用户196011 等 1 人赞同该回答

除了网站分类目录的文件，还有照片CSS，JS的文件夹不用屏蔽，其他都可以屏蔽

用户148994 · C形臂_动态平板DR_动态平板胃肠机_宠物DR_口腔CBCT。 www. puai999. com

用户196011 等 1 人赞同该回答

robots文件怎么写呀

用户169115

用户196011 等 1 人赞同该回答

要看你用的什么系统，不同桌面需要屏蔽的目录不一样。

用户111723 · 买网店,上猫元素！买卖网店便捷、安全、交易放心的电商综合性服务平台

不重要和不想被抓取的页面都可以屏蔽