搜外网>搜外问答>问答页面

想用robots.txt来禁止蜘蛛抓取一些无用的东西,怎么写?

想用robots.txt来禁止蜘蛛抓取一些无用的东西!为搜索引擎提供一个简洁明了的索引环境,提高权重,但我的网站robots.txt却没有禁止!我的网站我该禁止哪些东西呢?大神不吝赐教。



追加问题
    1 人参与回答
叶lift
叶lift · 欢迎参加搜外的SEO系统培训,报名微信:seowhy2021
黄喻风 等 1 人赞同该回答

把一些对网站没有什么意义的链接,例如:网站后台
具体的Robots写法 ,可以参考:

SEO培训招生中
157