网站tag目录下死链太多怎么办？能直接禁止抓取吗
tag插件已经卸载，不打算要tag目录了，可以使用 robots.txt 禁止收录 tag目录吗？
Robots文件不就是用来干这个的嘛
可以禁止抓取的
让更多人参与回答
