12 人参与回答
不建议这样全部屏蔽，
太多不遵守协议的蜘蛛了，即使你写了也会抓取。
User-agent: *
allow: /
Disallow: /bin/
改成这样了 应该可以吧？
这样写除了好看没啥意义
建议删掉，什么都不写也比这个强
不建议这样全部屏蔽，
都是这样设置的嘛
有一些小问题，但是可以调整问题不大
没有问题，建议做好检查
