网站不写robots文件到底有影响没？
之前接触的站点都有写robots文件，发现了有些大站点也没有写robots文件，查找了一些资料但是分歧比较严重，有说要写的，又说不用写的。小弟目前都被弄混了，请问大家的网站有没有写？
23 人参与回答
用户196011 等 1 人赞同该回答
最好写一下，虽然蜘蛛不一定会按照你写的来，但是它会尊重你的
没影响
随便写不写，不写也没事
最好是写一下
建设带是写一个为好
我的网站时没有的，感觉也没有什么影响啊
看自己需要不需要吧
需要就写，不需要就不写
写一下为好，避免蜘蛛抓取不必要问页面，浪费时间
写一下好一点，避免抓取资源的浪费
写不写都无所谓的，主要是你可以控制，不想被抓取的目录，可以设置，如果无所谓，就不用写，百度一般很少抓取不显示的目录
