7 人参与回答
文煞
文煞 · PHP

没有太大影响?但是一些不希望被蜘蛛抓取的页面也会被抓取。如果你网站做了伪静态,建议你不让蜘蛛抓取动态页面。

海阔天空
海阔天空 · 315防伪标签办理中心-全国315产品防伪查询中心

这个也没有什么影响的,如果您想做一个也可以的

Robots协议就是告诉蜘蛛哪个页面可以不用爬取了,如果你的页面没有那么多不需要爬取的可以不用,但是加上更好

利美医疗
利美医疗 · 四川利美医疗是一家集一次性口罩、口罩辅料、清洁防护用品的研发、设计、生产、销售为一体的高新技术企业!

没有影响吧,有些站没有Robots收录排名一样好

Robots.txt文件是一种文本文件,用于告诉搜索引擎哪些页面可以或不能够被抓取。如果一个网站没有robots.txt文件,搜索引擎将会默认抓取网站上的所有页面。
从SEO的角度来看,一个没有robots.txt文件的网站不会受到负面影响。如果您不希望搜索引擎抓取某些页面,那么您需要创建一个robots.txt文件

会浪费蜘蛛抓取频次,最好做一下Robots

会浪费蜘蛛抓取频次,最好做一下Robots,基础的SEO优化操作