SEO
聚集100万网络营销实战家
跟夫唯老师学SEO
提问题
建网站
换友链
登录
只有需要禁止搜索引擎抓取某些页面时,robots文件才有存在的意义,对吗? - 搜外SEO问答
搜外网
>
搜外问答
>
问答页面
只有需要禁止搜索引擎抓取某些页面时,robots文件才有存在的意义,对吗?
微信
只有需要禁止搜索引擎抓取某些页面时,robots文件才有存在的意义,对吗?
追加问题
交换友情链接,就用搜外友链,方便!
5 人参与回答
李建海
对
a235
是的
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!
了解合理带链接的方法
本贴交流超时,回复已关闭
robots文件的作用是指令搜索引擎禁止抓取某些页面,或者允许抓取某些页面,对吗?
搜索引擎抓取和收录是两个不同的过程,对吗 ?
.htaccess做301跳转的问题,求帮助!
主域名通过外链建设获得高权重,不意味着二级域名获得了高权重,对吗?
选择虚拟主机服务器对网站排名的影响
如何优化好得得织梦系统网站?
面试官当场说下周一报到,还需我带上一些资料
就算允许搜索引擎抓取所有页面,也应该在根目录放个空的robots文件,对吗?
robots文件中,user-agent 代表下面的规则适用哪个蜘蛛,对吗?
那个域名更适合做站??
提交问题
相关问题
生成了多个网站地图,robots内怎么设置?
(6 个回答)
请问蜘蛛大量抓取js和css文件,用robots屏蔽会不会对网站造成影响
(10 个回答)
这几天很多访问404的怎么回事?
(19 个回答)
paper写作网站的robots文件怎么写?
(2 个回答)
目前网站的robots协议变成了这个,这个到底是允许还是不允许啊?
(12 个回答)
网站robots.txt文件如何编写,哪些内容应该屏蔽?
(0 个回答)
网站内容没有被搜索引擎抓取可能有多种原因,以下是一些可能的原因和解决方法:
(3 个回答)
为什么网站添加了robots禁止协议还能被收录?
(0 个回答)
收录宝
49115
49111
49110
49097
188
×
悬赏问题
让更多人参与回答
给问题设置一定金额,将更容易获得关注与回答。
1元
路过一下
3元
意思一下
5元
了解一下
8元
支持一下
18元
有钱任性
88元
我是土豪
选择支付方式
微信支付
支付宝
余额支付
确认支付 →
×
追问
追问