SEO
聚集100万网络营销实战家
跟夫唯老师学SEO
提问题
建网站
换友链
登录
网站的robots文件有什么用? - 搜外SEO问答
搜外网
>
搜外问答
>
问答页面
网站的robots文件有什么用?
微信
追加问题
交换友情链接,就用搜外友链,方便!
6 人参与回答
yc888
·
冷冷资源网站长,入站长圈10年
可以设置禁止蜘蛛抓取目录。。。
水羊
·
普奇研究院是专业从事漏水检测仪,测漏水查漏水精准定位,漏水探测仪
可以设置禁止蜘蛛抓取目录。
利美医疗
·
四川利美医疗是一家集一次性口罩、口罩辅料、清洁防护用品的研发、设计、生产、销售为一体的高新技术企业!
可以设置禁止蜘蛛抓取目录。
客套企业名
·
一款可以搜索企业名录的CRM软件。
禁止蜘蛛抓取或者是允许蜘蛛抓取的文件
梦梦
·
泰海科技12年服务经验,专注于服务器租用
不希望蜘蛛抓取的链接,放在里面就行
杭州继保
·
微机保护行业
这个不好说啊。。。。
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!
了解合理带链接的方法
本贴交流超时,回复已关闭
同一套模板搭建多个站点会被判定为站群从而被算法覆盖吗?
谷歌优化排名前期是长尾关键词?
网站改版要不要提交一次?
哪里免费发布外链怎么发?
大量网站的百度索引暴涨怎么回事?
SEO优化怎么与大型站交换友情链接?
html页面在ie上出现404怎么解决?
网站降权一个月有什么解决办法?
WordPress动态链接修改为静态链接后变为404怎么办?
如何解决WordPress伪静态链接出现404错误
提交问题
相关问题
网站业务文件没有在根目录下面是否有影响
(3 个回答)
如果robots文件把网站所有页面都做禁止抓取,那百度蜘蛛是不是就不会爬我这个网站了?
(3 个回答)
网站换了新的服务器之后,过了很久还一直抓取失败,检测了robots文件没有问题
(7 个回答)
生成了多个网站地图,robots内怎么设置?
(8 个回答)
请问蜘蛛大量抓取js和css文件,用robots屏蔽会不会对网站造成影响
(10 个回答)
这几天很多访问404的怎么回事?
(22 个回答)
paper写作网站的robots文件怎么写?
(2 个回答)
目前网站的robots协议变成了这个,这个到底是允许还是不允许啊?
(12 个回答)
收录宝
uanti
jianw
uyanz
meizh
189
×
悬赏问题
让更多人参与回答
给问题设置一定金额,将更容易获得关注与回答。
1元
路过一下
3元
意思一下
5元
了解一下
8元
支持一下
18元
有钱任性
88元
我是土豪
选择支付方式
微信支付
支付宝
余额支付
确认支付 →
×
追问
追问