在大数据时代，科技圈的大数据，你get到了吗？

<p>2000年，微软如日中天。有人问比尔盖茨（Bill Gates）对于IT行业的看法。</p><p>盖茨说，挺好的，就是有点noise。 noise，本意是噪音。但是五个字母又分别指代五家公司：Netscape, Oracle, IBM, Sun, EMC。 这一语双关可谓骚出了天际。今天的第一杯，就为这个故事干一个吧。 不过，和盖茨的很多传奇故事一样，这个传闻目前只流传于中文世界。</p><p>盖茨到底有没有说过那么嚣张又霸气的话，暂时无处考证。 传言如此深入人心，有一个重要的原因。这一问一答准确又形象地概括了一个旧时代：以微软为绝对统帅，加上NOISE这5家软件公司，IT企业卖软件，一手交钱，一手交货。 科技圈的天，变得比臭男人的心还快。以Google为代表的新贵举着“免费“的旗号，已经打到了家门口。搜索既然不收费，那Google怎么赚钱呢？ 常言道，天下没有免费的下午茶。当你用的产品不要钱，那么很可能作为用户的你就是产品本身。</p><blockquote>科技圈充满了快活的空气</blockquote><p>为了捍卫自己科技公司的质感，Google连发三篇论文。</p><p>围绕一个主题：怎么处理数据。 随着上网人数和信息量的爆炸，Internet的海洋越来越宽广，Google每天收到30亿条搜索指令。仅仅1天处理的数据量，就是美国国家图书馆所有纸质出版物的上千倍。可是尽管如此，每当我们按下回车键，搜索结果却能即时地展现出来。这背后有什么魔法？ Google的三篇论文，篇篇佶屈聱牙，又字字力透纸背，分别介绍了三个技术:GoogleFileSystem, MapReduce, BigTable。</p><p>千言万语汇成一句话：用分布式的体系，搭建一套数据存储、分析的系统。 希腊神话里，普罗米修斯将火种带给人类。火，极大地提高了人的生产力。希腊人惜墨，没介绍普罗米修斯的长相。 现实里，Google的程序员就像普罗米修斯，那三篇介绍怎么突破数据处理能力的文章，被后人誉为“三驾马车“.</p><blockquote>传统技术，是集中式单点架构。</blockquote><p>打个比方，你有一个助理，小明，什么事都集中交给他。忙的时候小明天天睡公司，闲的时候上班玩手机。 Google“三驾马车”提出分布式架构:比方，你的事业越做越大，如今小明就算一天工作24个小时也完成不了。于是就分布式地招3个助理，小A，小B，小C，各司其职。 原理是简单的，而现实极复杂，尤其考虑到现实互联网面临大规模、高并发、实时在线等新的需求。 信息怎么分发给ABC？以什么标准？这可不能乱分，回头自己都忘了“帮我在四季开个房“是交给了小B办还是小C。如果问错了人，不仅效率慢，关键会搞得人尽皆知。还有啊，进一步延伸，以什么标准招聘ABC，哪些招名校，哪些招实干派，是不是必须能喝酒，上班的裙子可以接受多短？物尽其用，不可造次。 所以，每有技术变革，第一件事一定是路线之争、行业标准之争。</p><p>光看这些眼花缭乱的专业词汇，就能明白，大数据这玩意，技术门槛不低。但是每个市场参与者，都想积累数据，了解数据，挖掘数据，把自己在商业搏杀中的赢面提高哪怕一点点。于是，市场分工发挥了作用，专门有些公司：我来买服务器，我来搭架构，你需要存储和处理数据？好，我卖个服务给你。</p><blockquote>人类进入了——大数据时代。</blockquote><p>在像网络购物、移动支付、共享经济等等，大家已经身在其中，乐享其成，而背后离不开大数据的应用。数据时代已经来临，大数据是信息化发展的新阶段，对经济发展、社会治理、国家管理、人民生活都产生了重大影响。5月26号到29号在贵阳召开的中国国际大数据产业博览会，就是展示数据产业最新发展成果的绝佳窗口。在这样的主题下，“开放合作”“互利共赢”“自主创新”“共创未来”成为与会嘉宾使用的高频词。</p><p>每个人都有手机，运营商可以对使用他们网络的用户他们 的手机行为进行监控，也就是你们在手机上的一举一动都是一直被运营商监控的。比如你们今天去搜索了大数据的关键词，使用了什么APP，在浏览什么网页都可以分析出来，大数据可以通过4个纬度帮您筛选用户。</p><p>1.【网站APP抓取】提供行业相关的APP或者网址，可以抓取近两天在登入浏览在这些网址APP上的用户。</p><p>2.【关键词抓取】提供一些您行业相关的关键词，可以把近两天在各大网站上搜索过这些关键词的用户数据。</p><p>3.【竞品电话】通过同行的咨询电话，可以抓取近期打过这个电话咨询过的用户。</p><p>4.【纬度抓取】经纬度抓取活跃在这个经纬度里人。</p><p>以上的所有数据筛选出来后，还可以筛选抓取出来的数据的用户性别，年龄，地区等等。</p><blockquote>阳光是最好的防腐剂</blockquote><p>在大数据时代，以上至少两点可以提高。</p><p>第一，既然经过有限几轮实验就能发现“啤酒+尿不湿”促销法，那么用数字化方式+无数次实验所有可能的组合搭配，会发现多少种促销大法呢？显然，零售的效率要爆炸了。</p><p>第二，找到“把啤酒放到尿不湿旁边”的促销方法就行，何必一定要找一个蹩脚的理由？这就好比已经汗涔涔地倒下，却傻乎乎地问“我和你前X友们比，谁更棒？”这既找不到真实的答案，也无助于业务能力的提高。</p><p>不追求精确度，不追求因果，承认混杂，探索相关——这就是，大数据时代。阿里巴巴前副总裁车品觉打过一个超赞的比喻：先开枪，后瞄准。</p><p>如果把大数据技术比喻成武器。那么数据只不过是火药。千年前火药就存在，数量再多也只不过是祭祀封建的鞭炮，如今决定火药能否成为威力巨大的子弹，最关键的是造枪的技术。</p><p>其实，管理者如果真的想帮忙，大概有以下三点是可以做的。</p><p>第一，培养人才。根据各类报告，以及三网大数据和从业者的交流，中国大数据行业的人才缺口目前约100万，5年后将达到500万。</p><p>第二，保护知识产权，维护市场公平。市场与人性如此，我们不要自欺欺人。刹住蔓延中国的商业抄袭之风，让每个企业无论大小都可以收获自己的商业果实。这样才能真的做到万众创新，让待攻克的技术难题陷入人民战争的汪洋大海。</p><p>第三，开放数据。目前来看，几乎所有的公共数据都在政府和BAT手中。既然数据就是价值，开放价值，就好比战国时期燕昭王于易水之畔筑黄金台，招天下之士，谁是英雄，现场抽一块黄金与之。 其实，美国也有振兴大数据行业的政策，而且比我们更早，但不是补贴钱，而是开放政府掌握的数据。</p><p>大数据带来的影响早已经不仅仅是展示，随着技术的发展，大数据正在深刻改变着我国的经济发展、社会进步和百姓生活。</p><p></p><p>近些年，我国在大数据产业发展方面是日新月异，进步迅猛。在某些领域已经由跟跑、并跑迈向了领跑，但发展短板也不容忽视。我国的大数据产业，虽然快速发展的格局基本形成，但在数据开放共享、核心技术突破、以大数据驱动发展等方面仍然面临不少挑战。对于已经成为国家战略的大数据发展来说，还应该“审时度势、精心谋划、超前布局、力争主动”。激活大数据、挖掘大数据、运用大数据，探索更多新技术、新业态、新模式，大数据才能产生更大价值，赋能高质量发展。了解更多大数据运用方法?</p>