登陆注册
49122600000003

第3章 大数据是一场革命(2)

在美国,有一家创新企业叫Decide.com,就是充分运用了大数据的集合功能,在全球的各大网站上搜集数以十亿计的数据,从而预测产品和产品的价格趋势。告诉消费者在什么时间段做购买决策,什么时间该购置什么产品,什么时间购买产品是最实惠的。此外,还帮助一些生产厂家提高生产率,降低交易成本,等等。

除了这家企业外,美国的跨国科技企业谷歌公司(Google公司)也顺应时代,走进了大数据的潮流中。其实,谷歌公司的高管们一直不愿意让公司的任何一款产品与大数据有什么联系,而且,禁止公司的员工在对外交流中提到大数据。但是《大数据》作者维克托-舍恩伯格在评价谷歌公司时指出,谷歌公司很清楚自己的位置和处境。实际上,它就是一个大数据公司,因为他们理解大数据的核心所在。如果他们没有看到这些数据的价值,绝对不会迈入这个充满竞争和玄妙的市场。

维克托这话不无道理。早在十多年前,Google公司就已经开始了数据搜集之旅,并利用数据来构建产品。比如,Google搜索,广告,翻译,音乐,趋势以及更多的其他产品,都无法离开海量的大数据。当Google取景车载着全景摄像头满世界跑的时候,Google公司就已搜集到了世界绝大部分城市的街景图;当Google三维红外线照相机不停运作的时候,Google公司已经完成了数千万图书的扫描。

此外,Google还搜集了一些意想不到的数据。比如,用户在进行搜索时打错的字,Google将这些错误的输入存储起来,然后将其和最后正确的输入进行联系,用于开发Google自动更正系统和Google翻译。同样,海量的数据不是关键,重要的是Google公司拥有多项世界领先的大数据技术,如Colossus分布式存储,Big Table列式存储,Caffeine索引系统,Big Query数据分析服务和Cloud SQL(云SQL)。借助强大的技术以及先进的计算模型,Google公司能以一种高效而可靠的方式,充分运用大数据和展示成果。

随着大数据的运用广泛,Facebook在互联网大数据搜集方面也后来者居上。如今,每天有500TB以上的数据上传到Facebook。Facebook上已经存储着近十亿用户分享的个人信息,例如,年龄、性别、所在地、兴趣,等等。同时,这些用户还在Facebook的Timeline(个人生活时间轴)页面记录个人生活故事。在通过个人的基础信息和时间线获取了大量的数据后,Facebook就如同一个用户亲密的朋友,清楚地记得用户的过去和现在,并预测着用户的未来。为了处理这些海量的信息,公司配置了最大的分布式处理系统,单个集群中的数据存储容量就超过了100PB。之后,Facebook通过复杂的数据分析来帮助商家接触潜在目标顾客,从而实现投放广告的准确有效。用户留下的数据越多,Facebook就越了解用户,投放的广告就越发精准。Facebook收入的未来在于其对复杂数据的分析,而不是靠输送大量广告来吸引用户的眼球。

在大数据新兴的模式下,尽管有一些零售商的利润会受到一些影响或打击,但从较好的商业本质来说,消费者可以更理性地购物,更有效地管理资金。

我们再来举一个例子:SWIFT(环球同业银行金融电讯协会)是全球最大的支付平台。在这个平台上,每一笔交易都可以进行大数据分析。研究人员可以预测出一个经济体的健康性和增长性。比如,这个公司现在为全球性客户所能提供的经济指数。

此外,大数据的基本结构还分为三个层次,反映出观察数据库的不同角度。

第一层是物理数据层:是数据库最里面的一层,是物理存贮设备上实际存储的数据的集合。这些数据是最原始数据,也是供用户加工的对象。物理数据层由内部模式描述的指令操作处理的位串、字符和字组合而成。

第二层是概念数据层:是数据库置于中间的一层,也是数据库的整体逻辑的部分。这层数据层指出了数据与数据之间的逻辑定义和联系,是存贮资料的整合点。此时要注意的是,这层数据层所涉及的是数据库所有对象的逻辑关系,而不是其物理情况。

第三层是逻辑数据层:是体验用户能够看到和使用的数据库,也是能够证明用户使用过的证明和踪迹。

总之,小数据,大集合就是按照某种数据集中起来并存放二级存储器中的一种方式。这种数据集合还有着一定的特点,比如尽量不出现重复的情况。

3.创新思维

从目前看,全世界的数据总量正持续增长。过去三年内所产生的数据量已超过去的总和。随着互联网、物联网等IT行业的蓬勃发展,新数据源如泉水般涌现,GPS、传感器等数据持续并大量产生。而由于数据获取成本、存储成本和处理成本比较低,也推动了数据总量的膨胀。

2011年6月,美国麦肯锡公司全球研究院在题为《大数据:下一个创新、竞争和生产力的前沿》的研究报告中指出—大数据时代已经到来。的确,大数据的到来势不可挡,它迅速抓紧了时代的前沿和趋势。2012年3月,美国政府宣布“大数据的研究和发展计划”,将大数据视为增强国家竞争力的秘密武器之一。

其实,不仅仅是美国,包括我国在内的一切其他国家,也都把大数据放置在国家战略层面上,并一致认为:一个国家未来的竞争力将体现在拥有数据的规模及运用数据的能力上。

这一创新思维,已为人们在信息技术领域好好上了一课。更有甚者,将大数据比喻为推动人类社会发展的“新石油”。这一比喻可谓贴切至极。

作为继云计算和物联网后又一次具有颠覆性的技术革命,大数据深受人们的推崇,并被广泛使用。此外,就连当今世界科技创新、国家安全战略以及新军事变革也青睐起大数据来,将其作为极为重要的知识增长点。据国外的媒体爆料:截至2012年年底,全球互联网总数据存储量高达160亿TB,并正以59%以上的年增长率高速增长。有评论指出,每天遍布世界各个角落的传感器、移动设备和在线交易等产生的海量数据昭示世人:人类已加速步入“大数据时代”。

在军事领域,大数据更是充分发挥出独有的能力。在海量的数据库面前,随便打开一座,里面都是有价值的数据。再通过分析发现规律,便能够获取高价值的信息,从而做出重要决策,把握时局。这也是大数据的军事价值。

比如,美国的“海豹”突击队击毙本·拉登事件,于刹那间吸引了全球人的眼光。不过,外军经过深入研究后指出,能够发现本·拉登并将其击毙,靠的是几千名数据分析员和长达十对海量信息的分析。因此,有人说是“数据抓住了本·拉登”。

无独有偶。在美俄达成有关叙利亚化武换和平协议的时候,美国情报机构列出了叙利亚数十项化武生产和储藏地点清单。可以说,能够发现和锁定目标,是基于美卫星数据情报和分析员长时间的分析。专家告诫:驾驭未来战争,绝不能忽视没有硝烟的大数据战场。

看来,数据的创新思维,已经影响到人类生活和生存的方方面面。现在,我们来详细地归纳一下大数据创新思维对人类经济社会发展影响巨大的几个主要方面。

首先,大数据的创新思维可以推动并实现巨大的经济效益。

据麦肯锡公司全球研究院通过研究得出结论:大数据给美国的医疗服务业带来的经济价值高达3000亿美元;大数据使美国零售业净利润增长60%;大数据降低了制造业的产品开发和组装成本,并让其成功下降50%。有专家称,大数据所衍生和产生信息技术的应用需求,将推动整个网络信息技术的发展。到了2016年,预计全球大数据会在一定的程度上拉动信息技术,金额支出将高达2320亿美元。

其次,大数据的创新思维可以增强社会管理水平。

在政府和公共服务领域,大数据的出现有效地推动了政务工作的开展,提高了政府部门的决策水平、服务效率和社会管理水平,并产生了不可估量的社会财富。在大数据的影响和帮助下,欧洲等地的多个城市运用大数据分析,采集到准确的交通流量数据,从而能够及时提醒驾驶者哪条是最佳的出行路线,以此改善交通拥堵的状况。

最后,大数据所具备的创新思维还可以推动和提高安全保障能力。在国防、反恐、安全等领域,大数据应用也起着至关重要的作用。比如,大数据会将各部门搜集到的信息进行自行分类、整理和分析,有效解决情报、监视和侦察系统不足等问题。

因此,人们可以了解到,大数据的创新思维不仅是认识和改造世界的有力工具,还是能掌握事物的发展规律,准确预测未来的好帮手。

4.转型思维

早在1996年,美国联邦政府就声称信息是重要的国家资源,并认为自己是美国最大的单个信息生成、搜集、使用和发布方。

以美国人口普查局为例。

它作为美国人口、经济和政府方面重要统计数据的主要来源,目前拥有2560TB(太字节)的数据,如果把这些数据全部打印出来,用四个门的文件柜来装,需要5000万个才能装下。美国国家安全局对全美的电话进行监控,每六小时产生的数据量,就相当于美国国会图书馆(世界上馆藏量最大的图书馆)所有印刷体藏书的信息总量。此外,美国财政部、美国卫生部和美国劳工部也都是数据密集型的行政管理部门。而这,只是美国联邦政府数百个机构当中的几个例子。

为承担这些数据的存储和维护工作,1998年,美国联邦政府共拥有432所数据中心,而到了2010年,数据中心的总数跃升到2094所,翻了几番。1996年,美国联邦政府的年度信息技术预算是180亿美元,十多年来不断上升,到2010年,已经高达784亿美元。据报道,这些投资中的一半以上都用在了购买存储数据的硬件设备上。在大数据转型思维的冲击和配合下,政府不仅仅成为最大的受益者,也成为占有者之一,在诸多方面起到了至关重要的作用,如基础设施方面、大数据产业方面、人才培养上以及完善相关标准和立法方面等。

在我国,政府在资源配置方面起着调配的作用,能够集中力量办大事,并影响和带动大数据加速发展。不过,由于政府在大数据方面的能力以及对大数据的熟悉程度较弱,所以要想真正运用好大数据,要面临的问题也不止一两个。其中,就包括一些转型方面。

比如,大数据推动管理的现代化转型。将大数据的手段及其方式方法引入管理领域,是实现管理现代化的有效路径之一,也是大数据时代必然迈出的一步。

同类推荐
  • 中国资本配置优化研究

    中国资本配置优化研究

    本书在阐述资本、资本配置和资本配置优化的基本内涵以及资本配置的前人理论的基础上,系统地分析了中国资本配置的演进状况和实际效率,提出了中国资本配置的战略目标、调节机制和具体途径。
  • 促销的本质

    促销的本质

    1945年,山姆·沃尔顿在小镇上只有一家“五毛店”的时候,就一刻不停地想法促销:价格永远比别家低20%;请马戏团表演吸引人气,搞大抽奖和各种比赛。46年间,他的促销让营业额一路疯长,一直疯长到500亿美元,沃尔玛成为全球最大零售商;而他最关注的仍然是促销:在每周例会上,会亲自制定一条海滩浴巾的促销方案;与通用电气的杰克·韦尔奇合作、对一种车前灯进行全国大促销。
  • 中小企业财务一本通

    中小企业财务一本通

    公司运营,财务金融是核心!资金是企业顺畅运转的生命线,多少企业因为资金短缺而得不到持续快速的发展,又有多少企业在发展的顶峰时期因为现金流断裂而轰然倒塌。如何管理好企业财务,如何防范和化解财务风险,如何通过资本市场进行有效的融资和投资,如何通过成本管理和纳税筹划减少企业的运营成本,实现股东价值(或企业净利润)的最大化……所有这些,都是我们的企业管理者需要时时面对的问题!
  • 宋江管理有一套

    宋江管理有一套

    一般人要讲忠、信、义,当领导更要讲忠、信、义。人不忠就不叫人,这个忠不是让你愚忠,而是忠诚于自己的事业与团体。忠是有条件的,要看具体人,信则是无条件的,对小人也要讲信,否则你也成小人了。义是对自己人好,很多人干事老让亲者痛而仇者快,就是不明白义的重要性。义有小义,有大义,小义大义都好,小义有小成,大义有大成,当领导要有大义。
  • 企业管理概论(谷臻小简·AI导读版)

    企业管理概论(谷臻小简·AI导读版)

    本书是为适应各级各类干部自学和函授教学需要而编写的。希望大家通过本书的学习能够掌握有用的企业管理基本理论和常用的管理方法,借以提高自身的经济管理理论水平,搞好各自的经济管理工作。本书突破了以往的企业管理教材结构体系,以现代企业管理为主线,将经济基本知识、管理基本知识和企业管理实务融为一体,力求简明扼要、通俗易懂、覆盖面宽。
热门推荐
  • 花边狂徒

    花边狂徒

    我以节操保证,这是一个‘纯洁’的男人和一群‘纯洁’的女人的故事!主角:你的节操还剩多少?我:藐视我?关门,放总裁,不,放如花!如花:旺~!主角:我输了!
  • 鸿宇修炼传

    鸿宇修炼传

    男孩走上修炼道路,历经千般磨难只为去探寻那位置的深渊。
  • 天行

    天行

    号称“北辰骑神”的天才玩家以自创的“牧马冲锋流”战术击败了国服第一弓手北冥雪,被誉为天纵战榜第一骑士的他,却受到小人排挤,最终离开了效力已久的银狐俱乐部。是沉沦,还是再次崛起?恰逢其时,月恒集团第四款游戏“天行”正式上线,虚拟世界再起风云!
  • 神州破晓

    神州破晓

    神州浩土,当今之世,正邪对立,仙魔互斥。如今天下正道三大领袖门派之首【苍穹至尊】苍云门于梁州布下仙阵,并号令天下修仙者伏击一名正道叛徒,此人名叫陆岳,就连魔道的修魔者也要不惜任何代价追而杀之。陆岳同时被仙魔两道追杀,天下虽大已然没有任何藏身之所。本书的故事便是从陆岳逃亡开始,正与邪的仙魔大战,对与错的矛盾冲突,一曲波澜壮阔的仙灵乐章在神州响起,一段精彩纷呈的侠义传奇正在书写。琳琅满目的灵宝武器,天马行空的心法仙阵,世间罕见的奇珍异兽,你心中的仙与侠,尽在此书中!
  • 一骑仙人妃子笑

    一骑仙人妃子笑

    他是慧根满满即将修仙的半仙人她是京城首富为了巴结官骄纵养大的大小姐。它是红衣猫妖。他要成仙,她进了他的房,破了他的功。它要成妖,她绊了他的路,磨了它的性。首富家小姐误入修仙少爷闺房的故事
  • 感觉目光——当代学生阅读经典

    感觉目光——当代学生阅读经典

    本书共分为九部分,收录了100余篇散文,包括《流浪也是一种生活》、《青春是心情》、《我是一株开花的树》、《闪光的友谊》等。
  • 带师救我

    带师救我

    天地灵气复苏,葛易因为一次偶然,发现了天地异变,从而走上修行之道。天地剧变,神州逐渐重现远古仙神的辉煌时代,人、仙、神、鬼、妖、魔,人仙混居、神魔共舞,乱象渐显……
  • 踏破二次元

    踏破二次元

    火影忍战:崛起战国,谋划百年,轮回写轮,覆灭大筒木!死神血战:真央学习,蛰伏四番,友哈虚王,崩玉蓝染,一战破界!海贼星空:拉夫德鲁,堪破肉身,引领星空,拳破虚空。妖精尾巴:探究魔法,养龙吃龙,魔法真谛,屠神噬魔!一拳超人:英雄怪人,一拳琦玉,探破限制器!超神学院:神恶果树,培育战士,犯我地球,虽远必诛!龙珠超神:赛亚弗利,解析基因,拳打破坏,脚踢全王!二次元:拳破虚空,打破壁垒,遨游次元!
  • 疯狂的医院

    疯狂的医院

    五名驴友结伴到五顶山旅游,一位中途下山,另外四位返回市区后却身染怪病,几天后即不治身亡,死状极为恐怖。半个月内,凡是与这四名驴友接触过的人都无一例外地感染神秘病毒:护士、医生、病友、电视台记者、公园老人、饭店食客、幼儿园老师……可怕的病毒像链条般迅速感染更多人,以至于不得不全城疏散。几百名疯狂的患者住进了隔离的医院。病人们都明白,他们感染的这个神秘病毒比非典、艾滋病还可怕,这将意味着死亡,而且会死得非常痛苦。一群即将死去的人住进了疯狂的医院,他们将失去自由,失去一切!活着痛苦,死了又不甘。绝境之下,他们心理上会有怎样的变化?在毁灭之前他们会做些什么?而这一切是意外还是人为,又是谁在幕后操纵?
  • 当沙雕遇上霸道总裁

    当沙雕遇上霸道总裁

    [本文沙雕且欢乐×无聊时的产物]来自某雕星球的艾玛·苏被系统坑到地球。于是,她神奇(狗血)地遇到了一位:那个不近女色,冷酷无情,拥有C国皇室血统,精通八国语言,掌握着世界经济命脉,坐拥所有世界一流公司……(此处自行脑补)的男人——墨冰寒·尼古拉斯·莎其玛第一次见面:艾玛·苏目光深沉“难道你就是传说中的尼古拉斯家族继承人——墨冰寒?”那个掌握着全球经济命脉的男人用能把人冻死的目光看着艾玛·苏,默默地想‘这个女人,甚是有趣”从此,艾玛·苏开始了她与霸道总裁“相爱相杀”之旅『沙雕欢乐有内涵』这是作者第一次写文,来自某软件的灵感不喜勿喷