![]() |
文·本报记者 王怡
依然漂泊在外的斯诺登让美国“棱镜门”事件悬而未决,也使得“大数据”“云计算”这两个时髦的词汇以一种并不光彩的方式出现在人们的视野中。
“棱镜”计划通过对美国九家主要的互联网公司所掌控的用户的音频、视频、邮件等10类信息进行数据及文本的挖掘,从而分析出个人的联系方式以及行动。值得注意的是,“棱镜”每天所要面对的天量的“10类信息”便是标准的“大数据”。在网络以及媒体对“棱镜门”进行铺天盖地的口诛笔伐以及对爆料者最终去向不断猜测之时,探讨大数据能为我们带来什么似乎更有意义。本报记者特就它影响我们生活的方方面面,采访了有关专家,同时推出上下辑,探讨与大数据有关的那些事儿。
不仅“大”,与之配套的分析能力更“强大”
在提到大数据这一概念时,微软云计算中国区总监沈寓实特别强调:“我们所说的大数据,并不只是数据‘大’这一概念,这是信息和资源两个概念的区别,数据可以看作是信息,大数据则是可以用来分析和参考的有效资源。”
大数据的“大”一方面是数据绝对数量的急剧增长。IBM全球副总裁胡世忠在IBM2013大数据与分析高峰论坛上谈到:“十年前我们把一些数据量做GB,现在数据每个月发生变化,我们把它达到PB的数量,每天差不多25个PB的数据。”
在计算机世界中1PB是1024TB, 1TB又是1024GB。为何在大数据的时代,数据出现了这般爆炸式的增长?这就要提到大数据的“大”的另外一层含义:更广的信息范围。
IBM全球企业咨询服务部大中华区总经理段仰圣谈道:“企业数据,实时数据还有社交媒体的数据都包括在大数据范围内。我们的购物记录,在搜索引擎上的搜索记录被整合起来后都可以成为有用的数据。也就是说,我们在真实生活以及社会交往的过程中的点点滴滴都可以被‘数据化’。很多数据,比如社交媒体的数据是以文本的形式存储,这也一定程度上体现了信息范围的扩大也是数据绝对数量增长的重要原因。”
正如沈寓实所说,大数据并不是简单描述数据数量的庞大与来源的广泛,它更强调的是与之相配套的强大的分析能力。没有从天量数据中披沙拣金的分析能力,空有庞大的数据只会变成“数据坟墓”。
胡世忠简明扼要的把上述大数据的特点描述成4个“V”,V代表了数据的数量、速度、多样性、真实性。这四个V涵盖了大数据最主要的方面:数据量大,数据来源广形态多,分析数据速度快能力强,来源真实。
未来,生活点滴都被数据化
大数据到底会带给我们什么?记者采访的几家从事大数据研发的公司,都在从事着与智慧城市相关的大数据研发。
天云大数据正在依照纽约311热线项目,为北京政府了解民情提供参考。
“我们通过收集到的碎片信息,进行综合分析,依据实时监测公共数据,聚会分类各种相关民情,对数据进行提炼分类和可视化,”天云大数据副总裁雷涛介绍说:“在对北京东城区进行智慧城市网格化管理的民情播报:公共卫生,公共安全,环境设施,社区养老,紧急事件民……通过实时监控与分析,政府可以实时了解民情,并针对不同功能区域结合市民反映状况进行合理改善与治理。”
雷涛介绍说,纽约市民把311热线看成是生活的百科全书,包括报税、流感注射、手机账单,出租公寓、宠物执照,以及游泳池、公园、图书馆、体育场等信息。而311热线所登录的来电内容,也反映出纽约市民生活百态。
311热线让市政当局充分地了解民情,正因为投诉电话太多,纽约市长则针对噪音问题破天荒地对纽约的狗吠修法,狗白天吠叫不可超过十分钟,但若是在晚间,不得超过五分钟,主人如不能在规定时间内使狗平静下来,将会因违反噪音管制法吃上罚单。至于全美国行之有年的冰淇淋贩卖车,各地都是播放传统的童谣音乐,这童谣形同冰淇淋车的标准音乐,但是因不少民众投诉音乐吵人,于是纽约市长规定冰淇淋车子不得播放童谣,仅能以手摇铃来招揽客人。
“纽约,这个美国最大的城市拥有820万人口,每天产生大量的数据,其中大部分数据位于很多市政机构和部门的高度分散的孤岛中,如何有效的利用就成了解决问题的关键,”雷涛说:“大数据不仅仅能为企业所用,还可以帮助政府了解民情。大数据技术不仅仅可以替代传统信息系统,更重要的是大数据拥有前所未有的计算能力,语义计算,行为计算,视觉计算,可以得心应手的处理以前难以处理甚至无法处理的数据。”
IBM全球副总裁兼大中华区软件集团总经理胡世忠也就大数据如何解决交通问题提出了自己的设想。
“北京的交通问题是非常大的,如果可以提供一些数据的分析,让这个城市能够更好地了解在一天的什么时间,有很大的公共交通的情况,或者在某一个时间某条公路上的一些情况,这对于我们物流方面的交通有很大帮助。以此类推,对于政府来说,比如水资源的管理,电网的管理,在大数据的分析之后,都将有一个完美的管理方式。”胡世忠说。