“大数据饽饽”不好啃

詹国枢

《大数据时代》一书风靡全球已有时日。大数据（Big Data），又称“巨量资料”，是指其数据规模极其巨大，以致很难通过一般软件工具加以撷取、管理、处理并整理成为有用资讯。按业界说法，大数据特点为4个“V”：即Volume（大量）、Velocity（高速）、Variety（多样）、Value（价值）。

大量、高速——到了什么程度呢？一个移动硬盘，容量大约为10个G。2001年，全球互联网总流量达到1EB（即10亿个G）；2004年，一个月即达到1EB；2007年，达到1EB只需一周；而到2013年，仅需一天！换句话说，全球互联网一天产生的信息量，可以刻满1.88亿张DVD光盘。

多样、价值——如此大量、高速的数据，其多样性毋庸置疑，小到个人与个人的数分钟通话，大到公司与公司的巨额交易，虽然全是些风马牛不相及的数字，但经过科学的收集、归类、整理，再加以分析、排列、组合，就会神奇地演变成全新的极其有用的各种资讯。原始数据越大，处理难度自然越大，但处理后其应用价值亦越大。大数据这种无中生有、化腐朽为神奇的增值功能，令人神往。

正因此，世界经济论坛报告将大数据认定为新世纪的“新财富”，称其价值“堪比石油”。也正因此，发达国家纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要目标。美国政府于2012年3月发布了《大数据研究与发展倡议》报告，这是继1993年宣布“信息高速公路”之后又一重大部署。欧盟及日本等国也在大数据研发方面投入巨资，竭尽全力拼抢这一制高点。

大数据这块饽饽虽然闻起来很香，但啃起来却有点硬，其难度有四，一是数据收集难，不但难在大，海量信息，而且难在杂，万千角度；二是数据存储难，如此海量存储，既要低成本、低能耗，又要高质量、高识别；三是数据处理难，信息如密网交织，错综复杂，处理如剥茧抽丝，穿针引线，其难度可想而知；四是数据呈现难，数据最终是要拿来使用的，其呈现须简单、实用，无疑，这是又一个由繁入简的艰巨工程。

好在，大数据应用已初见曙光，欧美各国均有成功先例。有人设想，倘若我们将大数据应用于日常生活，那么，当你打算购买某一产品时，只消将名称输入手机，大数据就会告诉你，这些东西在当地哪些商场有售，其价格分别是多少。于是，你可以马上作出决策。这将给人们带来多么大的方便，又将给商业流通带来多么大的改变。

万事虽然起头难，坚持动手就不难。所谓数据之“大”，不过相对而言。目前，百度、阿里巴巴、腾讯等不少公司已着手成立大数据研发机构。百度目前日处理数据量已达100PB（1EB=1024PB），相当于2700万册藏书。而阿里则根据淘宝网上中小企业的交易状况，筛选出财务健康及讲诚信企业，并对其发放无担保贷款300多亿元，坏账率仅0.3%。这都是大数据应用的好例子。endprint