发展大数据 仍需冷静面

继物联网、云计算之后，大数据已经成为当前信息技术产业最受关注的概念之一。面对社会各界纷纷关注的“大数据”热，应充分认识其内在机理及带来的挑战，进一步理清对策思路。

大数据蕴含着巨大的潜在经济及社会价值

种类繁杂、数量庞大的大数据，为我们更深入、更准确地认识和把握事物发展的内在规律提供了信息基础，其中蕴涵着非常大的潜在价值。这一点不仅是许多业内研究机构的共识，也已经在商业应用中得到了体现。

大数据的应用已经有了许多典型案例，如IBM日本公司利用互联网搜索数据建立的经济指标预测系统，以及美国印第安纳大学利用谷歌公司提供的心情分析工具对道琼斯工业指数变化的预测，已经达到比较高的准确率。除了经济分析外，在农业、医药卫生、制造业等领域，也有一些成功应用大数据进行预测的案例。

据美国麦肯锡公司预测，大数据将为美国医疗服务业每年带来3000亿美元的潜在增加值，为欧洲的公共管理每年带来2500亿欧元的潜在价值，为位置服务产业带来6000亿美元的潜在年收入。零售商充分利用大数据可实现运营利润增长60%，制造业充分利用大数据可降低设备装配成本50%。经合组织（OECD）的一项最新研究成果还对互联网数据的市场价值进行了估计，佐证了大数据的巨大潜在价值。

总体而言，大数据的应用和发展离不开以下三大要素：

一是不同参与主体产生的大量数据信息。这是大数据应用发展的“原材料”基础，也是催生这一概念的基本条件。日本EMC公司与美国IDC公司于2013年年初共同公布了关于大数据方面的最新预测结果：到2020年，人类产生的数据总量将达到40ZB。除了拥有大数据平台的互联网和电子商务企业之外，政府部门、科研院所、高等院校、非营利机构等组织也拥有大量尚未得到有效利用的数据。

二是支撑大数据存储和运算的IT基础设施。这是大数据应用发展所必需的“设备”基础。大数据的存储和高效处理需要云计算数据中心的支撑，大数据的高速传输则需要足够带宽的互联网通道。有了足够的数据承载能力，才有可能进行进一步的分析挖掘。

三是挖掘大数据潜在价值并进行应用的能力。这是大数据产业能否成功发展的“瓶颈”所在。数据量的不断增长尽管带来了巨大的潜在价值，但同时也对我们的价值挖掘能力提出了巨大挑战。2012年全球被创建和被复制的数据总量达2.7ZB，其中较容易处理的有序的结构化数据相对较少，而大量的文本、图片、音视频、医疗影像等非结构化数据则超过85%。如何把这些庞杂无序的数据进行分析、处理和集成，变成有用的信息，是大数据应用发展面临的核心问题。

我国发展大数据应用需冷静面对诸多挑战

据国内有关研究机构初步统计，目前我国大数据产业还处于发展初期，市场规模仍然比较小，2012年仅为4.5亿元，而且主导厂商仍以外企居多。据预测，2016年我国大数据应用的整体市场规模将突破百亿元量级，未来将形成全球最大的大数据产业带。事实上，相对于发展前景的乐观预测，我国发展大数据产业面临的现实挑战更值得认真分析和对待。

首先，如何使分散在不同部门和主体的数据得到合理有效应用。需要明确哪些数据可以用、哪些数据不能任意地进行商业应用。大量的互联网数据掌控在企业手中，但是属于个人隐私或涉及国家信息安全的则应该进行合理限制和规范。对于政府部门、研究机构和高校掌握的专业数据，则须明确是否应向社会公众开放。

其次，如何构建可支撑大数据的IT基础设施。这一点涉及到对传统数据中心的改造和利用、新型云计算存储和处理系统的建设，以及如何尽快建设一个高速、方便接入的互联网通道。

第三，如何掌握大数据挖掘技术和培养大数据专业人才。大数据分析需要相关技术与人才的支撑。发达国家的部分IT企业已经初步掌握了一些数据分析预测的关键技术，我国相关企业的技术能力还比较落后。麦肯锡公司预测美国到2018年需要大数据分析人才40多万，人才缺口将达10多万。我国刚刚引入大数据概念，人才匮乏问题更加突出。

第四，如何避免未来出现大数据产业重复建设甚至产能过剩问题。近几年来，部分新兴产业已经出现了产能过剩的苗头，体制性原因导致的重复、超前建设问题比较突出。对于热度正高的大数据产业，如何避免因政府不当干预导致这些问题重演，是对我国当前区域竞争下产业发展体制的一个挑战。