“大数据”成为时下热门的词汇不是没有道理的：谷歌称2010年每两天产生的数据量相当于从人类文明开始直到2003年间产生的数据量的总和，IBM认为，过去两年产生的数据量相当于人类所产生数据总量的90%；有趣的是，IDC认为大数据也有摩尔定律，每过两年数据的产生量就会翻倍。

       如果说摩尔定律是当今指数社会的基因，那么大数据就是指数社会的蛋白质，是社会的物质基础，它构成了当今丰富的人类社会。但是，躺在数据中心的大数据其实是没什么价值的，而且数据的价值与其形成寿命不一定成正比。因此，从数据中及时提取有价值的信息才有意义。而要让大数据处理工具跟专家、科学家甚至普通终端用户实现“天人合一”，从大数据中快捷地提取出人能够理解的信息，也就是说，让大数据说“人话“，这也是一个挑战。

       “解决大数据的问题需要强大的计算力和基于开放架构的平台，这些都是英特尔所擅长的。”英特尔中国研究院院长吴甘沙(左)说。

英特尔践行开放式协作创新理念

       英特尔与合作伙伴一起，搭建了创新的大数据处理生态圈。

       在基层数据平台，英特尔与Cloudera一起推动基于Apache Hadoop开放、可信的数据处理平台，推动生态基础环境的创新；在中间分析应用层，英特尔开放高级的分析功能并将其模块化、平民化，成为主流的应用，从而降低行业应用门槛，吸引更多的创新者，实现规模效益；在最上层，英特尔与生态系统伙伴一起构建示范性的、可扩展的解决方案，进而复制推广到更多行业和企业。

       英特尔正在践行开放式的协作创新理念，即开放的基础设施、开放的数据平台、开放的数据以及开放的跨领域合作。这种创新理念在英特尔跟俄勒冈健康与科学大学一起推动基因组研究云的过程中得到体现：通过把临床的诊断数据、基因组的数据以及病人的基础信息、行为数据融合起来，在双方工程师的协同努力下，实现了720倍的提升，极大地缩短了对病因分析的周期。

       在结合自己最钟爱的健康和生命科学领域的一些案例进行展示之后，吴甘沙相信在2020年的某一天能够完成三件事情：先是对病人进行全基因组的测序，然后锁定癌症的相关基因，最终形成个性化的用药以及修复方案。当然，这将需要跟更多的科研机构来合作。

英特尔中国研究院院长吴甘沙、Cloudera公司首席架构师Doug Cutting、Cloudera公司副总裁苗凯翔畅谈开源优势、大数据技术、应用及未来合作规划。

 Cloudera：特殊的合作伙伴

       Cloudera成立于 2008年，因技术领先地位已经拥有1200个合作伙伴，形成了全球最大的大数据生态链。目前美国约70%智能手机的数据以及数百亿的其他事件的后端处理都是在Cloudera平台上完成的，对美国经济形成重要的商业支撑。除了拥有领先的产品，Cloudera提供的服务和培训也非常有效，迄今已经培训了5万多Hadoop专家。

       在大数据领域，Cloudera是英特尔非常特殊的一个合作伙伴：双方同为开源社区长期的参与者与贡献者，有相似的价值观且技术以及领域互补。今年3月，英特尔投入7.4亿美元成为Cloudera的战略投资者。在解决方案、应用等领域领先的Cloudera，结合英特尔强大的大数据底层架构，正在致力于软硬件设计方面的极致协同。

       而Cloudera中国公司的成立则意味着英特尔与Cloudera的合作进入中国，双方将携手为中国用户提供满足他们需求的大数据技术和解决方案，必将使落后于国外两年以上的大数据技术与应用得以提速。

       “虽然中国大数据虽然在部署上还比较滞后，但是人们的思维非常活跃，在金融、电信、交通和城市安全等方面进行了很多尝试。”Cloudera公司副总裁苗凯翔告诉记者：“中国是Cloudera发展非常重要的一个区域。我们乐意借助于Cloudera在全球特别是在美国的成功案例，帮助中国企业在大数据领域快速成长。”

       刚刚亮相的Cloudera5.3（EDH）是发展大数据应用的最理想产品之一；Cloudera已经把英特尔转为中国市场推出的Hadoop解决方案（IDH）和Cloudera的CDH和EDH功能融合起来成为功能更强的产品，帮助中国企业发展到更快。

Hadoop之父：与英特尔合作提供更多的大数据工具

       Cloudera和Pivotal等众多的公司通过开源社区的Hadoop技术打包成产品推向市场，但Cloudera已经成为业界的翘楚和标准制定者，正在领导这个标准化的发展。

       Doug Cutting于2009年加盟Cloudera，担任首席技术官。他毕业于美国斯坦福大学，是Lucene、Nutch、Hadoop等项目的发起人；他是开源社区技术的重要贡献者，让“开源”影响了世界，让Hadoop造就了大数据的辉煌；他打造的程序被千万人使用，是众人口中的“Hadoop之父”。

       Doug Cutting认为，当今信息技术的发展从根本上改变了现有社会并使其发生了革命性的变化，其他任何领域都未曾引领如此剧烈的变化；也正是信息技术的研发者与各种计算机、传感器、终端设备的用户改变着这个世界，他们在不断提升计算能力的同时产生更多的数据。把数据收集起来进行整合、分析，通过了解到各种设备、业务的运行情况，进一步改善和优化流程。越来越多的行业企业正在采取这种方式提升业绩、创造效益。

       开源产品在这个过程中发挥了重要的作用。其成熟也经历了一个过程。Linux就是一个典型的例子。早期Linux并非最佳选择，但开源吸引了越来越多的开发者，他们不断丰富、完善和提升了，使得Linux成为全球使用率最高的操作系统。

       “我们第一个成功的社区开源项目就是基于Linux平台的。”Doug Cutting说。

       开源平台得到了IBM、甲骨文、微软等大型厂商的一致认可并形成了行业趋势。基于Hadoop这个开放、可信的平台之上的企业数据中心也不例外，人们把所有的数据整合在一起并从中盈利。Cloudera正是通过与英特尔的合作，集成了更多的工具，弥补了数十个社区之间的差距。

       “2006年加入雅虎开始Hadoop项目的早期研发时，我们就与英特尔开展了合作；英特尔提供技术支持，再经过我们不断尝试，最终获得了一些颠覆式的进展和重大的突破。”Doug Cutting说：“我们期望通过Cloudera与英特尔的合作，来提供更多的大数据工具，实现更为丰富的功能，让用户能够更有效地整合和利用数据，并从中获益。”