Hadoop之父首次来华破解大数据困局

　　【专稿】Hadoop in China社区一年一次的技术年度盛会Hadoop中国云计算大会(Hadoop in China 2011,HiC2011)12.2-12.3日在北京召开，Hadoop in China已经成功举办四届，今年大会的主题是“海量数据掘宝”，HiC2011由中国科学院计算技术研究所主办，通过技术应用和科学研究双重视角审视云计算以及Hadoop开源生态系统的现状和发展趋势，发扬开源精神，促进Hadoop以及云计算开源生态系统在中国的发展壮大。

▲Doug Cutting和Hadoop

　　会上，Apache软件基金会主席兼Apache Hadoop项目创始人Doug Cutting发表了名为“Apache Hadoop and The Big Data Platform”的演讲。一开场他就高举手中的棕黄色玩偶小象向中国的开源爱好者们挥手示意，并介绍这个棕黄色玩偶小象是自己孩子的玩具，Doug的孩子将这个小象命名为Hadoop，Hadoop开源项目命名的起源正是来自于这个叫做Hadoop的棕黄色玩偶小象。

　　目前，全球数据量正呈现爆炸式增长，随着硬件系统的快速发展，如今的IT系统已经能够存储更多和处理更多的数据。Hadoop由Apache软件基金会于2005年秋天作为Lucene的子项目Nutch的一部分正式引入。Hadoop是一个能够对大量数据进行分布式处理的软件框架，以一种可靠、高效、可伸缩的方式进行处理。Hadoop通过并行处理加快处理速度，能够处理PB级的数据，同时Hadoop对硬件的要求很低，从而降低了硬件成本。Doug介绍，Hadoop已经成为处理大数据的分布式系统的内核，并将发展成为行业的标准，Apache软件基金会将致力于推动标准的收集以及建立。

　　Doug强调，在建立标准的道路上，将秉承开源的精神，同时鼓励不同项目之间的竞争，避免被供应商锁定，从而来确定最适合的标准体系。同时他介绍，Hadoop目前最新的版本是Apache Hadoop 0.20.205，未来将推出Apache Hadoop 0.23，Hadoop0.23将MapReduce编程模型从运行时环境中剥离，MapReduce变成了Hadoop的编程库，从而，在运行时环境之上灵活开发MapReduce、DAG、Iterative MR等编程模型，实现对于多种应用场景的支持，将具备更高的性能、扩展性、高可用性。

　　Hadoop社区虽然年轻，但已经从最初两位开发人员创办发展到现在的上百名成员，最后，Doug热情呼吁更多的开源爱好者来加入Hadoop社区。

　　浏览Hadoop中国云计算大会专题请猛击这里。

（编辑：ASP站长网）