`

Hadoop v2 时代正式到来()

 
阅读更多

转载自:http://www.iteye.com/news/28387

Apache基金会近日正式发布了Hadoop 2.2版本,该版本是Hadoop 2.x分支中的首个稳定版本(2.0.x为alpha版本,2.1.x为beta版本),标志着Hadoop 2时代的正式到来。


Apache建议用户升级至最新版本,因为这个版本更加稳定,并保持与之前版本API和相关协议条款的兼容。与Hadoop 1.x相比,Hadoop 2的主要亮点如下:

  • 新的Hadoop MapReduce框架YARN
  • HDFS高可用性
  • HDFS Federation(HDFS联盟):使得HDFS支持多个命名空间,并且允许在HDFS中同时存在多个Name Node
  • HDFS快照
  • NFSv3可访问HDFS中的数据
  • 支持在Windows平台上运行Hadoop
  • 兼容基于Hadoop 1.x构建的MapReduce应用
  • 大量针对生态系统中其他项目的集成测试

此外,从Hadoop 1.x升级到2.2需要注意以下事情:

  • HDFS社区建议将symlinks功能从2.3版本中移除,目前该功能已停用
  • 在新的YARN/MapReduce中,用户需要更改ShuffleHandler服务名称——需要将mapreduce.shuffle改为mapreduce_shuffle

详细信息Hadoop 2.2.0发行说明

官网http://hadoop.apache.org/

分享到:
评论

相关推荐

    Hadoop MapReduce v2 Cookbook, 2nd Edition-Packt Publishing(2015) 高清完整版PDF下载

    Hadoop MapReduce v2 Cookbook, 2nd Edition-Packt Publishing(2015) 高清完整版PDF下载

    hadoop炼数成金

    hadoop_v2_01a.mp4、hadoop_v2_01b.mp4、hadoop_v2_01c.mp4、hadoop_v2_01d.mp4、hadoop_v2_01e.mp4、hadoop_v2_02a.mp4、hadoop_v2_02b.mp4视频大小:4.98G

    Hadoop MapReduce v2 Cookbook (第二版)

    Hadoop MapReduce v2 Cookbook (第二版), Packt Publishing

    Hadoop.MapReduce.v2.Cookbook.2nd.Edition.1783285478

    Explore the Hadoop MapReduce v2 ecosystem to gain insights from very large datasets About This Book Process large and complex datasets using next generation Hadoop Install, configure, and administer ...

    hadoop-train-v2-1.0.jar

    hadoop-train-v2-1.0.jar

    Hadoop MapReduce v2 Cookbook.pdf

    Hadoop MapReduce v2 Cookbook.pdf

    hadoop2.7.3 hadoop.dll

    在windows环境下开发hadoop时,需要配置HADOOP_HOME环境变量,变量值D:\hadoop-common-2.7.3-bin-master,并在Path追加%HADOOP_HOME%\bin,有可能出现如下错误: org.apache.hadoop.io.nativeio.NativeIO$Windows....

    后Hadoop时代的大数据架构

    提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化,...我把2012年后定义成后Hadoop平台时代,这不是说不用Hadoop,而是像NoSQL (Not Only SQL)那样,有其他的选型补充。

    Hadoop英文电子书集合

    5、Hadoop MapReduce v2 Cookbook 2nd Edition.pdf 6、Hadoop Operations and Cluster Management Cookbook.pdf 7、Hadoop Real-world Solutions Cookbook.pdf 8、Hadoop The Definitive Guide 2nd Edition.pdf 9、...

    Hadoop.MapReduce.v2.Cookbook pdf

    Hadoop.MapReduce.v2.Cookbook pdf书籍,基于hadoop2的

    hadoop3.3.3-winutils

    在Hadoop1.x 时代,Hadoop中的MapReduce同时处理业务逻辑运算和资源的调度,耦合性较大。 在Hadoop2.x时代,增加了Yarn。Yarn只负责资源的调度,MapReduce 只负责运算。 Hadoop3.x在组成上没有变化Hadoop ...

    04-29 后Hadoop时代的大数据架构.pdf

    04-29 后Hadoop时代的大数据架构.pdf04-29 后Hadoop时代的大数据架构.pdf04-29 后Hadoop时代的大数据架构.pdf04-29 后Hadoop时代的大数据架构.pdf04-29 后Hadoop时代的大数据架构.pdf04-29 后Hadoop时代的大数据架构...

    《Hadoop大数据开发实战》教学教案—01初识Hadoop.pdf

    《Hadoop大数据开发实战》教学教案—01初识Hadoop.pdf《Hadoop大数据开发实战》教学教案—01初识Hadoop.pdf《Hadoop大数据开发实战》教学教案—01初识Hadoop.pdf《Hadoop大数据开发实战》教学教案—01初识Hadoop.pdf...

    Hadoop下载 hadoop-2.9.2.tar.gz

    Hadoop 是一个处理、存储和分析海量的分布式、非结构化数据的开源框架。最初由 Yahoo 的工程师 Doug Cutting 和 Mike Cafarella Hadoop 是一个处理、存储和分析海量的分布式、非结构化数据的开源框架。最初由 Yahoo...

    Hadoop下载 hadoop-3.3.3.tar.gz

    Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不...

    04-29 后Hadoop时代的大数据架构.docx

    04-29 后Hadoop时代的大数据架构.docx04-29 后Hadoop时代的大数据架构.docx04-29 后Hadoop时代的大数据架构.docx04-29 后Hadoop时代的大数据架构.docx04-29 后Hadoop时代的大数据架构.docx04-29 后Hadoop时代的...

    hadoop_tutorial hadoop入门经典

    hadoop_tutorial hadoop入门经典 Hadoop 是一个能够对大量数据进行分布式处理的软件框架。Hadoop 是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对失败的节点重新分布处理。...

    Hadoop权威指南 中文版

    本书从hadoop的缘起开始,由浅入深,结合理论和实践,全方位地介绍hado叩这一高性能处理海量数据集的理想工具。全书共14章,3个附录,涉及的主题包括:haddoop简介:mapreduce简介:hadoop分布式文件系统;hadoop的i...

    hadoop的dll文件 hadoop.zip

    hadoop的dll文件 hadoop.zip

Global site tag (gtag.js) - Google Analytics