|
|
1.2 获取Hadoop源代码
' p# I, f" b6 q! q5 q当前比较流行的Hadoop源代码版本有两个： Apache Hadoop和Cloudera Distributed Hadoop（ 简称CDH） 。 Apache Hadoop是由5 \- F8 {+ M: i- E1 Z- M
雅虎、 Cloudera、 Facebook等公司组成的Hadoop社区共同研发的， 它属于最原始的开源版本， 在该版本基础上， 很多公司进行了0 ]" v( F( `5 T. J
封装和优化， 推出了自己的开源版本， 其中， 最有名的一个是Cloudera公司发布的CDH版本。8 K/ S" n7 F0 y. P( f3 Q% |% a1 f
考虑到Apache Hadoop是最原始的版本， 且使用最为广泛， 因而本书选用了Apache Hadoop版本作为分析对象。 自从Apache- p# M3 W% ^8 h$ h$ K
Hadoop发布以来， 已经陆续推出很多版本（ 具体见2.2节） ， 读者可自行在Hadoop SVN 地址% ?8 I' ^% |, w) }6 F9 w
http://svn.apache.org/repos/asf/hadoop/common/branches/查看或者下载所有版本， 也可以从Apache官方主页4 f) w8 O% R6 q2 {
http://hadoop.apache.org/releases.html上下载最新版本。
8 G) c; m3 F5 q# j- _本书介绍的YARN属于Hadoop 2.0的一个分支（ 另外两个分支分别是HDFS和MapReduce） ， Hadoop 2.0的命名方式一般为2 d4 a* x; j9 x z
hadoop-2.x.x。 Apache官方主页提供了两个压缩包， 一个是Hadoop源代码（ hadoop-{VERSION}-src.tar.gz） ， 一个是可直接用于部
5 H$ m5 S. x$ \2 W+ W署的JAR包（ hadoop-{VERSION}.tar.gz） ， Cloudera发布的CDH版本则将源代码和JAR包存放在一起组成一个压缩包 （ hadoop-
. @) {2 v5 Z7 C9 x: j2.0.0-cdh4.x.x.tar.gz） [2] 。' N0 ]+ [( @* n6 ^# l5 Q: c
本书介绍的YARN设计思想适用于所有Apache Hadoop 2.x版本， 但涉及具体的实现（ 指源代码级别的实现） 时， 则以Apache
# S* k+ h) V i7 w- }Hadoop 2.2.0及更高稳定版本为主， 因此， 如果你想对比Hadoop源代码阅读本书， 推荐下载Apache 2.2.0或更高版本。
9 r. c2 r1 `0 n- {0 b$ ?[2] CDH4下载地址： http://archive.cloudera.com/cdh4/cdh/4/。 5 y3 [& }. t' N: r1 y) j+ l+ J# N
7 W- z* M3 V. N, ^
( |8 D8 N& ?; W6 w0 ?, ? |
|
发表于 2017-4-12 20:35:42
