`
clearity
  • 浏览: 35630 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

Hadoop源码结构

 
阅读更多

    Hadoop项目已经得到社区以及行业内很多大牛的贡献,现在版本已经推进到了1.0.0版本,本人以后将就当前1.0.0版本进行源码分析,如有重大特性更新的版本发布,会有相关的源码增补分析,多谢!

    首先我们需要对hadoop解压包的目录结构有个大概了解,解压下载的hadoop1.0.0版本压缩包到文件系统,目录如下:

bin: 此目录下为进行hadoop配置、运行以及管理的shell命令集合

c++:此目录下为linux下amd64-64位系统以及i386-32位系统提供的库文件集合

conf:此目录下为运行与配置hadoop环境需要的配置文件以及示例文件集合,实际运行时可以对照此目录下的文件结构进行           相应的配置

contrib:此目录下针对hadoop运行过程中需要特殊强化的模块进行了模块化封装,此为其发布包以及相应的配置文件

docs:此目录下包含对于hadoop运行配置的基本文档,包括html和pdf两种格式

ivy:此目录下包含编译hadoop的ivy编译工具的脚本和配置文件

lib:此目录下包含编译以及运行hadoop环境必须的其他模块jar包集合

libexec:检查配置所有运行hadoop所需的脚本文件

sbin:此目录下包含创建hadoop运行环境中所需系统级功能的脚本文件

share:此目录下包括整个项目各个模块共有的配置文件

src:hadoop源码

webapps:发布包中的示例程序

build.xml:编译工程所需的ant配置文件

CHANGES.txt:新版本针对上一版本的更新点

hadoop-ant-1.0.0.jar

hadoop-core-1.0.0.jar

hadoop-examples-1.0.0.jar

hadoop-test-1.0.0.jar

hadoop-tools-1.0.0.jar

以上几个文件根据文件名,大家也能猜到是做什么的,就不多说了

其他还有ivy.xml还有几个readme说明文件就一下带过,有兴趣自己可以去看了解一下

以上就是整个hadoop发布文件的目录结构,项目的分析会随后跟上!

分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics