ITPub博客

首页 > 大数据 > Hadoop > Hadoop SRC重新编译

Hadoop SRC重新编译

原创 Hadoop 作者:yezhibin 时间:2014-02-01 21:52:42 0 删除 编辑

下载hadoop 2.2 SRC包到Linux平台,安装其BUILDING.TXT文档说明要求进行编译,具体步骤如下:

1、JDK 1.6 +
   export JAVA_HOME=/usr/java/jdk1.6.0_31

2、Maven 3.0 or later
  下载mvn包,解压到$HOME/mvn目录下
   $ mvn -version
      Apache Maven 3.1.1
   export M2_HOME=/home/storm/maven

3、Findbugs 1.3.9 (if running findbugs)

4、ProtocolBuffer 2.4.1+ (for MapReduce and HDFS)
 参考http://www.ibm.com/developerworks/cn/linux/l-cn-gpb/介绍
下载地址:http://code.google.com/p/protobuf/downloads/list
安装:cd /home/storm/protobuf-2.5.0
          ./configure
          ./make
          ./make check
          ./make install

5、CMake 2.6 or newer (if compiling native code)
   下载http://www.cmake.org/cmake/resources/software.html
    cd /home/storm/cmake-2.8.12.1
    ./bootstrap
    make
    make install

HADOOP MVN的主要模块:
  hadoop (主要hadoop项目
     - hadoop-project  :  所有mvn模块的父POM,所有plugins和依赖都定义在这里
     - hadoop-project-dist (parent POM生成的distributions)
     - hadoop-annotations (生成hadoop doclet用于生成javadoc)
     - hadoop-assemblies (被不同的模块使用的MAVEN assenblies)
     - hadoop-common-project (Hadoop Common)
     - hadoop-hdfs-project (Hadoop HDFS)
     - hadoop-mapreduce-project (Hadoop Mapreduce)
     - hadoop-tools (Hadoop tools 如streaming Discp等)
     - hadoop-dist (Hadoop distribution assembler)

编译:
  MAVEN_OPTS="-Xms256m -Xmx512m"
  mvn package

   

         
   

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/354732/viewspace-1076764/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2008-12-18

  • 博文量
    159
  • 访问量
    515023