如何配置hadoop基础编译环境

魁首哥

作者

如何配置hadoop基础编译环境

这篇文章主要介绍如何配置hadoop基础编译环境，文中介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们一定要看完！

Part1 JDK:
1.下载软件包

2.在CRT（或虚拟机里的操作）
命令：cd /opt 移动到opt
mkdir sourcecode/ 创建文件夹sourcecode
mkdir sourceware 创建文件夹sourceware

3.命令rz上传下载的软件包
hadoop-2.8.1.tar

4.解压hadoop-2.8.1.tar
命令tar -xzvfhadoop-2.8.1.tar

5.移动到software文件夹上传其余软件包
命令：cd /opt/software
rz（上传除了步骤3的软件包以外的软件包Tip:全选后按ctrl鼠标左键单击要取消选择的软件包）

6.解压jdk
命令：tar -xzvf jdk-8u45-linux-x64.gz -C /usr/java
如果没有文件夹 /usr/java 则创建文件夹/usr/java

7.改变jdk1.8.0_45权限
命令：chown -R root:root jdk1.8.0_45

8.定义自己的JDK给Linux
命令：vi 进全局环境变量文件 /etc/profile : vi/etc/profile

9.打印&PATH路径，查看是否已经配置好路径，实现一下source环境变量文件 /etc/profile

Part2 Maven:
1.解压unzip apache-maven-3.3.9-bin.zip

2.解压.m2文件
进入software cd /opt/software/
ll -a查看隐藏文件
tar -xzvf.m2.tar.gz -C /root 解压到root目录下

3.编辑/etc/profile
在最后把路径文件编辑：

4.source /etc/profile执行环境变量文件
mvn --version查看是否已经执行OK

Part3Findbugs部署:
1.解压unzip findbugs-1.3.9.zip

2.再次进入环境变量文件 /etc/profile

3.编辑：创建变量FINDBUGS_HOME=路径

4.source /etc/profile生效

5.查看版本是否OK findbugs -version

Part4ProtocolBuffer:
按如上相同操作进行ProtocolBuffer的安装：
额外操作（在进入变量文件之前的）：
[root@ruozehadoop001 protobuf-2.5.0]# yum install -y gcc gcc-c++ make cmake
[root@ruozehadoop001 protobuf-2.5.0]# ./configure --prefix=/usr/local/protobuf
[root@ruozehadoop001 protobuf-2.5.0]# make && make install

结束后在环境变量文件/etc/profile中的编辑为：
export PROTOC_HOME=/usr/local/protobuf
export PATH=$PROTOC_HOME/bin:$FINDBUGS_HOME/bin:$MAVEN_HOME/bin:$JAVA_HOME/bin:$PATH
[root@ruozehadoop001 protobuf-2.5.0]# source /etc/profile

source 生效后查看是否OK：protoc --version

Part5其他组件：
yum install -y openssl openssl-devel svn ncurses-devel zlib-devel libtool
yum install -y snappy snappy-devel bzip2 bzip2-devel lzo lzo-devel lzop autoconf automake