如何配置hadoop基础编译环境

如何配置hadoop基础编译环境

这篇文章主要介绍如何配置hadoop基础编译环境,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

Part1 JDK:
1.下载软件包

2.在CRT(或虚拟机里的操作)
命令:cd /opt 移动到opt
mkdir sourcecode/ 创建文件夹sourcecode
mkdir sourceware 创建文件夹sourceware

3.命令rz上传下载的软件包
hadoop-2.8.1.tar

4.解压hadoop-2.8.1.tar
命令tar -xzvfhadoop-2.8.1.tar

5.移动到software文件夹上传其余软件包
命令:cd /opt/software
rz(上传除了步骤3的软件包以外的软件包Tip:全选后按ctrl鼠标左键单击要取消选择的软件包)


6.解压jdk
命令:tar -xzvf jdk-8u45-linux-x64.gz -C /usr/java
如果没有文件夹 /usr/java 则创建文件夹/usr/java

7.改变jdk1.8.0_45权限
命令:chown -R root:root jdk1.8.0_45


8.定义自己的JDK给Linux
命令:vi 进全局环境变量文件 /etc/profile : vi/etc/profile


9.打印&PATH路径,查看是否已经配置好路径,实现一下source环境变量文件 /etc/profile


Part2 Maven:
1.解压unzip apache-maven-3.3.9-bin.zip



2.解压.m2文件
进入software cd /opt/software/
ll -a查看隐藏文件
tar -xzvf.m2.tar.gz -C /root 解压到root目录下

3.编辑/etc/profile
在最后把路径文件编辑:


4.source /etc/profile执行环境变量文件
mvn --version查看是否已经执行OK


Part3Findbugs部署:
1.解压unzip findbugs-1.3.9.zip

2.再次进入环境变量文件 /etc/profile

3.编辑:创建变量FINDBUGS_HOME=路径


4.source /etc/profile生效

5.查看版本是否OK findbugs -version



Part4ProtocolBuffer:
按如上相同操作进行ProtocolBuffer的安装:
额外操作(在进入变量文件之前的):
[root@ruozehadoop001 protobuf-2.5.0]# yum install -y gcc gcc-c++ make cmake
[root@ruozehadoop001 protobuf-2.5.0]# ./configure --prefix=/usr/local/protobuf
[root@ruozehadoop001 protobuf-2.5.0]# make && make install

结束后在环境变量文件/etc/profile中的编辑为:
export PROTOC_HOME=/usr/local/protobuf
export PATH=$PROTOC_HOME/bin:$FINDBUGS_HOME/bin:$MAVEN_HOME/bin:$JAVA_HOME/bin:$PATH
[root@ruozehadoop001 protobuf-2.5.0]# source /etc/profile

source 生效后 查看是否OK:protoc --version

Part5其他组件:
yum install -y openssl openssl-devel svn ncurses-devel zlib-devel libtool
yum install -y snappy snappy-devel bzip2 bzip2-devel lzo lzo-devel lzop autoconf automake

以上是“如何配置hadoop基础编译环境”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注恰卡编程网行业资讯频道!

发布于 2022-01-14 22:31:52
收藏
分享
海报
0 条评论
41
上一篇:怎么在Kubernetes部署期间正确处理DB模式 下一篇:linux操作系统的常用命令有哪些
目录

    0 条评论

    本站已关闭游客评论,请登录或者注册后再评论吧~

    忘记密码?

    图形验证码