Hadoop3.3.0–Linux编译安装

本文档详细介绍了在Centos 7.7环境下,如何手动编译安装Hadoop 3.3.0,包括依赖安装、JDK 1.8、Maven、ProtocolBuffer 3.7.1的配置,以及Hadoop的编译和集群分布式安装步骤,最后给出了启动Hadoop服务和解决常见问题的方法。

Hadoop3.3.0–Linux编译安装

基础环境:Centos 7.7

编译环境软件安装目录


mkdir -p /export/server


一、Hadoop编译安装(选做)

可以直接使用课程提供已经编译好的安装包

  • 安装编译相关的依赖

```shell

yum install gcc gcc-c++ make autoconf automake libtool curl lzo-devel zlib-devel openssl openssl-devel ncurses-devel snappy snappy-devel bzip2 bzip2-devel lzo lzo-devel lzop libXtst zlib -y

yum install -y doxygen cyrus-sasl* saslwrapper-devel*

```

  • 手动安装cmake

```shell

#yum卸载已安装cmake 版本低

yum erase cmake

#解压

tar zxvf CMake-3.19.4.tar.gz

#编译安装

cd /export/server/CMake-3.19.4

./configure

make && make install

#验证

[root@node4 ~]# cmake -version

cmake version 3.19.4

#如果没有正确显示版本 请断开SSH连接 重写登录

```

  • 手动安装snappy

```shell

#卸载已经安装的

rm -rf /usr/local/lib/libsnappy*

rm -rf /lib64/libsnappy*

#上传解压

tar zxvf snappy-1.1.3.tar.gz

#编译安装

cd /export/server/snappy-1.1.3

./configure

make && make install

#验证是否安装

[root@node4 snappy-1.1.3]# ls -lh /usr/local/lib |grep snappy

-rw-r–r-- 1 root root 511K Nov  4 17:13 libsnappy.a

-rwxr-xr-x 1 root root  955 Nov  4 17:13 libsnappy.la

lrwxrwxrwx 1 root root   18 Nov  4 17:13 libsnappy.so -> libsnappy.so.1.3.0

lrwxrwxrwx 1 root root   18 Nov  4 17:13 libsnappy.so.1 -> libsnappy.so.1.3.0

-rwxr-xr-x 1 root root 253K Nov  4 17:13 libsnappy.so.1.3.0

```

  • 安装配置JDK 1.8

```shell

#解压安装包

tar zxvf jdk-8u65-linux-x64.tar.gz

#配置环境变量

vim /etc/profile

export JAVA_HOME=/export/server/jdk1.8.0_241

export PATH=PATH:PATH:PATH:JAVA_HOME/bin

export CLASSPATH=.:JAVAHOME/lib/dt.jar:JAVA_HOME/lib/dt.jar:JAVAH

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值