Hadoop单机版详细安装
1.环境要求:
Jdk安装(如果运行出现权限问题,请自行加sudo,或更改文件权限chmod)
–解压
tar -zxvf jdk-8u201-linux-x64.tar.gz –C /usr/local
–重命名
mv /usr/local/jdk-8u201-linux-x64 /usr/local/jdk
–配置环境变量
vim /etc/profile
在最后一行添加
export JAVA_HOME=/usr/local/jdk
export JRE_HOME=/usr/local/jdk/jre
export CLASSPATH=.:$JAVA_HOME/jre:$JRE_HOME
export PATH=$PATH:$JAVA_HOME/bin
–更新文件
source /etc/profile
–验证安装
java –version
出现如下信息
java version “1.8.0_201”
Java™ SE Runtime Environment (build 1.8.0_201-b09)
Java HotSpot™ 64-Bit Server VM (build 25.201-b09, mixed mode)
安装成功
2.Hadoop 安装
--新增组hadoop
groupadd hadoop
--新增用户
useradd -g hadoop hadoo hadoop-3.1.2.tar.gz p
--更改用户密码
sudo passwd hadoop
--解压文件
tar –zxvf hadoop-3.1.2.tar.gz –C /usr/local
--重命名文件
mv /usr/local/ hadoop-3.1.2 /usr/local/hadoop
--更改所有者
chown –R hadoop:hadoop /usr/local/hadoop
--打开usr/local/hadoop/conf/hadoop-env.sh文件
su hadoop
vim usr/local/hadoop/conf/hadoop-env.sh
找到export JAVA_HOME=…,去掉注释#,然后加上本机jdk的路径
–打开conf/core-site.xml文件编辑如下:
vim usr/local/hadoop/conf/core-site.xml,
fs.default.name
hdfs://localhost:9000
–打开conf/mapred-site.xml文件,编辑如下:
vim usr/local/hadoop/conf/mapred-site.xml
mapred.job.tracker
localhost:9001
–打开conf/hdfs-site.xml文件,编辑如下:
vim usr/local/hadoop/conf/conf/hdfs-site.xml
dfs.name.dir
/usr/local/hadoop/datalog
dfs.data.dir
/usr/local/hadoop/data
dfs.replication
2
–创建文件
mkdir –p /usr/local/hadoop/datalog /usr/local/hadoop/data
–设置本机ssh免密登录
ssh-keygen –t rsa –P “”
回车(注:回车后会在~/.ssh/下生成两个文件:id_rsa和id_rsa.pub这两个文件是成对出现的)
进入~/.ssh/目录下,将id_rsa.pub追加到authorized_keys授权文件中,开始是没有authorized_keys文件的,
~/.ssh/ cat id_rsa.pub >> authorized_keys
– 运行hadoop
cd /usr/lcoal/hadoop/sbin
./start-all.sh
启动成功后运行jps命令
– 开放8088端口
firewall-cmd --zone=public --add-port=8088/tcp --permanent
firewall-cmd –reload
访问浏览器虚拟机ip:8088,会出现如下界面