Hadoop伪分布式安装

本文档详细介绍了如何在本地进行Hadoop的伪分布式安装,包括创建hadoop用户、安装SSH并配置无密码登陆、安装hadoop软件、配置环境变量、设置伪分布式配置和YARN,以及启动服务和访问HDFS、YARN的Web界面。
摘要由CSDN通过智能技术生成

创建hadoop用户

sudo useradd -m hadoop -s /bin/bash
sudo passwd hadoop
# 为 hadoop 用户增加管理员权限,方便部署
visudo
## Allow root to run any commands anywhere
root    ALL=(ALL)       ALL
hadoop  ALL=(ALL)       ALL    # 90行左右,添加这行

安装SSH、配置SSH无密码登陆

# CentOS 默认已安装了 SSH client、SSH server,打开终端执行如下命令进行检验
rpm -qa | grep ssh
# 若果没有SH client、SSH server,执行以下命令进行安装
sudo yum install openssh-clients
sudo yum install openssh-server

ssh localhost  # 首次登陆输入yes

# 配置免密登录
exit            # 退出刚才的 ssh localhost
cd ~/.ssh/      # 若没有该目录,请先执行一次ssh localhost
ssh-keygen -t rsa    # 会有提示,都按回车就可以
cat id_rsa.pub >> authorized_keys  # 加入授权
sudo chmod 600 ./authorized_keys    # 修改文件权限

# 或者使用下面这条命令一键配置免密
ssh-copy-id localhost

# 此时输入ssh localhost就不要输入密码了

安装hadoop

# 拿到安装包,传到虚拟机,常规解压步骤 ===>  /usr/local/hadoop
cd /usr/local
sudo chown -R hadoop ./hadoop        # 修改文件权限
# 查看版本信息
cd /usr/local/hadoop
./bin/hadoop version

配置环境变量

# 先设置以下环境变量
vi ~/.bashrc

#
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值