hadoop单机模式部署操作

最新推荐文章于 2023-05-30 14:13:15 发布

notorand3

最新推荐文章于 2023-05-30 14:13:15 发布

阅读量908

点赞数 1

文章标签： hadoop hdfs 大数据

本文链接：https://blog.csdn.net/xiaoleiy/article/details/130735734

版权

本文详细介绍了Hadoop单机模式的部署步骤，包括创建用户、安装必备软件、配置Java环境、安装Hadoop、修改配置文件以及启动Hadoop服务，并提供了简单的WORDCOUNT实例。

摘要由CSDN通过智能技术生成

Hadoop单机模式部署操作步骤
1、创建用户
sudo useradd -m hadoop -s /bin/bash
sudo passwd hadoop
sudo adduser hadoop sudo
2、注销当前用户并使用hadoop用户登陆
sudo su - hadoop
3、更新资源库
sudo apt-get update
4、安装vim
sudo apt-get install vim
5、安装ssh
sudo apt-get install openssh-server
cd ~
mkdir .ssh
cd ~/.ssh/
ssh-keygen -t rsa
cat id_rsa.pub>>authorized_keys
6、安装Java环境
sudo apt-get install openjdk-8-jre openjdk-8-jdk
cd
vim ~/.bashrc
7、在文件第一行添加
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
export HADOOP_OPTS=“-Djava.library.path=${HADOOP_HOME}/lib/native”
export JAVA_LIBRARY_PATH=/usr/local/hadoop/lib/native
8、使变量生效
source ~/.bashrc
9、安装hadoop 2
cd /usr/local
sudo tar -zxvf ./hadoop-2.10.1.tar.gz
sudo mv ./hadoop-2.10.1/ ./hadoop
sudo chown -R hadoop ./hadoop
10、修改配置文件
vim /