linux之伪分布环境搭配

最新推荐文章于 2023-05-10 22:58:33 发布

醉游江湖

最新推荐文章于 2023-05-10 22:58:33 发布

阅读量226

点赞数

文章标签： linux

本文链接：https://blog.csdn.net/weixin_40645193/article/details/108894907

版权

这篇博客详细介绍了在Linux系统中搭建伪分布环境的步骤，包括关闭防火墙、SSH无密码登录、软件安装与解压、环境变量配置、默认配置文件的整理以及HDFS的格式化和启动。此外，还提到了使用`jps`命令检查Hadoop进程以及通过Web界面监控HDFS文件系统。

摘要由CSDN通过智能技术生成

伪分布环境搭建_

提前准备 1. ip 主机名
2. 关闭防火墙

	【Linux_ssh_scp.txt】
     3. SSH无密码登录  
     4. scp远程复制

1）参照官网ssh无密码登录
$ ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
$ chmod 0600 ~/.ssh/authorized_keys

独立模式相同配置 begin________
1.通过挂在上传软件至/home/crx/soft
$>cp jdk1.8.XXX.tar.gz ~/soft
$>cp hadoop.2.7.3.tar.gz ~/soft
2.解压相关软件
$>tar -zxvf jdk1.8.XXX.tar.gz
$>tar -zxvf hadoop.2.7.3.tar.gz
3.创建软连接
$>ln -s jdk1.8.0_121/ jdk
$>ln -s hadoop-2.7.3/ hadoop
4.修改环境变量
$>cd ~
$>gedit ~/.bash_profile

   在文件最后追加以下指令：
     #jdk install
	 export JAVA_HOME=/home/crx/soft/jdk
	 export PATH=$JAVA_HOME/bin:$PATH

	 #hadoop install
	 export HADOOP_HOME=/home/crx/soft/hadoop
	 export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
	 
   $>source ~/.bash_profile
   注意：刷新完之后，当前会话可用；建议reboot（重启）

独立模式相同配置 end

一.整理default.xml配置文件

1.core-default.xml （common）
在hadoop-2.7.3 ->share->hadoop->common->hadoop-common-2.7.3.jar(右键解压打开,将core-default.xml拷贝出来)

2.hdfs-defalut.xml: