我才不困呢Zzz-CSDN博客

原创 Hadoop中的Flume1.9.0配置

一、解压 cd /opt/software tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /opt/module/ 二、添加系统环境变量(需配置Java JDK系统参数) vi /etc/profile export FLUME_HOME=/opt/moudle/apache-flume-1.9.0-bin export PATH=$PATH:$FLUME_HOME/bin 保存系统变量 source /etc/profile 三、修改Fl

2021-12-19 14:29:22 178

原创 Hadoop中的hbase搭建

一、文件解压 cd /opt/softare/ tar -zxvf hbase-2.2.0-bin.tar.gz -C /opt/module/ 二、修改启动变量系统环境变量增加 vi /etc/profile export HBASE_HOME=/opt/module/hbase-2.2.0 export PATH=$PATH:$HBASE_HOME/bin 保存系统环境变量：source /etc/profile 修改hbase变量 cd /opt/module/hba

2021-12-19 14:21:38 101

原创 zookeeper故障解决

如果Zookeeper因Linux系统关闭，造成无法再次启动，可以尝试将zookeeper_server.pid里面的内容清空，https://blog.csdn.net/weixin_33758863/article/details/93292090 未找到 zkServer命令：1.先看配置文件错没有./etc/profile2.重启一下配置，多次启动source /etc/profile zkCli连接验证zkCli.sh -server hadoop100:2181报错，需要注意自己验证的是.

2021-12-19 14:12:55 1311

原创 Hadoop中的zookeeper集群部署

前提：关闭防火墙 1、把apache-zookeeper-3.5.7-bin.tar.gz上传到 /opt/software/下 2、解压 cd /opt/software/ tar -zxvfapache-zookeeper-3.5.5-bin.tar.gz -C /opt/module/ 3、创建数据文件和目录文件在zookeeper的跟目录下创建两个文件夹data和log cd /opt/module/apache-zookeeper-3.5.7-bin/ mkdir dat.

2021-12-19 14:11:40 142

原创 Hadoop的hive搭建

1，将apache-hive-3.1.2-bin.tar.gz压缩包放在/opt/software路径下 2，解压切路径 cd /opt/software 解压apache-hive-3.1.2-bin.tar.gz到/opt/module/路径下 tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/ 3,修改系统环境变量 vi /etc/profil 添加内容 export HIVE_HOME=/usr/loc.

2021-12-19 14:01:28 225

原创 Hadoop的mysql安装

一，下载mysql MySQL :: Download MySQL Community Server 二，将其上传到linux下/opt/software中检查当前系统是否安装过Mysql: rpm -qa|grep mariadb rpm -qa|grep mariadb mariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载三，将其解压到/opt/module下命令为： tar -xf 要解压的文件 -C 要解压的位置例子： ...

2021-12-13 16:36:41 277

原创 Hadoop的完全分布式部署

一，配置集群 100 101 102 HDFS namenode、datanode datanode Secondary namenode(2nn)、datanode YARN nodemanager resourcemanager、nodemanager

2021-12-13 13:51:33 1436

原创 Hadoop的伪分布式部署

1.配置集群环境（1）修改第一个配置在/opt/module/hadoop-3.1.3/etc/hadoop目录下设置hadoop-env.sh文件vihadoop-env.sh 命令：cd /opt/module/hadoop-3.1.3/etc/hadoop vi hadoop-env.sh 命令模式下输入/搜索JAVA_HOME exportJAVA_HOME=/opt/module/jdk1.8.0_212 （2）修改第二个配置在/opt/module/hadoop-3..

2021-12-09 15:02:24 398

原创 Hadoop的本地部署使用

1.首先要有包含内容的文件 (1)在/opt下面创建一个目录（文件夹）test 命令：cd /opt mkdir test (2)在/opt/test目录下面创建input目录（文件夹）和output目录（文件夹）命令：mkdir input mkdir output (3)在/opt/test/input目录下创建包含内容的文件。（其实就是在文件中编辑文字）命令:cd /opt/test/input/ touch color....

2021-12-08 14:56:21 1265 2

原创 Hadoop环境搭建（2）

一.之前问题解决之前有同学的ping192.168.1.100没有ping通 1.配完静态ip后需要重启一下网络命令：service network restart 2.windows电脑上--网络适配器没有vmwark net8的同学二． Vm虚拟机--虚拟的模拟电脑 Centos--电脑要安装的操作系统（linux系统） Moba--windows软件，windows和linux传输文件要用moba软件。 Jdk--linux下面的jdk Hadoop--hadoop软件，

2021-12-07 16:56:36 220 2

原创 hadoop环境搭建（1）

一，安装虚拟机（CentOS） 1.安装vm15蓝屏（版本和电脑不兼容）下载vm16 2.Centos放在一个文件夹中二，修改主机名（当前虚拟机的主机名） 1.查看当前的主机名命令：hostname 2.修改主机名（两种方法）命令：1.hostname set-hostname 主机名（自己编写的主机名）回车然后 bash （不用重启） 2.vi /etc/hostname...

2021-12-07 15:09:06 2228 2

qq_57410699的博客