我才不困呢Zzz-CSDN博客

原创 Hadoop中的Flume1.9.0配置

一、解压cd /opt/software tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /opt/module/二、添加系统环境变量(需配置Java JDK系统参数)vi /etc/profileexport FLUME_HOME=/opt/moudle/apache-flume-1.9.0-binexport PATH=$PATH:$FLUME_HOME/bin保存系统变量source /etc/profile三、修改Fl

2021-12-19 14:29:22 193

原创 Hadoop中的hbase搭建

一、文件解压cd /opt/softare/tar -zxvf hbase-2.2.0-bin.tar.gz -C /opt/module/二、修改启动变量系统环境变量增加vi /etc/profileexport HBASE_HOME=/opt/module/hbase-2.2.0export PATH=$PATH:$HBASE_HOME/bin保存系统环境变量：source /etc/profile修改hbase变量cd /opt/module/hba

2021-12-19 14:21:38 130

原创 zookeeper故障解决

如果Zookeeper因Linux系统关闭，造成无法再次启动，可以尝试将zookeeper_server.pid里面的内容清空，https://blog.csdn.net/weixin_33758863/article/details/93292090未找到 zkServer命令：1.先看配置文件错没有./etc/profile2.重启一下配置，多次启动source /etc/profilezkCli连接验证zkCli.sh -server hadoop100:2181报错，需要注意自己验证的是.

2021-12-19 14:12:55 1332

原创 Hadoop中的zookeeper集群部署

前提：关闭防火墙1、把apache-zookeeper-3.5.7-bin.tar.gz上传到 /opt/software/下2、解压cd /opt/software/tar -zxvfapache-zookeeper-3.5.5-bin.tar.gz -C /opt/module/3、创建数据文件和目录文件在zookeeper的跟目录下创建两个文件夹data和logcd /opt/module/apache-zookeeper-3.5.7-bin/mkdir dat.

2021-12-19 14:11:40 172

原创 Hadoop的hive搭建

1，将apache-hive-3.1.2-bin.tar.gz压缩包放在/opt/software路径下2，解压切路径cd /opt/software解压apache-hive-3.1.2-bin.tar.gz到/opt/module/路径下tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/3,修改系统环境变量vi /etc/profil添加内容export HIVE_HOME=/usr/loc.

2021-12-19 14:01:28 260

原创 Hadoop的mysql安装

一，下载mysqlMySQL :: Download MySQL Community Server二，将其上传到linux下/opt/software中检查当前系统是否安装过Mysql: rpm -qa|grep mariadbrpm -qa|grep mariadbmariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载三，将其解压到/opt/module下命令为： tar -xf 要解压的文件 -C 要解压的位置例子：...

2021-12-13 16:36:41 294

原创 Hadoop的完全分布式部署

一，配置集群 100 101 102 HDFS namenode、datanode datanode Secondary namenode(2nn)、datanode YARN nodemanager resourcemanager、nodemanager

2021-12-13 13:51:33 1455

原创 Hadoop的伪分布式部署

1.配置集群环境（1）修改第一个配置在/opt/module/hadoop-3.1.3/etc/hadoop目录下设置hadoop-env.sh文件vihadoop-env.sh命令：cd /opt/module/hadoop-3.1.3/etc/hadoopvi hadoop-env.sh命令模式下输入/搜索JAVA_HOMEexportJAVA_HOME=/opt/module/jdk1.8.0_212（2）修改第二个配置在/opt/module/hadoop-3..

2021-12-09 15:02:24 435

原创 Hadoop的本地部署使用

1.首先要有包含内容的文件(1)在/opt下面创建一个目录（文件夹）test命令：cd /opt mkdir test(2)在/opt/test目录下面创建input目录（文件夹）和output目录（文件夹）命令：mkdir input mkdir output(3)在/opt/test/input目录下创建包含内容的文件。（其实就是在文件中编辑文字）命令:cd /opt/test/input/ touch color....

2021-12-08 14:56:21 1321 2

原创 Hadoop环境搭建（2）

一.之前问题解决之前有同学的ping192.168.1.100没有ping通1.配完静态ip后需要重启一下网络命令：service network restart2.windows电脑上--网络适配器没有vmwark net8的同学二．Vm虚拟机--虚拟的模拟电脑Centos--电脑要安装的操作系统（linux系统）Moba--windows软件，windows和linux传输文件要用moba软件。Jdk--linux下面的jdkHadoop--hadoop软件，

2021-12-07 16:56:36 266 2

原创 hadoop环境搭建（1）

一，安装虚拟机（CentOS）1.安装vm15蓝屏（版本和电脑不兼容）下载vm162.Centos放在一个文件夹中二，修改主机名（当前虚拟机的主机名）1.查看当前的主机名命令：hostname2.修改主机名（两种方法）命令：1.hostname set-hostname 主机名（自己编写的主机名）回车然后 bash （不用重启） 2.vi /etc/hostname...

2021-12-07 15:09:06 2276 2

qq_57410699的博客