- 博客(11)
- 收藏
- 关注
RSS订阅原创 Hadoop环境配置（11）--flume搭建配置
1.将下载的flume安装包拖至software文件夹下 2.将flume安装包解压到/opt/module/文件夹下 cd /opt/software/ tar -zxvf 安装包名 -C /opt/module/ 3.修改系统环境变量 vi /etc/profile 在编辑面板中添加如下代码： export FLUME_HOME=/opt/module/apache-flume-1.9.0-bin export PATH=$PATH:$FLUME_HOME/bin 4.重启环..
2021-12-19 16:43:06
1306
原创 Hadoop环境配置（10）--Hbase配置
1.将Hbase安装包拖至/opt/software/文件夹下 2.将Hbase安装包解压到cd /opt/module/文件夹中 cd /opt/software/ tar -zxvf 安装包名 -C /opt/module/ 3.修改系统环境变量 vi /etc/profile 在编辑面板中添加如下代码： export HBASE_HOME=/opt/module/hbase-2.2.0 export PATH=$PATH:$HBASE_HOME/bin 重启环境配置 so.
2021-12-19 15:58:41
633
原创 Hadoop环境配置（9）-zookeeper搭建
zookeeper搭建前提关闭防火墙 1.将zookeeper安装包拖至cd /opt/software文件夹下 2.解压zookeeper到cd /opt/module/文件夹下 cd /opt/software/ tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz -C /opt/module/ 3.在解压后的zookeeper文件夹下，创建log文件夹和data文件夹 cd /opt/module/apache-zookeeper-3.5.7.
2021-12-18 22:25:17
151
原创 Hadoop环境配置（8）-hive
1.将下载的hive安装包拖至/opt/softwore/中 将hive解压到cd /opt/module文件夹下 cd /opt/software/ tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/ 2.修改系统环境变量 vi /etc/profile 在编辑面板下添加下面代码 export HIVE_HOME=/opt/module/apache-hive-3.1.2-bin export PATH=$PATH:$HA.
2021-12-18 21:56:51
660
原创 Hadoop环境配置（7）-MySQL安装
1.将MySQL安装包拉至/opt/software/文件夹中 2.检查系统中是否安装过MySQL rpm -qa|grep mariadb mariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载 3.rpm -e --nodeps mariadb-libs 用此命令卸载mariadb 4.将MySQL解压到/opt/module/文件夹下 cd /opt/software/ tar -zxvf 压缩包名 -C /opt/module/ 5...
2021-12-18 21:39:04
736
原创 Hadoop环境配置（6）-群起
一、用脚本启动集群 1.修改Hadoop文件 在Hadoop100上的start-dfs.sh和stop-dfs.sh上最上边添加如下代码： 先切换到sbin目录下 cd /opt/module/hadoop-3.1.3/sbin 进入编辑模式 vi start-dfs.sh #进入编辑模式后在顶部添加： HDFS_DATANODE_USER=root HADOOP_SECURE_DN_USER=hdfs HDFS_NAMENODE_USER=root HDFS_SECONDARY.
2021-12-18 17:31:42
179
原创 Hadoop环境配置（5）-完全分布式
一、配置核心文件 1配置：hadoop-env.sh（在/opt/module/hadoop-3.1.3/etc/hadoop目录下） 从Linux系统中获取jdk的安装路径 echo $JAVA_HOME #获得jdk的安装路径 切换到cd /opt/module/hadoop-3.1.3/etc/hadoop/路径下 cd /opt/module/hadoop-3.1.3/etc/hadoop/ vi hadoop-env.sh 在hadoop-env.sh中修改JAVA_HOME的路径
2021-12-18 17:15:39
664
原创 Hadoop环境配置（4）-伪分布式搭建
HDFS是进行存储的，YARN是进行调度的 1.切换到hadoop目录下 设置hadoop -env.sh文件 cd /opt/module/hadoop-3.1.3/etc/hadoop vi hadoop-env.sh 在命令模式下输入/JAVA_HOME后回车，进行查找位置 将JAVA_HOME后的路径修改 export JAVA_HOME=/opt/module/jdk1.8.0_212 #注意将export 前的#删除掉，不然在后面运行时报错 2.设置core-site.xm
2021-12-17 16:52:11
432
原创 Hadoop环境配置（3）-虚拟机连接Moba
一、虚拟机连接MobaXterm 下载安装MobaXterm 1.打开虚拟机Hadoop100 2.打开MobaXterm 第一格填入虚拟机的IP地址 第二格填入虚拟机的用户名 此时连接成功 若连接超时则证明无法ping通虚拟机的IP地址，要去查看下虚拟机的IP和防火墙与电脑的防火墙 二、本地部署 1、在/opt 下创建两个文件夹：software、module 2、software：放软件的压缩包 module：放软件解压后的文件夹 3、切换到software文件夹下...
2021-12-17 16:29:13
1320
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人