xpk210411-CSDN博客

原创 Hadoop环境配置（9）--flume搭建配置

1.将下载的flume安装包拖至software文件夹下2.将flume安装包解压到/opt/module/文件夹下 cd /opt/software/ tar -zxvf 安装包名 -C /opt/module/ 3.修改系统环境变量vi /etc/profile在编辑面板中添加如下代码： export FLUME_HOME=/opt/module/apache-flume-1.9.0-bin export PATH=$PATH:$FLUME_HOM.

2021-12-20 19:56:18 155

原创 Hadoop学习笔记（8）--hbase搭建

一、文件解压cd /opt/module/tar -zxvf hbase-2.2.0-bin.tar.gz二、修改启动变量系统环境变量增加vi /etc/profileexport HBASE_HOME=/opt/module/hbase-2.2.0export PATH=$PATH:$HBASE_HOME/bin保存系统环境变量：source /etc/profile修改hbase变量cd /opt/module/hbase-2.2.0/conf/vi hbas

2021-12-20 19:47:37 75

原创 Hadoop环境配置（7）-zookeeper搭建

zookeeper搭建前提关闭防火墙1.将zookeeper安装包拖至cd /opt/software文件夹下2.解压zookeeper到cd /opt/module/文件夹下 cd /opt/software/ tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz -C /opt/module/ 3.在解压后的zookeeper文件夹下，创建log文件夹和data文件夹 cd /opt/module/apache-zookeeper-

2021-12-20 19:44:11 107

原创 Hive安装

1、下载安装包：apache-hive-3.1.2-bin.tar.gz上传至linux系统/opt/software/路径2、解压软件cd /opt/software/tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/3、修改系统环境变量vim /etc/profile添加内容：export HIVE_HOME=/opt/module/apache-hive-3.1.2-binexport PATH=

2021-12-20 19:37:55 73

原创 Hadoop环境配置（6）-MySQL安装

1.将MySQL安装包拉至/opt/software/文件夹中2.检查系统中是否安装过MySQL rpm -qa|grep mariadb mariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载 3.rpm -e --nodeps mariadb-libs 用此命令卸载mariadb4.将MySQL解压到/opt/module/文件夹下 cd /opt/software/ tar -zxvf 压缩包名 -C /o..

2021-12-20 19:33:06 95

原创 Hadoop学习笔记（5）–完全分布式Hadoop 完全分布式

1、Namenode：储存文件的元数据。2、Datanode：在本地文件系统储存文件快数据，以及块数据的效验和。3、Secondary Namenode ：每个隔一段时间对Namenode元数据备份 hadoop100 hadoop101 hadoop102 HDFS Namenode Datanode Datanode Secondary Namenode YARN nodemanager ResourceManger no...

2021-12-20 19:26:11 123

原创 Hadoop环境配置（4）-伪分布式搭建

HDFS是进行存储的，YARN是进行调度的1.切换到hadoop目录下设置hadoop -env.sh文件 cd /opt/module/hadoop-3.1.3/etc/hadoop vi hadoop-env.sh在命令模式下输入/JAVA_HOME后回车，进行查找位置将JAVA_HOME后的路径修改 export JAVA_HOME=/opt/module/jdk1.8.0_212 #注意将export 前的#删除掉，不然在后面运行时报错 2...

2021-12-20 19:08:15 89

原创 Hadoop环境配置 -虚拟机连接Moba

一、虚拟机连接MobaXterm下载安装MobaXterm1.打开虚拟机Hadoop1002.打开MobaXterm第一格填入虚拟机的IP地址第二格填入虚拟机的用户名此时连接成功若连接超时则证明无法ping通虚拟机的IP地址，要去查看下虚拟机的IP和防火墙与电脑的防火墙二、本地部署1、在/opt 下创建两个文件夹：software、module2、software：放软件的压缩包module：放软件解压后的文件夹3、切换到software...

2021-12-19 17:24:12 215

原创 Hadoop学习笔记（3）

一、Moba–Windows软件Moba–windows软件，windows和linux传输文件要用的软件1、打开moba创建新的连接服务二、本地部署1、在/opt 下创建两个文件夹：software、module2、software：放软件的压缩包module：放软件解压后的文件夹3、切换到software文件夹下 cd /opt/software4、解压jdk、Hadoop到module文件夹中 tar -zxvf jdk-8u212-...

2021-12-19 17:04:10 45

原创 Hadoop环境搭建（2）

一、修改虚拟机的网络配置配置好如图所示后，进入NAT设置二、修改Windows的网络配置选择更改适配器选项选择第三个VM8选择协议版本4后如图配置三、关闭防火墙1.进入虚拟机关闭防火墙防火墙状态查看 systemctl status firewalld 关闭防火墙 systemctl stop firewalld 防火墙开机不启动 systemctl dis...

2021-12-19 16:53:57 1773

原创一、安装虚拟机（CentOS）

二、修改主机名（当前虚拟机的主机名)1、查看当前的主机名1 ： hostname# 第一种方法：vi /etc/hostname # 编辑完需要重启重启：reboot -h now# 第二种方法： hostnamectl set -hostname <自己编写的主机名># 编辑完需要生效一下： bash三、修改ip地址（当前虚拟机的IP地址）...

2021-12-19 16:38:00 947

xpk210411的博客