xcfku-CSDN博客

原创 Hadoop环境搭配（flume环境配置）

1、将下载的flume压缩包拉到/opt/software/文件夹下安装包版本：apache-flume-1.9.0-bin.tar.gz2、将安装包解压到/opt/module/文件夹中，命令：cd /opt/software/tar -zxvf 安装包名 -C /opt/module/3、修改系统环境变量，命令：vi /etc/profile在编辑面板中添加如下代码：export FLUME_HOME=/opt/module/apache-flume-1...

2021-12-18 15:57:36 220

原创 Hadoop环境搭配（Hbase环境搭配）

1、将Hbase安装包拉到/opt/software/文件夹中安装包版本：hbase-2.2.0-bin.tar.gz2、解压Hbase安装包到/opt/module/文件夹下，命令：cd /opt/software/tar -zxvf 安装包名 -C /opt/module/3、修改系统环境变量，命令：vi /etc/profile在编辑面板中添加如下内容：export HBASE_HOME=/opt/module/hbase-2.2.0export PATH=

2021-12-18 15:51:49 122

原创 Hadoop环境搭配（ZooKeeper环境搭配）

安装zookeeper的前提：关闭防火墙查看防火墙状态：systemctl statues firewalld启动防火墙：systemctl start firewalld关闭火墙：systemctl stop firewalld设置防火墙不启动：systemctl disable firewalld1、将apache-zookeeper-3.5.7-bin.tar.gz安装包拖入 /opt/software/ 中cd /opt/software/.

2021-12-18 15:43:23 189

原创 Hadoop环境搭配（hive环境配置）

1、下载安装包：apache-hive-3.1.2-bin.tar.gz上传至linux系统 /opt/software/ 路径2、解压软件cd /opt/software/tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/3、修改系统环境变量vi /etc/profile添加内容：export HIVE_HOME=/opt/module/apache-hive-3.1.2-binexport PATH=$PAT

2021-12-18 15:29:39 2161

原创 Hadoop环境搭配（MySQL）

1、将MySQL安装包拉到/opt/software/文件夹中2、检查系统是否安装过MySQLrpm -qa|grep mariadb如果出现mariadb-libs-5.5.56-2.el7.x86_64文件，则将其卸载掉rpm -e --nodeps mariadb-libs-5.5.56-2.el7.x86_64如果不卸载上述文件，在第6步中将找不到MySQL文件夹3、将MySQL安装包解压到/opt/module/文件夹中，命令：cd /opt/software/..

2021-12-18 15:19:44 249

原创 Hadoop环境搭配(完全分布)

一、ssh免密登录1、在每个节点生成公钥和私钥，并拷贝Hadoop100：生成公钥和私钥[root@hadoop100] ssh-keygen -t rsa然后敲（三个回车）出现如下图所示：2、将公钥拷贝到要免密登录的目标机器上[root@hadoop100] ssh-copy-id hadoop100[root@hadoop100] ssh-copy-id hadoop101[root@hadoop100] ssh-copy-id hadoop102三台虚拟机.

2021-12-18 15:01:47 1099

原创 Hadoop环境搭配（伪分布）

1.我们接下来在hadoop下面etc部署环境配置命令：cd /opt/module/hadoop-3.1.3/etc/hadoop/cd /opt/module/hadoop-3.1.3/etc/hadoop/可以用ll查看一下将要配置的文件2.开始配这四个文件①配置core-site.xml命令：vi core-site.xmlvi core-site.xml把configuration里的内容改正下面这样②配置hafs-site.xml命令：v...

2021-12-12 00:05:19 1121

原创 Hadoop环境搭配【MobaXterm中的（jdk、hodoop环境配置）】

①在opt文件下分别创建两个文件夹，命令：mkdir /opt/softwaremkdir /opt/module我的是之前创建过所以无法重复注：software里面存放的是我们解压前的文件 module里面存放的是问我们解压后的文件②解压jdk到module文件夹中（1）需要切换到software文件夹下命令：cd /opt/software（2）解压文件命令：tar -zxvf jdk-8u212-linux-x64.tar.gz -C /...

2021-12-11 16:37:39 1055

原创 Hadoop环境搭配（主机名、IP地址、映射）

一、修改主机名1.显示主机的名字，命令：hostname2.更改主机名，命令：vi /etc/hostname主机名自定义更改更改完主机名后点击：Ese输入保存命令：：w退出命令：：q强制退出：：q！保存并退出：：wq保存后，重启虚拟机，命令：reboot -h now二.修改虚拟机的ip地址，命令：vi /etc/sysconfig/network-scripts/ifcfg-ens33进入之后如图：1...

2021-12-09 22:11:46 5398 1

原创 Hadoop环境搭配（网络配置、连接MObaxterm）

一、修改虚拟机网络配置打开后点击更多设置先择NTA模式，如图操作点击上图的NAT设置二、修改Windows网络设置1.win+r打开运行面板，输入cmd进入终端在终端板输入：ping 192.168.1.100如果有丢失可能出现的情况有两种：1.虚拟机IP出现错误查看虚拟机当前命令：1.ifconfig -a2.ip addr如果IP错误，修改ip，命令：vi /etc/sysconfig/network-scripts...

2021-12-09 17:28:20 1359

xcfku的博客