自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(13)
  • 收藏
  • 关注

原创 Hadoop环境搭建(flume环境配置)

1、将下载的flume压缩包拉到/opt/software/文件夹下安装包版本:apache-flume-1.9.0-bin.tar.gz2、将安装包解压到/opt/module/文件夹中命令:cd /opt/software/tar -zxvf 安装包名 -C /opt/module/3、修改系统环境变量命令:vi /etc/profile在页面中添加如下内容export FLUME_HOME=/opt/module/apache-flume-1.9.0-bine.

2021-12-19 22:39:16 217

原创 Hadoop环境搭建(hbase环境配置)

1、将Hbase安装包拉到/opt/software/文件夹中安装包版本:hbase-2.2.0-bin.tar.gz2、解压Hbase安装包到/opt/module/文件夹下命令:cd /opt/software/tar -zxvf 安装包名 -C /opt/module/3、修改系统环境变量命令:vi /etc/profile在页面中添加如下内容export HBASE_HOME=/opt/module/hbase-2.2.0export PATH=$PATH:$

2021-12-19 22:05:19 205

原创 Hadoop环境配置(zookeeper环境搭建)

注:安装之前关闭防火墙1、关闭防火墙(1)、防火墙状态的查看命令:systemctl status firewalld(2)、关闭防火墙命令:systemctl stop firewalld(3)、设置开机防火墙不启动命令:systemctl disable firewalld2、将zookeeper安装包拉到/opt/software/文件夹中安装包版本:apache-zookeeper-3.5.7-bin.tar.gz3、解压zookeeper安装包到/opt

2021-12-19 21:42:07 523

原创 Hadoop环境搭建(hive环境配置)

1、将hive安装包放到software里安装包版本:apache-hive-3.1.2-bin.tar.gz2、将安装包解压在moudule文件夹里命令:cd /opt/software/tar -zxvf 压缩包名 -C /opt/module/3、修改环境变量命令:vi /etc/profile在打开的页面中添加如下内容4、重启环境配置命令:source /etc/profile5、修改你hive环境变量命令:cd /opt/module/apa.

2021-12-19 21:06:39 1687

原创 Hadoop环境搭建(MySQL配置)

1、将MySQL安装中包拉到/opt/software/文件夹2、检查系统是否安装过MySQLrpm -qa|grep mariadb如果出现mariadb-libs-5.5.56-2.el7.x86_64文件,则将其卸载掉rpm -e --nodeps mariadb-libs-5.5.56-2.el7.x86_64如果不卸载上述文件,在第6步中将找不到MySQL文件夹3、将MySQL安装包解压到/opt/module/文件夹中命令:cd /opt/software/...

2021-12-19 20:38:00 392

原创 Hadoop环境搭建(ssh免密)

1、在每个节点生成公钥和私钥,并将公钥拷贝到其他两个目标机器上hadoop100生成公钥私命令:ssh-keygen -t rsa 按三次回车键(2)、将Hadoop100的公钥拷贝到其他两个目标机器上命令:ssh-copy-id hadoop100 输入密码,回车ssh-copy-id hadoop101 输入密码,回车ssh-copy-id hadoop102 输入密码,回车(3)、Hadoop101生成公钥和私钥命令:ssh-keygen ...

2021-12-19 15:38:07 1542

原创 Hadoop环境搭建(克隆)

克隆前要关闭虚拟机将虚拟机按照此方法克隆两次注:IP地址要改成不同的例如:主机名1——Hadoop100 IP地址——192.168.1.100 主机名2——Hadoop101 IP地址——192.168.1.101 主机名3——Hadoop102 IP地址——192.168.1.102...

2021-12-19 15:08:14 1567

原创 Hadoop环境搭建(完全分布式搭建)

1、核心文件配置(1)、①从Linux中获取JDK的安装路径命令:echo $JAVA_HOME(2)、配置hadoop-env.sh命令:cd /opt/module/hadoop-3.1.3/etc/hadoop/vi hadoop-env.sh(3)、配置core-site.xml命令:vi core-site.xml在面板中添加如下内容:<?xml version="1.0" encoding="UTF-8"?><?xml-..

2021-12-18 22:22:20 198

原创 Hadoop(伪分布搭建)

步骤1、切换到Hadoop下面的etc切换命令:cd /opt/module/hadoop-3.1.3/etc/hadoop/用 ll查看,下图标注的是需要配置的文件2、下面将对这四个文件进行配置(1)core-site.xml命令:vi core-site.xml进入后 将<configuration>中的文件删掉替换成如下内容后退出<property><name>fs.defaultFS&lt...

2021-12-17 21:44:33 218

原创 Hadoop环境搭建(安装jdk与hadoop)

1、分别创建两个文件夹(saftware、module)注:在/opt文件下创建 ,saftware存放的是解压前的文件,module存放的是解压后的问件(1)、创建命令: mkdir /opt/saftware mkdir /opt/module2、在module文件夹中解压jdk和Hadoop注:需要先切换到software文件夹中解压先将压缩包拖入切换目录 cd /opt/softw...

2021-12-17 17:00:40 776

原创 Hadoop环境搭建(2)(虚拟机连接MobaXterm)

注:MobaXterm软件的作用是让Linux与Windows相连接步骤:1、打开虚拟机Hadoop1002、打开MobaXterm 点击下图按钮3、填入虚拟机IP地址 如下图所示连接成功页面如下

2021-12-16 21:57:17 657

原创 hadoop(修改虚拟机、Windows网络配置)

一、修改虚拟机网络配置打开VMware Workstation点击 “编辑”’点击“虚拟网络编辑器”后进入页面如下点击 更改设置(c)如上图所示 然后选中如下图所示,然后打开NAT设置数据如上图所示进行更改二、Windows网络配置Win+R打开运行面板,输入cmd进入终端面板在终端面板输入ping 192.168.1.100,出现(0%丢失)则配置成功若没有出现(0%丢失),而显示超时,可能有两种情况:1、虚拟机IP地址出错...

2021-12-16 15:13:03 1551

原创 Hadoop环境搭建(1)(Linux虚拟机IP地址、主机名、映射)

修改主机名1.查看修改主机名查看主机名:hostname修改主机名:vi /etc/hostname使用这个方法之后要重启虚拟机重启命令:标注:Vi 命令:esc 保存 :w 保存并退出 :wq 编辑:i当前光标位置进行输入 删除原来的主机名:输入自己的主机名点击 esc-----输入:wq修改虚拟机IP地址修改命令:回车进入进行修改查验命令:bash修改IP地址与主机名映射...

2021-12-12 16:04:32 2740

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除