- 博客(12)
- 收藏
- 关注
RSS订阅
原创 Hadoop环境配置（10）--flume环境配置
一、解压cd /usr/local/softtar -zxvf apache-flume-1.9.0-bin.tar.gz二、添加系统环境变量(需配置Java JDK系统参数)vi /etc/profileexport FLUME_HOME=/opt/software/export PATH=$PATH:$FLUME_HOME/binsource /etc/profile重启三、修改Flume环境变量cd /usr/local/soft/apache-f
2021-12-14 11:45:05
206
原创 Hadoop环境搭建（9）--Hbase环境配置
配套安装：Hadoop 3.1.3Zookeeper3.5.7Hbase2.2.0一、文件解压cd /opt/module/tar -zxvf hbase-2.2.0-bin.tar.gz二、修改启动变量系统环境变量增加vi /etc/profileexport HBASE_HOME=/opt/module/hbase-2.2.0export PATH=$PATH:$HBASE_HOME/bin保存系统环境变量：source /etc/profile
2021-12-14 11:41:58
105
原创 Hadoop环境搭建(8)--Zookeeper环境搭建
前提：关闭防火墙1、解压cd /opt/module/tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz2、创建数据文件和目录文件在zookeeper的跟目录下创建两个文件夹data和logcd /opt/module/apache-zookeeper-3.5.5-bin/mkdir datamkdir log3、拷贝配置文件cd /opt/module/apache-zookeeper-3.5.5-bin/con
2021-12-14 11:35:22
79
原创 Hadoop环境大家(7)Hive搭建
Hive搭建方法一此方法需在windows安装Mysql数据库Hive搭建1）将apache-hive-3.1.2-bin.tar.gz压缩包放在/opt/software路径下2）、[root@hadoop100 ~]# cd /opt/software3）、解压apache-hive-3.1.2-bin.tar.gz到/opt/module/路径下[root@hadoop100 software]# tar -zxvf apache-hive-3.1.2-bin.tar.gz -
2021-12-14 11:29:19
457
原创 Hadoop环境配置（6）MySQL的环境配置
1、将MySQL安装包拉到/opt/software/文件夹中2、检查系统是否安装过MySQLrpm -qa|grep mariadb如果出现mariadb-libs-5.5.56-2.el7.x86_64文件，则将其卸载掉rpm -e --nodeps mariadb-libs-5.5.56-2.el7.x86_64如果不卸载上述文件，在第6步中将找不到MySQL文件夹3、将MySQL安装包解压到/opt/module/文件夹中，命令：cd /opt/software/...
2021-12-14 11:19:47
137
原创 Hadoop环境搭建(5)
ssh免密登录1、在每个节点生成公钥和私钥，并拷贝Hadoop100：生成公钥和私钥[root@hadoop100] ssh-keygen -t rsa然后敲（三个回车）将公钥拷贝到要免密登录的目标机器上[root@hadoop100] ssh-copy-id hadoop100[root@hadoop100] ssh-copy-id hadoop101[root@hadoop100] ssh-copy-id hadoop102Hadoop101：生成公钥和私钥[ro
2021-12-14 11:10:53
68
原创 Hadoop环境搭建（4）
1.解决vi丢失问题可以在moba里面找到/etc/下面的profile文件。下载到自己桌面上，并用记事本打开用记事本打开~~进行编辑~~~然后再将这个文件再次拖回到原来的文件位置。然后source /etc/profile如果source不能用，就重启一下服务就行~~~~~~2.完全分布我们启动了4个节点：namenode、datanode、resourcemanager、nodemanagerNamenode存储文件MapReduc
2021-12-12 15:15:00
162
原创 Hadoop环境搭建（3）
伪分布部署（1）部署环境1.hadoop目录下部署环境配置配置：hadoop-env.sh配置jdk环境变量JAVA_HOME1.配置core-site.xml文件Vi core-site.xml指定HDFS中namenode的地址。将命令放到configuration标签中<configuration><!-- 指定HDFS中NameNode的地址 --><property><name>fs.defaultFS&l
2021-12-12 15:05:22
65
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人