Hive集群部署启动Zookeeper&Hadoop&MySQL&Hive操作详细步骤

最新推荐文章于 2024-04-07 17:52:57 发布
最新推荐文章于 2024-04-07 17:52:57 发布
阅读量3.7k 收藏 15
点赞数 1
分类专栏： 实时数据仓库 文章标签： hadoop hive zookeeper 数据仓库 big data
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lin434406218/article/details/125362381
版权

1、启动Zookeeper【Hadoop高可用集群依赖于Zookeeper集群，所以在启用Hadoop高可用集群前需确保启动Zookeeper集群】
分别在虚拟机node01、node02、node03中执行“zkServer.sh start”命令启动zookeeper服务。
在这里插入图片描述

2、查看Zookeeper服务状态
分别在虚拟机node01、node02、node03中执行“zkServer.sh status”命令查看Zookeeper服务状态及角色
在这里插入图片描述

3、启动JournalNode【负责hadoop两个Namenode通信，进行数据同步】****
分别在虚拟机node01、node02、node03中执行“hadoop-daemon.sh start journalnode”
在这里插入图片描述

4、执行"jps"命令查看Journalnode是否启动成功，若出现Journalnode进程则证明Journalnode启动成功。
注：jps(全称：Java Virtual Machine Pr

最低0.47元/天 解锁文章
使不得呀
关注
专栏目录
hive集群部署
gamespiay123的博客
08-08 1781
hive集群部署
hadoop集成hive的部署方式
最新发布
weixin_43322583的博客
08-14 479
在已经安装完hadoop，mysql的基础上可以进行hive的安装之前部署的hadoop版本为3.2.4，mysql版本为8.0.39，详细部署流程。
hive 集群部署
qq_34304427的博客
04-07 744
从中我们可以看出第二个异常是 google Guava 库中的一个类不存在导致，笔者这边看了 hive 依赖的是 guava-19.0.jar，而 guava-27.0-jre.jar，二者的版本差异很大，笔者这边选择 去掉 hive 的依赖，将 hadoop 的依赖拷贝的 hive 的 lib 目录。hadoop 依赖包的位置：/opt/module/hadoop/share/hadoop/common/lib。hive 依赖包的位置：/opt/module/hive/lib。
Hive集群部署
雪辉博客
07-26 4632
文章目录Hive集群部署一、部署规划1.1 版本说明1.2 服务器规划1.3 配置目录规划二、部署MySQL3.1 创建MySQL用户组和用户3.2 配置目录2.3 解压安装包2.4 软链接程序目录并配置环境变量2.5 修改配置文件2.6 初始化2.7 启动数据库2.8 创建hive用户三、Hive部署3.1 解压安装包并配置环境变量3.2 修改核心配置文件3.2.1 配置 hive-site.xml3.2.2 添加MySQL连接驱动3.2.3 初始化数据库3.2.3.1 报错处理3.2.4 启动 Hive
zookeeper+hadoop+hbase+hive(集成hbase)安装部署教程（超详细）.docx
06-01
3.集群能正常运行的条件是集群可节点宕机数应保证有超过集群机器总数一半的机器在运行，因此从经济和实用性来说，集群的节点一般是奇数个，本文部署4台机器，其容灾能力与部署3台机器一致，即只能宕机1台
大数据hadoop分布式集群搭建（Hadoop、hbase、hive、mysql、zookeeper、Kafka、flume）
08-23
自己整理的Hadoop环境的一些安装，和一些简单的使用，其中包括Hadoop、hbase、hive、mysql、zookeeper、Kafka、flume。都是一些简单的安装步骤和使用，只在自己的虚拟机（Linux centOS7）上使用测试过。按照步骤一步...
大数据全套安装包：包括hadoop-3.1.1、hbase-2.2.3、hive-3.1.2、zookeeper-3.5.6
10-07
ZooKeeper 3.5.6版本提供了更稳定的集群管理和故障恢复机制，对于分布式环境中的服务发现和数据一致性至关重要，它是Hadoop生态中的关键组件，为HBase和Hive等提供协调服务。 在安装这些组件时，通常需要按照特定...
从VMware中安装CentOS到Hadoop集群+ Hive+ MySQL搭建
08-11
适合新手，详细 01-Java环境安装 02- Eclipse下载与安装 03-VMware虚拟机的安装 04-在VMware中安装CentOS 05- Hadoop集群+ Hive+ MySQL搭建
hadoop2.7+centos7+hive+zookeeper分布式安装
03-01
linux上在centos系统中进行hadoop完全分布式集群安装，在hadoop安装完成后的基础之上安装元数据库Mariadb，配置完成后安装hive，zookeeper等。
Hadoop+ZooKeeper+HBase+hive(HQL)安装步骤
06-25
Hadoop+ZooKeeper+HBase+hive(HQL)安装步骤
Hive分布式集群部署
上帝之手&传奇 - MartinLee
08-12 2954
Hive编程，可以使开发者不需要考虑底层MapReduce算法如何实现，而只需集中精力关注SQL语句的编写即可。 Apache Hive 是建立在Hadoop上的数据仓库，它提供了一系列工具，可以用来查询和分析数据，Hive提供了执行SQL的接口，用于操作存储在Hadoop分布式文件系统HDFS中的数据。 Hive 可以将结构化的数据文件映射成为一张数据库表，并且提供了便捷的sql语句查询功能，开发者可以通过SQL语句将实现的业务功能转化为MapReduce任务来运行。 Hive 数据仓库是构建在Ha
Hive集群部署实验
qq_49096000的博客
11-18 1789
在Hadoop集群上部署Hive数据仓库，使用MySQL作为元数据存储。在Hive集群平台创建测试表，验证HiveQL在Hadoop Mapreduce中的执行情况。本次实验中，Hive采用MySQL数据库保存Hive的元数据，而不是采用Hive自带的derby来存储元数据。Hive常用的HiveQL操作命令主要包括：数据定义、数据操作。Hive实现最大的优势是，对于非程序员，不用学习编写Java MapReduce代码，也可以完成MapReduce任务。
hive集群部署以及beeline和hive
微电子学与固体电子学-俞驰
05-26 1090
我们会发现一个奇怪的现象就是 hbase是一条命令可以启动整个集群的，但是hive却不是，这是怎么回事呢？ 因为hive只是一个SQL客户端而已。 数据并不在hive中，hive只是帮忙从hdfs->我们看到的数据做了一个SQL映射而已。 情况 方案 想在集群的datanode中通过hive查询数据 需要在namenode和datanode中分别部署和启动hive 只在集群的namenode中通过hive查询数据 只需要在n..
Hive集群部署指导文档（下）
qq_24876715的博客
12-03 293
​​​​​​5搭建Hadoop 5.1 解压安装包并修改解压后的文件夹名 将hadoop安装包解压至master的/opt目录： tar -zxvf hadoop-3.1.3.tar.gz -C /opt mv /opt/hadoop-3.1.3/opt/hadoop 5.2配置环境变量 vi /etc/profile export HADOOP_HOME=/opt/hadoop export HADOOP_COMMON_HOME=$HADOOP_HOME export HADOO...
大数据学习03-Hive分布式集群部署
Java721的博客
07-18 724
本次实验中，Hive采用MySQL数据库保存Hive的元数据，而不是采用Hive自带的derby来存储元数据。Hive常用的HiveQL操作命令主要包括：数据定义、数据操作。Hive实现最大的优势是，对于非程序员，不用学习编写Java MapReduce代码，也可以完成MapReduce任务。
Hive集群部署指导文档（上）
qq_24876715的博客
12-01 164
1. 环境及安装包信息 系统：CentOS 7.6 jdk-8u251-linux-x64.tar.gz apache-zookeeper-3.6.1-bin.tar.gz hadoop-3.1.3.tar.gz Mysql5.7.30 apache-hive-3.1.2-bin.tar.gz 安装包下载地址： https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html https://www..
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值