Hive-安装部署

已于 2022-07-27 23:32:55 修改
阅读量1k 收藏
点赞数
分类专栏： 大数据 文章标签： 数据库
于 2022-07-27 11:19:27 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_52972575/article/details/125985277
版权
本文详细介绍了如何在远程模式下配置Hive的MetaStore，包括Hive的安装步骤，确保Hadoop环境正常，安装MySQL并授权远程访问，解决Hive与Hadoop的版本冲突，以及初始化元数据和启动metastore服务。
摘要由CSDN通过智能技术生成

目录

MetaStore的配置方式

 Hive的安装部署

启动metastore服务

MetaStore的配置方式

metastore的配置分为三种模式，在这里使用远程模式部署

  • 内嵌模式
  • 本地模式
  • 远程模式

通过访问metastore元数据服务，来使用hive

 Hive的安装部署

Step1：前提条件

Hive是基于Hadoop的数据仓库软件，不管用何种方式配置MetaStore，都需要保证Hadoop可用和服务器基础环境正常，Hive只需要在一台计算机上安装。

Hive虽然不是分布式软件，但是有分布式的能力，hive本身是单机的，它只需完成SQL解析，转换成MR，但是存数据和计算数据分别是HDFS和MapReduce，所以有分布式的能力。

服务器基础环境

  • 集群时间同步
  • 防火墙关闭
  • 主机Host映射
  • 免密登录
  • JDK安装

在启动Hive

最低0.47元/天 解锁文章
无敌的小周
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hive详细安装步骤启动等
Alex的博客
10-18 1万+
此文章包含两部分，一部分是mysql的安装，一部分是hive的安装和启动，当然安装mysql是为了给hive做元信息存储，使用本文的前提是Hadoop已经安装。
为什么在Hive中要启动Metadata和hiveserver2服务
liusuoyin的博客
08-24 2327
为什么在Hive中要启动Metadata和hiveserver2服务  在浩如烟海里的文章中，遍布着如何启动Metadata和hiveserver2服务，以及启动后hive出现的问题，那么到底为什么要启动这两个服务呢？为什么hiveserver后面还有个2呢？做学问从来都不能浅尝辄止，必须知道他们的前世今生，走，咱们把这俩服务的祖坟刨了去！ Metadata  先看这个Metadata服务，因为元数据包含用hive创建的database、table等的信息，元数据存储在关系型数据库中，如derby、MySQ
HIVE的四种排序，以及分区分桶
ClearloveXXX的博客
07-27 2442
Hive的四种排序      order by          order by 会对输入做全局排序，因此只有一个reducer（多个reducer无法保证全局有序）          只有一个reducer，会导致当输入规模比较大时，需要较长的时间。          set hive.mapred.mode=nonstrict; (default value / 默认值)          ...
【Linux】—Apache Hive 安装部署
最新发布
sodaloveer的博客
06-18 982
本文主要介绍在Linux环境下安装Hive的过程。
Hive安装与启动
ruo1101的博客
07-23 3246
在配置Hive之前一般都需要安装和配置MySQL，因为Hive为了能操作HDFS上的数据集，那么他需要知道数据的切分格式，如行列分隔符，存储类型，是否压缩，数据的存储地址等信息。进入hive压缩文件所在目录：/opt/software,再执行以下代码解压hive文件到文件目录：/opt/module。将目录（/opt/module/apache-hive-3.1.3-bin）重命名为(/opt/module/hive)进入hive配置目录：/opt/module/hive/conf/
Hive的安装与启动
qq_40471761的博客
10-14 318
1.上传Hive的安装包 2.解压到指定目录            tar -zxvf hive-0.9.0.tar.gz -C /.......... 3.安装mysql           注：使用root用户 1. 安装mysql客户端     yum -y install mysql     安装mysql 服务器端     yum -y install mysql-ser...
Hive安装配置启动
m0_61548416的博客
11-12 761
Hive元数据库的字符集默认为Latin1，由于其不支持中文字符，故若建表语句中包含中文注释，会出现乱码现象。如需解决乱码问题，须做以下修改。重启Xshell对话框或者source一下 /etc/profile.d/my_env.sh文件，使环境变量生效。在$HIVE_HOME/conf目录下新建hive-site.xml文件。修改Hive元数据库中存储注释的字段的字符集为utf-8。将MySQL的JDBC驱动拷贝到Hive的lib目录下。
001__Hive的安装启动
First_____的博客
06-09 331
先在这里附上需要的安装包的下载地址 hive下载官网 mysql下载官网 老规矩 ,下载前准备 1.首先你的hadoop 集群要已经能够启动起来 2. /opt/software 存放安装包 ; /opt/module 存放下载好的软件;(当然你也可以放在你想要放的其他的地方,但要注意路径问题) 将下载好的hive的tar.gz包进行解压 tar -zxvf /opt/software/apache-hive-3.1.2-bin.tar.gz -C /opt/modu..
hive的安装与启动
weixin_45896475的博客
01-07 510
HIVE的安装与启动 1.安装mysql和hadoop 前提:首先你在安装hive之前你要事先安装好hadoop和mysql 因为hive的数据是存储在hdfs中的在使用hive之前也要先开启mysql服务 就自己前安装的mysql，但是要注意，开启远程连接权限 1) [root@doit01 ~]# service mysqld start Starting mysqld: ...
hive安装/启动以及源码调试
进击的数据菜鸟
11-07 2062
hive安装 1、安装hadoop并启动 2、安装hive 3、配置metastore（默认是derby，多用户操作时要改成mysql库） metastore_db无权限，或在Embedded Metastore模式下启用多个客户端都会报  Error in metadata: java.lang.RuntimeException: Unable to instant
Hive安装配置以及启动方式
heima201907的博客
11-12 298
1.上传hive文件并解压 （1）hive及hive安装配置所需jar包：链接：https://pan.baidu.com/s/1BMHPjvGjf4VDdsxPtIF8Ww密码：kkja （2）将上面链接中的文件上传到虚拟机Linux中，上传步骤详情请见：https://blog.csdn.net/amin_hui/article/details/81837257 （3）解压文件到相应目录，根...
hive 三种启动方式及用途
04-23
NULL 博文链接：https://liyonghui160com.iteye.com/blog/2120104
第五章 Hive的安装与配置
开朗小哥的博客
04-30 5224
系列文章： 第一章 Hadoop集群搭建的准备 第二章 Hadoop集群搭建 第三章 Zookeeper分布式集群部署（2n+1台虚拟机） 第四章 Hadoop高可用集群搭建（HA） 待更新 第九章 spark独立模式部署（Standalone） 第十章 spark配置历史服务 第十一章 搭建Spark高可用（HA） 第十二章 spark配置Yarn模式（混合部署模式） 待更新 文章目录前言一、嵌入模式。二、本地模式。1.配置Hadoop集群的配置文件（配置文件都保存在/export/servers/ha
Hadoop历险记（七 Hive配置和启动hiveservice2服务）
陆续将以前写过的技术博客统一搬运到csdn
05-02 2720
但是hive我们并没有每天机器都安装，我们只安装第一台机器，所以从安装角度说他是单机的，但是它为什么优势分布式查询呢？现在都强烈用新配置了， 这里新配置由多了一个东西 叫做HS2，新手觉得很sb，本来元数据外面套一个元数据服务，现在元数据服务外面还有再套一个HS2.理解配置文件是非常必要的，这个必要性就在于 从配置文件你能体会到hive的各个组合是怎么联系起来的，它是怎么和Hadoop配合的。前面一堆操作 我们已经正式启动了hive 装也装好了 配也配好了 服务也起来了，现在我们可以正式的使用它了。
数据仓库工具Hive概念
qq_43408367的博客
05-14 446
由于SQL被广泛的应用在数据仓库中，因此，专门针对Hive的特性设计了类SQL的查询语言HQL。：Hive 的数据都是存储在 HDFS 中的。RDBMS是将数据保存在本地文件系统中。：Hive的引擎是MR/Tez/Spark/Flink，RDBMS使用自己的执行引擎。Hive支持水平扩展；通常RDBMS支持垂直扩展，对水平扩展不友好。：Hive对数据更新不友好；RDBMS支持频繁、快速数据更新。：Hive存储海量数据；RDBMS只能处理有限的数据集；Hive相对慢（MR/数据量）；
hive的安装,启动,连接操作(最详细解决方案,直接按着操作即可)
热门推荐
weixin_59295776的博客
09-15 1万+
hive的安装 1. 修改 hadoop的 core-site.xml中, 添加以下内容: #修改hadoop 配置文件 etc/hadoop/core-site.xml,加入如下配置项:<property> <name>hadoop.proxyuser.root.hosts</name> <value>*</value></property><property> <name>hadoop....
Hive安装与配置
weixin_44847293的博客
06-21 831
第 1 节 Hive安装配置介绍 Hive官网：http://hive.apache.org 下载网址：http://archive.apache.org/dist/hive/ 文档网址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual 安装前提：3台虚拟机，安装了Hadoop 安装软件：Hive(2.3.7) + MySQL (5.7.26) 备注：Hive的元数据默认存储在自带的 derby 数据库中，生产中多采用MySQL
启动hive用启动mysql吗_hive的安装与配置 mysql安装 启动
weixin_31040629的博客
01-21 1009
三种模式内嵌模式：元数据保持在内嵌的derby模式，只允许一个会话连接本地独立模式：在本地安装Mysql，吧元数据放到mySql内远程模式：元数据放置在远程的Mysql数据库1、下载Hive安装包2、将hive文件上传到HADOOP集群机器上，并解压将文件上传到：/opt/tar-zxvfapache-hive-1.2.1-bin.tar.gz-C/opt/cd/optln-sapa...
CDH5.5.0环境下Hive详细安装部署教程
"CDH550@hive安装部署" 本文将详细介绍在CDH5.5.0环境下Hive的安装与部署过程，以及相关的使用方法和维护技巧。Hive作为一个数据SQL解析引擎，主要负责对大数据进行分析和处理，其数据文件存储在Hadoop的分布式文件...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值