使用JDBC的方式访问Hive---大数据之Hive工作笔记0010

最新推荐文章于 2024-08-05 20:59:55 发布
最新推荐文章于 2024-08-05 20:59:55 发布
阅读量983 收藏
点赞数
分类专栏： 离&实时计算&大数据 文章标签： 大数据 hive jdbc连接hive
本文为博主原创文章，未经博主 添柴程序猿 允许不得转载 违者追究法律责任。
本文链接：https://blog.csdn.net/lidew521/article/details/125586412
版权
本文介绍了如何使用JDBC连接Hive，包括配置hiveserver2、启动元数据服务和hiveserver2，以及使用beeline客户端进行连接。详细步骤包括设置hive-site.xml中的host和port，启动服务并监控日志，最后展示无需密码的JDBC连接示例。
摘要由CSDN通过智能技术生成

然后我们再用jdbc的方式来连接hive,上面是链接步骤 

 

我们来看一下这个过程,可以看到

首先外部的客户端,上面左侧,通过hive的JDBC驱动,首先链接到,hiveserver2,这个我们的一个

提供jdbc服务的服务端,然后这个hiverserver2,再去连接hive的元数据服务,然后hive的元数据服务

再通过jdbc的方式,通过mysql的jdbc驱动去连接,mysql来获取hive的元数据.

 

首先我们也是去把hiveserver2的配置,配置到hive-site.xml中

可以看到复制到最后就可以了,可以看到这里

指定了hive.server2.thrift.bind.host绑定的主机是hadoop102

然后设置的,

hive.server

了解本专栏 订阅专栏 解锁全文 超级会员免费看
添柴程序猿
关注
专栏目录
订阅专栏
Hive大数据-Hive的架构---大数据之Hive工作笔记0003
添柴程序猿的专栏
02-03 280
然后我们再来看一下hive的架构 可以看到hive,左边有个元数据存储,就是存了一些元数据,通过这些元数据我们可以,找到具体我们存的实际的数据. 然后右边hive提供了cli命令行的方式操作hive以及jdbc的方式处理数据. 然后通过cli或者jdbc,连接hive以后,然后把写好的sql,经过sql parser解析器,解析sql以后,然后再编译sql,然后再优化sql,然后再去执行 sql,然后这个sql解析器,实际上做的就是把我们写的sql,转换成了mapper 和reducer,.
简单的spark 读写hive以及mysql
11-30
简单的spark加载HIVE MYSQL 数据，以及简单的进行往mysql,hive写入数据
Java访问Hive的几种JDBC URL格式
最新发布
sunny05296的博客
08-05 683
zookeeper quorum：是 hive-site.xml 配置文件中 Zookeeper 的 Quorum 节点列表，以三节点为例格式为：zk_host01:zk_port,zk_host02:zk_port,zk_host03:zk_port。4）hive2 server HA（zookeeper）方式访问（带Kerberos认证） JDBC URL。2）hive2 server HA（zookeeper）方式访问 JDBC URL。1）hive2 server 单点访问 JDBC URL。
使用JDBC访问Hive
flysun的博客
03-15 437
一：首先引入所需要的JAR包 org.apache.hive hive-jdbc ${hive-jdbc.version} org.apache.hadoop hadoop-common ${hadoop-common.version} 二：程序访问： public class HiveJDBCUtil { priv
HiveJDBC访问
勇心在馨
01-04 716
beeline客户端方式采用JDBC方式借助于Hive Thrift服务访问Hive数据仓库。 HiveThrift(HiveServer)是Hive中的组件之一，设计目的是为了实现跨语言轻量级访问Hive数据仓库，有Hiveserver和 Hiveserver2两个版本，两者不兼容，使用中要注意区分。体现在启动HiveServer的参数和jdbc:hiveX的参数上。beeline相关的Ser...
使用JDBC方式访问Hive
d_l_w_d_l_w的博客
09-16 523
修改配置文件：hive-site.xml <!-- 指定存储元数据要连接的地址 --> <property> <name>hive.metastore.uris</name> <value>thrift://hadoop102:9083</value> </property> <!-- 指定 hiveserver2 连接的 host --> <property> <name>
2.Hive基础—Hive 元数据配置到 MySQL、使用 (元数据服务) 和 (JDBC) 的方式访问 Hive
页川叶川
08-15 2932
本文目录如下：2.5 Hive 元数据配置到 MySQL2.5.1 拷贝驱动2.5.2 配置 `Metastore` 到 MySQL2.5.3 再次启动 Hive2.6 使用元数据服务的方式访问 Hive2.7 使用 JDBC 方式访问 Hive2.7.1 修改配置文件: `hive-site.xml`2.7.2 启动 hiveserver22.7.3 启动 beeline 客户端2.7.4 编写 hive 服务启动脚本（了解） 2.5 Hive 元数据配置到 MySQL 2.5.1 拷贝驱动 将 My
Hive 使用JDBC访问Hive
weixin_47243236的博客
12-15 990
JDBC 方式访问 Hive 1️⃣ 修改 HDFS 的访问权限，在 Hadoop 下的 core-set.xml 添加如下配置： <property> <name>hadoop.proxyuser.root.hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser.root.groups<
纯手动搭建大数据集群架构_记录009_搭建Hive_配置hiveserver2服务_配置metastore服务_使用datagrip管理hive---大数据之Hadoop3.x工作笔记0170
添柴程序猿的专栏
03-02 213
然后这里再去编辑一下hive的配置文件,要注意,这个/opt/module/hive/conf/hive-site.xml这个文件。启动以后就可以进行!开启元数据服务其实就是配置好,对应的上面的jdbc就可以了,配置好了以后,就可以连接到mysql来提供。这个元数据服务默认是嵌入到每个客户端中的,cli的客户端, 很不友好,具体怎么不好,看以前的博文。然后填写信息,然后这里没有密码就不填写,然后第一次要求下载驱动点击,就可以了,等一会就可以了。
Hive大数据-Hive的安装与启动3.1.2版本---大数据之Hive工作笔记0005
添柴程序猿的专栏
02-03 309
然后我们再去看这个hive的安装,其实正确的学习路径应该是,首先去看 一下hadoop,因为大数据中,很多知识都是基于hadoop的,然后再去看hive,然后再去 看hbase,spark,flink这样比较好,没有hadoop基础的话,去看hive,会在安装部分,感觉有点蒙圈,因为 hadoop安装的部分,这里不会说. 简单看一下安装中文件下载地址. 需要安装的是上面的这个文件 这个是安装过程 首先我们准备虚拟机去 然后我们把上面这几个拖进来,其实我们这里只需要 a.
Java通过JDBC连接Hive
03-20
压缩包中包含Java通过JDBC连接Hive所需的jar包。包含有，antlr-runtime-3.0.1.jar;commons-logging-1.0.4.jar;hadoop-core-1.2.1.jar;hive-exec-0.10.0.jar;hive-jdbc-0.13.1.jar;hive-metastore-0.9.0.jar;hive-service-0.13.1.jar;httpclient-4.2.5.jar;httpcore-4.2.4.jar;jdo2-api-2.3-ec.jar;libfb303-0.9.0.jar;libthrift-0.9.0.jar;log4j-1.2.16.jar;slf4j-api-1.6.1.jar;slf4j-log4j12-1.6.1.jar.
jdbc连接hive
10-10
本代码中demo讲解了如果使用jdbc连接cdh搭建的hive环境信息
JDBC连接Hive实例
07-02
JDBC连接hive,用JD连接hive。
apache-hive-2.3.7-bin 博客同款
12-18
`博客同款hive.txt` 文件可能是博主分享的关于如何安装、配置和使用 Hive 2.3.7 版本的教程或笔记，内容可能涵盖： 1. **安装步骤**：解压、配置环境变量、初始化 metastore、启动 Hive 服务等。 2. **配置参数**：...
Jdbc访问hive
zeng6325998的博客
06-20 2447
JDBC访问注意点 如果JDBC代码访问出现问题，解决问题的办法（我们在不同环境出现了不少问题，发现匪夷所思的问题大部分都是版本导致的） 1、校验JDBC URL是否可以使用，在服务器上使用beeline连接这个URL看看是否可以连接的上 2、如果JDBC URL没有问题，那么检查代码中的JDBC的版本(如果是pom文件的话 是hive-jdbc)和服务器hive的版本是否对应的上。如果对应不上，修改下版本使其和服务器一致 1、hiveserver、hiveserver2 的区别 两者都允许远程客户端使用多
使用 JDBC 方式访问 Hive
m0_51623564的博客
07-06 538
使用 JDBC 方式访问 Hive
通过JDBC连接Hive
夏天小厨的博客
03-29 3709
使用JDBC去操作hive可能是程序员们比较喜欢的一种方式，今天来总结一下使用java api来对hive进行增删查改，这里我主要演示对hive表中数据的操作，不创建表已经改变表原有的结构。本文基于hive已经能正常使用的情况。 首先hive必须以服务方式启动，平台默认启动时hive server2 模式。hiveserver2是比hiveserver更高级的服务模式，提供了hiveserver...
尚硅谷大数据技术Hive详解
"大数据之hive笔记" 这篇笔记主要介绍了Apache Hive，一个基于Hadoop的数据仓库工具，用于处理和分析大规模的结构化数据。Hive由Facebook开源，它提供了类SQL查询语言（HQL），简化了对存储在HDFS上的大量数据进行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

添柴程序猿

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值