Hive学习之HiveServer2服务端配置与启动

最新推荐文章于 2025-03-05 08:15:03 发布
最新推荐文章于 2025-03-05 08:15:03 发布
阅读量5.4w 收藏 10
点赞数 5
分类专栏： Hive 勤奋的Hive 文章标签： Hive thrift hiveserver hiveserver2 Thrift server
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/skywalker_only/article/details/38335235
版权
勤奋的Hive 同时被 2 个专栏收录
33 篇文章 ¥9.90 ¥99.00
订阅专栏
Hive
32 篇文章 ¥9.90 ¥99.00
订阅专栏
本文介绍了HiveServer2作为轻客户端的实现，它解决了HiveServer并发请求的问题，支持多客户端并发和认证。内容包括HiveServer2的配置参数、启动方式以及与HTTP传输相关的设置，强调了其在远程客户端操作Hive数据中的重要性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

        在之前的学习和实践Hive中，使用的都是CLI或者hive –e的方式，该方式仅允许使用HiveQL执行查询、更新等操作，并且该方式比较笨拙单一。幸好Hive提供了轻客户端的实现，通过HiveServer或者HiveServer2，客户端可以在不启动CLI的情况下对Hive中的数据进行操作，两者都允许远程客户端使用多种编程语言如Java、Python向Hive提交请求，取回结果。HiveServer或者HiveServer2都是基于Thrift的，但HiveSever有时被称为Thrift server，而HiveServer2却不会。既然已经存在HiveServer为什么还需要HiveServer2呢？这是因为HiveServer不能处理多于一个客户端的并发请求，这是由于HiveServer使用的Thrift接口所导致的限制，不能通过修改HiveServer的代码修正。因此在Hive-0.11.0版本中重写了HiveServer代码得到了HiveServer2，进而解决了该问题。HiveServer2支持多客户端的并发和认证，为开放API客户端如JDBC、ODBC提供了更好的支持。

       既然HiveServer2提供了更强大的功能，将会对其进行着重学习，但也会简单了解一下HiveServer的使用方法。在命令中输入hive --service help，结果如下。从结果可以了解到，可以使用hive <parameters> --service serviceName

了解本专栏 订阅专栏 解锁全文
hive的hiveserver2客户端配置
qq_25542879的博客
05-16 9607
hive的hiveserver2客户端配置 前言 hive提供了三种操作方式，一种是使用hive命令行方式进行操作；一种是使用java的api方式进行操作;还有一种是使用http的rest api进行操作。这里，我们只讲前两种的配置和实现。 在这之前，我们先了解一下hive的客户端，hive提供了两种客户端，一种是胖客户端，一种是瘦客户端。胖客户端显得比较臃肿，它实现的效果是直接启动服务端和客户端...
Hive实战：HiveServer2、HiveMetastore、Beeline与hive-site.xml配置文件的关系
fancychuan的博客
08-03 1837
Metastore是元数据服务 HiveServer2是用于提供JDBC访问的服务端 Beeline是使用JDBC的方式访问HiveServer2的客户端 hive-site.xml是hive的配置文件，需要注意的是，不管是服务端还是客户端，均是从hive-site.xml读取配置项。因此，在配置hive-site.xml时，要注意配置项是用于服务端的还是客户端的。 1.Metastore与Hive-site.xml 主要关注的配置项：hive.metastore.uris <.
Hive -- HiveServer2服务启动
大数据研究小白
01-16 1万+
<连接事项> 1、首先要检查Hive是否能启动。 然后启动hiveServer2： 2、开启metastore服务 3、netstat -nltp 检查9083端口和10000端口是否开启 若成功开启 进入beeline后使用命令： 成功连接hive客户端。 <metastore作用> 客户端连接metastore服务，metastore再去连接MySQL数据库来存取元数据。有了metastore服务，就可以有多个客户端同时连接，而且这些客户端不需要知道M.
HiveServer2与Spark ThriftServer详细介绍对比
最新发布
xhcx_25的博客
03-05 1211
​ HiveServer2 与 Spark ThriftServer 各有优劣，应该根据具体业务需求加以选择或组合。在批处理为主、数据规模特大、查询延迟容忍度高的场景下，HiveServer2 所依托的 Hive 更为合适。
启动hive
m0_74934794的博客
06-28 1518
2.使用hiveserver2命令 ，启动hiveserver2后 ，使用beeline命令，进行beeline命令行。nuhup:放在命令的开头，用于表示执行的命令处于不挂起，即使关闭窗口，该命令依旧运行。hiveserver2启动后，其他命令就无法使用了，得复制一个窗口。1.使用hive命令 进行hive命令行 UI比较简陋 ，很少使用。3.基于hiveserver2的使用不便，对该方式进行进阶。就启动了 hiveserver2和beeline。2：表示的是错误日志输出。直接输入hive命令。
启动hive前要不要启动metastore和hiveserver2
xie670705986的博客
01-26 1270
hiveserver2：如果要通过jdbc连接hive，则需要启动hiveserver2。常见jdbc客户端：beeline metastore：提供一个数据接口，获取hive元数据。 获取获取元数据的方式：1直连mysql获取 2连接metastore，通过metastore连接mysql ...
Hadoop历险记（七 Hive配置和启动hiveservice2服务）
陆续将以前写过的技术博客统一搬运到csdn
05-02 2912
但是hive我们并没有每天机器都安装，我们只安装第一台机器，所以从安装角度说他是单机的，但是它为什么优势分布式查询呢？现在都强烈用新配置了， 这里新配置由多了一个东西 叫做HS2，新手觉得很sb，本来元数据外面套一个元数据服务，现在元数据服务外面还有再套一个HS2.理解配置文件是非常必要的，这个必要性就在于 从配置文件你能体会到hive的各个组合是怎么联系起来的，它是怎么和Hadoop配合的。前面一堆操作 我们已经正式启动了hive 装也装好了 配也配好了 服务也起来了，现在我们可以正式的使用它了。
Hive服务启动 之 metastore配置 和 hiveserver2
qq_48784015的博客
10-11 6710
Hive服务启动 之 metastore配置 和 hiveserver2详解  配置hive的时候都需要配置hive-site.xml，配置过程中可以选择hive直连或者使用metastore服务间接连接，那么他们之间有什么区别呢？  首先贴直连配置代码： <!-- jdbc连接的URL --> <property> <name>javax.jdo.option.ConnectionURL</name> <valu
Hive服务启动
weixin_53431582的博客
04-12 1008
如果需要在其他机器上通过该客户端访问 hive metastore服务，只需要在该机器的 hive-site.xml配置中添加 metastore 服务地址即可。在 hive 运行的服务器上，首先启动 metastore 服务，然后启动 hiveserver2服务。hive 经过发展，推出了第二代客户端 beeline，但是。在 node3 上使用 beeline 客户端进行连接访问。不是直接访问 metastore 服务的，而是。使用jps+ kill -9命令关闭。同样使用相同命令启动客户端。
Hive学习之路(三):hiveserver2的启动与使用
热门推荐
萧邦主的城邦
04-13 2万+
操作内容简介一、hiveserver2简介二、使用hiveserver2服务1.启动hiveserver2服务2.启动beeline连接server3.使用JDBC协议连接server1.构建Java工程，添加Maven支持2.创建并编写HiveServerTest类三、总结 一、hiveserver2简介 Hive在生产上是不需要部署集群的，操作Hive只需要通过它提供的客户端即可，Hive提供...
hive启动命令
weixin_63001822的博客
05-26 3794
1、启动元数据管理服务（必须启动，否则无法工作）前台启动：bin/hive --service metastore后台启动：nohup bin/hive --service metastore >> logs/metastore.log 2>&1 &2、启动客户端Hive Shell方式（可以直接写SQL）： bin/hive。
Hive启动方式
amin_hui的博客
08-29 1万+
方式一：直接使用 进入hive安装目录下执行 bin/hive 或者配置了环境变量，在任意窗口下执行hive 设置一些基本参数，让hive使用起来更便捷，比如： 让提示符显示当前库： hive&gt;set hive.cli.print.current.db=true; 显示查询结果时显示字段名称： hive&gt;set hive.cli.pr...
hive 启动方式
小哇
11-29 181
1 直接运行hive 2 beeline方式启动 hive --service hiveserver2 beeline -u jdbc:hive2://127.0.0.1:10000 3 通过spark启动，前提需要配置好和hive集成 进入spark安装的bin目录，运行 spark-sql ...
hive启动及基本操作
m0_52111903的博客
09-29 7167
启动hive之前应该先启动HDFS和Yarn。 start-dfs.sh start-yarn.sh两种启动方式 第一种：直接命令行输入 hive 第二种： 先启动服务端：hiveserver2 再启动客户端：beeline -u jdbc:hive2://master:10000 -n root 创建数据库(数据库名=haha)create database haha; 查看库的信息：desc database haha; 切换数据库：use haha; 删除数据库：dro...
Hive-启动与操作（2）
默默发展，无声壮大~
08-30 2258
上一篇文章写到了Hive的安装与配置，这篇文章接着上篇文章延伸Hive的启动与操作，如果Hive没有安装成功的小伙伴们可以参考我上一篇文章：Hive-安装与配置本次用到的环境有： 1)Oracle Linux 7.4 2)Hadoop2.7.4 3)Hive2.1.1 4)Mysql5.5.57 5)Java1.8.0_1441.如果Hadoop服务没有启动，需要先启动Hadoop。 2.初始化元数据。初始化成功后，会在操作窗口下面看到“schemaTool completed“初始化完成的字样
001__Hive的安装启动
First_____的博客
06-09 385
先在这里附上需要的安装包的下载地址 hive下载官网 mysql下载官网 老规矩 ,下载前准备 1.首先你的hadoop 集群要已经能够启动起来 2. /opt/software 存放安装包 ; /opt/module 存放下载好的软件;(当然你也可以放在你想要放的其他的地方,但要注意路径问题) 将下载好的hive的tar.gz包进行解压 tar -zxvf /opt/software/apache-hive-3.1.2-bin.tar.gz -C /opt/modu..
Hive安装与启动
ruo1101的博客
07-23 4556
在配置Hive之前一般都需要安装和配置MySQL，因为Hive为了能操作HDFS上的数据集，那么他需要知道数据的切分格式，如行列分隔符，存储类型，是否压缩，数据的存储地址等信息。进入hive压缩文件所在目录：/opt/software,再执行以下代码解压hive文件到文件目录：/opt/module。将目录（/opt/module/apache-hive-3.1.3-bin）重命名为(/opt/module/hive)进入hive配置目录：/opt/module/hive/conf/
在配置linux虚拟机时hite-site.xml文件本来内容全部删除，现在重新写上没有办法启动hive --service hiveserver2 & 该怎么办
10-26
在Linux上配置Hive时，`hitesite.xml`是一个重要配置文件，它包含了HiveServer2服务的连接信息和其他设置。如果之前的内容被误删并无法恢复，你可以按照以下步骤尝试重启HiveServer2： 1. **备份现有文件**：首先，创建一个新的`hitesite.xml`备份原文件，以防后续需要参考原始配置。 ```bash cp /path/to/hiveserver2/conf/hitesite.xml /path/to/hitesite.xml.bak ``` 2. **检查基本配置**：确认`conf`目录下还有其他必要的配置文件，如`core-site.xml`, `hdfs-site.xml`, 和`hive-env.sh`等。确保这些文件存在且内容完整。 3. **重新编写hitesite.xml**：打开`hitesite.xml`，根据Hive官方文档或你之前的记录添加必需的服务端配置，例如主机名、端口、 Thrift服务器的启用等。 4. **清理缓存和日志**：清除HiveService2的旧数据，包括可能的错误日志以及Metastore的数据缓存。 ```bash rm -rf /path/to/hivevar/lib/hive || true sudo service hive-server2 stop sudo rm -rf /path/to/hadoop/var/log/hive || true ``` 5. **重新启动服务**：再次尝试启动HiveServer2服务。 ```bash sudo service hive-server2 start ``` 6. **验证服务是否运行**：通过命令行工具，如`jps`检查HiveServer2进程是否已在后台运行，并尝试连接到Hive，看是否能成功。 如果你在以上步骤中遇到问题，可以检查以下几个方面： - 配置语法是否正确。 - 是否有权限访问所有必需的资源。 - 确保Hadoop集群环境已经配置好并且可用。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

skyWalker_ONLY

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值