hive的启动和停止

最新推荐文章于 2025-03-19 22:09:02 发布
最新推荐文章于 2025-03-19 22:09:02 发布
阅读量4.6w 收藏 28
点赞数 11
分类专栏： hive 文章标签： hive停启任务
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zh_s_z/article/details/80972422
版权

一、启动后台运行

打出日志便于差错,如不需要可省略。
[hadoop ~]# nohup hive --service metastore >> ~/metastore.log 2>&1 &        ##hivemetastore
[hadoop ~]# nohup  hive --service hiveserver2 >> ~/hiveserver2.log 2>&1 &   ##hiveserver2，jdbc连接需要
建议指定日志路径,方便查找问题。否则都会存到nohup.out文件中。
~/hiveserver2.log

 

二、停止后台进程

1、先查看端口信息

[hadoop ~]# vi ../hive/conf/hive-site.xml
  <property>
    <name>hive.metastore.port</name>
    <value>9083</value>
    <description>Hive metastore listener port</description>
  </property>
  <property>
    <name>hive.server2.thrift.port</name>
    <value>10000</value>
    <description>Port number of HiveServer2 Thrift interface when hive.server2.transport.mode is 'binary'.</description>
  </property>

2、查看进程

1) 方法一、使用netstat查找端口号的进程

[hadoop ~]# netstat  -lnp|grep 9083
tcp    LISTEN     0      50        *:9083                  *:*                   users:(("java",pid=33253,fd=546))
[hadoop ~]# netstat  -lnp|grep 10000
tcp    LISTEN     0      50        *:10000                 *:*                   users:(("java",pid=33322,fd=572))

2) 方法二、centos 中，使用ss命令代替netstat查找端口号的进程

[hadoop ~]# ss -lnp|grep 9083
tcp    LISTEN     0      50        *:9083                  *:*                   users:(("java",pid=33253,fd=546))
[hadoop ~]# ss -lnp|grep 10000
tcp    LISTEN     0      50        *:10000                 *:*                   users:(("java",pid=33322fd=572))

3) 方法三、查看hive进程

[hadoop ~]# ps -aux|grep hive

hadoop 33253 0.4 14.9 2330148 357316 pts/2 Sl 04:38 1:22 /usr/local/jdk1.8.0_161/bin/java -Xmx512m -Djava.net.preferIPv4Stack=true -Dhadoop.log.dir=/usr/local/hadoop/logs -Dhadoop.log.file=hadoop.log -Dhadoop.home.dir=/usr/local/hadoop -Dhadoop.id.str=hadoop -Dhadoop.root.logger=INFO,console -Djava.library.path=/usr/local/hadoop/lib/native -Dhadoop.policy.file=hadoop-policy.xml -Djava.net.preferIPv4Stack=true -Xmx512m -Dlog4j.configurationFile=hive-log4j2.properties -Djava.util.logging.config.file=/usr/local/hive2/conf/parquet-logging.properties -Dhadoop.security.logger=INFO,NullAppender org.apache.hadoop.util.RunJar /usr/local/hive2/lib/hive-metastore-2.2.0.jar org.apache.hadoop.hive.metastore.HiveMetaStore

hadoop 33322 1.1 17.1 2331028 407888 pts/2 Sl 04:38 3:23 /usr/local/jdk1.8.0_161/bin/java -Xmx512m -Djava.net.preferIPv4Stack=true -Dhadoop.log.dir=/usr/local/hadoop/logs -Dhadoop.log.file=hadoop.log -Dhadoop.home.dir=/usr/local/hadoop -Dhadoop.id.str=hadoop -Dhadoop.root.logger=INFO,console -Djava.library.path=/usr/local/hadoop/lib/native -Dhadoop.policy.file=hadoop-policy.xml -Djava.net.preferIPv4Stack=true -Xmx512m -Dlog4j.configurationFile=hive-log4j2.properties -Djava.util.logging.config.file=/usr/local/hive2/conf/parquet-logging.properties -Dhadoop.security.logger=INFO,NullAppender org.apache.hadoop.util.RunJar /usr/local/hive2/lib/hive-service-2.2.0.jar org.apache.hive.service.server.HiveServer2

3、根据方法1、2、3的pid,杀死进程

[hadoop ~]# kill -9 33253
[hadoop ~]# kill -9 33322

Hadoop和hive一键启动脚本
奋斗的阿杰的博客
07-17 605
Hadoop和hive一键启动脚本
hive启动后一直在加载！
曜有上镜心的博客
12-02 3154
启动不了hive 一直在加载中！！ 输入启动hive命令之后发现一直在加载中。启动不成功。，我们总结原因应该有服务没有开成功，按ctrl+c退出当前命令，输入jps查看一下 可以看到我们少了一个服务（ResourceManager）。这样我们输入 strat-yarn.sh 启动一下，如果没有启动成功，就直接停止全部进程 stop-all.sh 然后按顺序开启服务Zookeeper服务 zkServer.sh start zkServer.sh start(如果没有配置环境变量的话，要在zook
原生Hive的启动和停止详解
司马班如
05-22 7828
原生Hive的启动和停止详解一、Hive启动命令二、命令详解讲解 原生的Hive没有提供启动的脚本，需要调用命令来启动和停止，启动用nohup结合hive命令来启动，启动Hive的时候，需要把metastore和hiveserver2一起启动，分别来讲解 一、Hive启动命令 nohup hive --service metastore > /tmp/hivemetastore.log 2>&1 & nohup hive --service hiveserver2 > /
停止Hive服务
最新发布
2401_83395150的博客
03-19 627
关闭Hive通常涉及停止Hive的相关服务，具体步骤取决于Hive的运行模式（如本地模式、远程模式或嵌入模式）。- 如果Hive运行在容器化环境（如Docker或Kubernetes），需要停止对应的容器或Pod。- 在关闭Hive服务之前，确保没有正在运行的查询或任务，以免数据丢失或任务中断。### 1. **关闭Hive CLI或Beeline会话**### 3. **关闭Metastore服务**### 5. **验证Hive服务是否关闭**### 4. **关闭Hive的依赖服务**
hive的启动和关闭
qq_33190134的博客
09-16 2438
1.关闭 可以通过ps -ef|grep hive 来看hive 的端口号，然后kill 掉相关的进程。 2.启动 nohup hive --service metastore 2>&1 & 用来启动metastore nohup hive --service hiveserver2 2>&1 & 用来启动hiveserver2 可以通过查看日志，来确认是否正常启动。 注意！如果 hiveserver2 不启动，jdbc将无法正常连接 ...
hive服务的启动和关闭
weixin_44455388的博客
11-19 7915
关闭 可以通过ps -ef|grep hive 来看hive 的端口号，然后kill 掉相关的进程。 启动 java代码访问hive: 启动metastore nohup hive --service metastore 2>&1 & 启动hiveserver2 nohup hive --service hiveserver2 2>&1 &...
启动和退出hive
weixin_45131680的博客
09-08 1830
（exit会影响之前的使用，需要下一句kill掉。（在hive的bin目录下执行）（1）quit退出hive，推荐。查找hive进程，kill掉。（2）exit退出hive。
hive：启动停止方式及简单测试
不花的花和尚的博客
05-30 3393
本人环境： 3台虚拟机分别为 sparkproject1 192.168.124.110 sparkproject2192.168.124.111 sparkproject3192.168.124.112 参考： https://blog.csdn.net/weixin_38750084/article/details/90650015 启动mysql（hiv...
Hadoop历险记（七 Hive配置和启动hiveservice2服务）
陆续将以前写过的技术博客统一搬运到csdn
05-02 2913
但是hive我们并没有每天机器都安装，我们只安装第一台机器，所以从安装角度说他是单机的，但是它为什么优势分布式查询呢？现在都强烈用新配置了， 这里新配置由多了一个东西 叫做HS2，新手觉得很sb，本来元数据外面套一个元数据服务，现在元数据服务外面还有再套一个HS2.理解配置文件是非常必要的，这个必要性就在于 从配置文件你能体会到hive的各个组合是怎么联系起来的，它是怎么和Hadoop配合的。前面一堆操作 我们已经正式启动了hive 装也装好了 配也配好了 服务也起来了，现在我们可以正式的使用它了。
hive systemctl启停hiveserver2和metastore服务.pdf
07-21
然而，手动启动和停止Hive的服务，如HiveServer2和Metastore，可能会变得繁琐和耗时。为了解决这个问题，我们可以创建自定义的Shell脚本以及使用systemd服务来实现一键启停Hive的相关服务。 首先，我们来看一下提供...
hivefs:Hive.im 云存储服务的 FUSE 文件系统。 - 仅供参考。 Hive.im 服务关闭
06-21
荨麻疹 ＃＃要求： Python 3.x ##Python 模块： 要求 瘾君子 保险丝 （都可以通过pip安装） ##功能： 列出文件和文件夹 读取文件 重命名文件和文件夹 将文件夹设置为“锁定”或“解锁”（chmod 700 或 744） 复制或创建新文件（上传）还不起作用！ Hive.im API 的上传过程有点复杂，我还没有让它工作。 如果那里有人知道如何使用 Python 和 requests 模块（最好）通过 Hive.im API 进行上传，我将非常有兴趣了解它。 ##澄清： 观看视频：现在，当从 hivefs 文件系统访问视频文件时，它会像其他文件一样根据需要直接下载它。 但是，如果您尝试通过慢速连接观看全高清视频，这并不太好。 最终，将使用编码的视频流（如果可用）而不是下载文件。 有关文件权限的更多信息：Hive.im 仅支持将文件夹设置为“已锁定”（
一键关闭进程
10-26
一键关闭多余的应用进程，比加速球更方便，更好用
[Spark/Hive] -- Hive启停命令
鱼归不知处
12-11 1102
1、启动命令 #！/bin/bash nohup hive --service metastore >> $HIVE_HOME/log/metasotre.log 2>&1 & nohup hive --service hiveserver2 >> $HIVE_HOME/log/hiveserver.log 2>&1 & 2、停止命令 #！/bin/bash process="hive" PID=$(ps x | grep
获取hive日志，停止hive
wangneng_168的专栏
02-18 569
    获取hive日志比较麻烦，通常的做法是执行shell命令获取日志，但是这样有一些问题，比如：输出的结果需要程序解析等，可以改进hive，采用jdbc的方式执行hive sql，并且把输出到控制台的日志保存到redis，其中kill job的命令日志用不同的key缓存到redis，如此可很方便获取查询结果、日志、kill命令。    具体实现方式如下：    修改hive-exec-...
hive进程启动
m0_71747400的博客
09-05 727
hive启动操作
Hive的hiveserver2后台开启和关闭
qq_56870570的博客
09-02 3521
前提：hive/bin配置了环境变量。如果没有配置，cd到 hive目录下的bin里，再执行。 开启命令： nohup hive --service hiveserver2 & 产生的日志： 默认在： 用户文件夹里 [root@master ~]# ll total 80 -rw-------. 1 root root 1962 Nov 13 2016 anaconda-ks.cfg -rw-r--r--. 1 root root 201 Mar 30 2017 ifcfg-e...
hiveserver2后台启动及关闭
技术探求
02-22 7767
1 hiveserver2启动脚本 我的hiveserver2启动脚本仅供参考： #!/bin/bash echo "=========================开启metastore=========================" nohup hive --service metastore >/opt/module/logs/hive/hive.log 2>&1 & sleep 10s echo "=========================开启hives
hive如何启动
03-11
<think>嗯，用户之前问过Hive的默认端口是不是10000，现在又想知道如何启动Hive。看起来他们可能是在搭建或者维护Hive环境，遇到了连接问题，或者刚开始学习Hive，需要了解基本操作。 首先，我需要确定用户的使用场景。可能是他们配置了Hive的端口，但无法连接，所以需要启动服务。或者他们刚刚安装完Hive，现在需要启动服务进行后续操作。因此，回答如何启动Hive需要详细但清晰的步骤，避免遗漏关键点。 接下来，用户的身份可能是大数据工程师、数据分析师，或者是学生。不同身份可能需要不同的详细程度。工程师可能需要更技术性的细节，比如配置文件的位置或日志排查，而学生可能需要更基础的步骤说明。所以，回答应该兼顾不同层次，提供基础步骤和进阶内容。 用户的需求是启动Hive，但可能隐含的问题是如何正确启动相关服务，比如HiveServer2或Metastore，以及如何处理常见错误。比如，用户可能在启动时遇到端口冲突或者依赖服务未启动的问题，所以需要包含这些问题的解决方法。 另外，之前的回答中提到了Hive的端口配置，特别是HiveServer2的默认端口10000。所以在启动Hive时，可能需要确保HiveServer2正确启动，并且端口没有被占用。因此，启动步骤应该包括HiveServer2和Metastore的启动方法，以及如何验证服务是否正常运行。 还要考虑Hive的不同模式，比如本地模式还是远程模式，是否使用了MySQL作为元存储，或者是否集成Hadoop和YARN。这些因素会影响启动流程，需要提醒用户检查前置条件，比如Hadoop是否运行正常，Metastore的数据库配置是否正确。 可能用户遇到的常见问题包括环境变量未正确设置、依赖服务未启动、配置文件错误等。因此，在回答中需要包含这些排查步骤，比如检查日志文件，验证端口占用情况，以及如何通过命令行测试连接。 最后，确保回答结构清晰，分步骤说明，便于用户跟随操作。同时，提供示例命令和配置片段，让用户可以直接复制使用。另外，提醒用户注意生产环境和学习环境的不同配置，比如高可用设置可能需要Zookeeper，而单机环境可能更简单。</think>以下是Hive服务的启动步骤详解，需根据实际部署模式操作： --- ### **一、启动前的必备条件** 1. **确认Hadoop集群已正常运行** ```bash jps # 检查NameNode、DataNode、ResourceManager等进程 ``` 2. **配置元数据存储**（如使用MySQL需提前启动） ```bash systemctl start mysqld # 根据实际数据库类型操作 ``` --- ### **二、本地模式启动（嵌入式Derby数据库）** > 适用于单机测试，**不支持多会话并发** ```bash # 1. 进入Hive安装目录 cd $HIVE_HOME # 2. 初始化Derby元数据库（仅第一次使用需要） bin/schematool -dbType derby -initSchema # 3. 启动Hive CLI bin/hive # 此时自动启动内置服务 ``` --- ### **三、远程模式启动（生产环境常用）** #### **步骤1：启动Hive Metastore服务** > 元数据管理服务，默认端口9083 ```bash # 后台运行Metastore nohup hive --service metastore > /tmp/metastore.log 2>&1 & # 验证启动 netstat -an | grep 9083 tail -f /tmp/metastore.log # 查看日志 ``` #### **步骤2：启动HiveServer2** > 提供JDBC/ODBC连接服务，默认端口10000 ```bash # 启动命令 nohup hive --service hiveserver2 > /tmp/hiveserver2.log 2>&1 & # 验证服务状态 netstat -an | grep 10000 beeline -u jdbc:hive2://localhost:10000 # 测试连接 ``` --- ### **四、通过脚本快速启动（推荐）** 1. 创建启动脚本`start-hive.sh`： ```bash #!/bin/bash hive --service metastore & sleep 10 # 等待Metastore初始化 hive --service hiveserver2 & ``` 2. 赋予执行权限并运行： ```bash chmod +x start-hive.sh ./start-hive.sh ``` --- ### **五、常见问题排查** 1. **端口冲突**： ```bash lsof -i :10000 # 检查端口占用 kill -9 <PID> # 结束冲突进程 ``` 2. **元数据库连接失败**： - 检查`hive-site.xml`中JDBC配置 - 确认MySQL用户权限 3. **Hadoop权限问题**： ```bash hadoop fs -chmod -R 777 /tmp # 临时解决写入权限问题 ``` --- ### **六、停止服务** ```bash # 查找进程ID并终止 ps -ef | grep metastore | awk '{print $2}' | xargs kill ps -ef | grep hiveserver2 | awk '{print $2}' | xargs kill ``` > 提示：生产环境建议使用`systemd`管理服务，或通过Ambari/Cloudera Manager等工具统一控制。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值