hive启动时的问题

最新推荐文章于 2021-10-01 15:23:11 发布
最新推荐文章于 2021-10-01 15:23:11 发布
阅读量900 收藏
点赞数
分类专栏： Hive

hive 启动时的问题

第一个问题

Logging initialized using configuration in jar:file:/export/servers/hive-1.1.0-cdh5.14.0/lib/hive-common-1.1.0-cdh5.14.0.jar!/hive-log4j.properties
Exception in thread "main" java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x
        at org.apache.hadoop.hive.ql.session.SessionState.createRootHDFSDir(SessionState.java:674)
        at org.apache.hadoop.hive.ql.session.SessionState.createSessionDirs(SessionState.java:606)
        at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:547)
        at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:695)
        at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:634)
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.lang.reflect.Method.invoke(Method.java:498)
        at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
        at org.apache.hadoop.util.RunJar.main(RunJar.java:136)

原因：

Exception in thread "main" java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x

/tem/hive文件夹没有写权限

给它赋予权限即可

hadoop fs -chmod -R 777 /tmp/hive

第二个问题

Logging initialized using configuration in jar:file:/export/servers/hive-1.1.0-cdh5.14.0/lib/hive-common-1.1.0-cdh5.14.0.jar!/hive-log4j.properties
Exception in thread "main" java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory /tmp/hive/root/68bc7064-645d-46f6-b83f-9e760ea73d88. Name node is in safe mode.
The reported blocks 290 needs additional 12 blocks to reach the threshold 0.9990 of total blocks 302.
The number of live datanodes 2 has reached the minimum number 0. Safe mode will be turned off automatically once the thresholds have been reached.
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkNameNodeSafeMode(FSNamesystem.java:1527)
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirsInt(FSNamesystem.java:4470)
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirs(FSNamesystem.java:4445)
        at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.mkdirs(NameNodeRpcServer.java:880)
        at org.apache.hadoop.hdfs.server.namenode.AuthorizationProviderProxyClientProtocol.mkdirs(AuthorizationProviderProxyClientProtocol.java:326)
        at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.mkdirs(ClientNamenodeProtocolServerSideTranslatorPB.java:640)
        at org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$ClientNamenodeProtocol$2.callBlockingMethod(ClientNamenodeProtocolProtos.java)
        at org.apache.hadoop.ipc.ProtobufRpcEngine$Server$ProtoBufRpcInvoker.call(ProtobufRpcEngine.java:617)
        at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:1073)
        at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2281)
        at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2277)
        at java.security.AccessController.doPrivileged(Native Method)
        at javax.security.auth.Subject.doAs(Subject.java:422)
        at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1917)
        at org.apache.hadoop.ipc.Server$Handler.run(Server.java:2275)

        at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:571)
        at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:695)
        at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:634)
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.lang.reflect.Method.invoke(Method.java:498)
        at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
        at org.apache.hadoop.util.RunJar.main(RunJar.java:136)
Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory /tmp/hive/root/68bc7064-645d-46f6-b83f-9e760ea73d88. Name node is in safe mode.
The reported blocks 290 needs additional 12 blocks to reach the threshold 0.9990 of total blocks 302.
The number of live datanodes 2 has reached the minimum number 0. Safe mode will be turned off automatically once the thresholds have been reached.
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkNameNodeSafeMode(FSNamesystem.java:1527)
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirsInt(FSNamesystem.java:4470)
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirs(FSNamesystem.java:4445)
        at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.mkdirs(NameNodeRpcServer.java:880)
        at org.apache.hadoop.hdfs.server.namenode.AuthorizationProviderProxyClientProtocol.mkdirs(AuthorizationProviderProxyClientProtocol.java:326)
        at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.mkdirs(ClientNamenodeProtocolServerSideTranslatorPB.java:640)
        at org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$ClientNamenodeProtocol$2.callBlockingMethod(ClientNamenodeProtocolProtos.java)
        at org.apache.hadoop.ipc.ProtobufRpcEngine$Server$ProtoBufRpcInvoker.call(ProtobufRpcEngine.java:617)
        at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:1073)
        at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2281)
        at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2277)
        at java.security.AccessController.doPrivileged(Native Method)
        at javax.security.auth.Subject.doAs(Subject.java:422)
        at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1917)
        at org.apache.hadoop.ipc.Server$Handler.run(Server.java:2275)

        at org.apache.hadoop.ipc.Client.call(Client.java:1504)
        at org.apache.hadoop.ipc.Client.call(Client.java:1441)
        at org.apache.hadoop.ipc.ProtobufRpcEngine$Invoker.invoke(ProtobufRpcEngine.java:230)
        at com.sun.proxy.$Proxy11.mkdirs(Unknown Source)
        at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolTranslatorPB.mkdirs(ClientNamenodeProtocolTranslatorPB.java:573)
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.lang.reflect.Method.invoke(Method.java:498)
        at org.apache.hadoop.io.retry.RetryInvocationHandler.invokeMethod(RetryInvocationHandler.java:258)
        at org.apache.hadoop.io.retry.RetryInvocationHandler.invoke(RetryInvocationHandler.java:104)
        at com.sun.proxy.$Proxy12.mkdirs(Unknown Source)
        at org.apache.hadoop.hdfs.DFSClient.primitiveMkdir(DFSClient.java:3141)
        at org.apache.hadoop.hdfs.DFSClient.mkdirs(DFSClient.java:3108)
        at org.apache.hadoop.hdfs.DistributedFileSystem$19.doCall(DistributedFileSystem.java:1004)
        at org.apache.hadoop.hdfs.DistributedFileSystem$19.doCall(DistributedFileSystem.java:1000)
        at org.apache.hadoop.fs.FileSystemLinkResolver.resolve(FileSystemLinkResolver.java:81)
        at org.apache.hadoop.hdfs.DistributedFileSystem.mkdirsInternal(DistributedFileSystem.java:1000)
        at org.apache.hadoop.hdfs.DistributedFileSystem.mkdirs(DistributedFileSystem.java:992)
        at org.apache.hadoop.hive.ql.session.SessionState.createPath(SessionState.java:701)
        at org.apache.hadoop.hive.ql.session.SessionState.createSessionDirs(SessionState.java:626)
        at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:547)
        ... 8 more

原因是有一个从节点挂掉了，重启hadoop后可以正常启动了。

小蚂蚁上灯台
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hive报错Logging initialized using configuration in jar
砍柴人的博客
02-20 4496
报错内容 root@hadoop-master:~/apache-hive-2.3.7-bin/bin# hive Logging initialized using configuration in jar:file:/root/apache-hive-2.3.7-bin/lib/hive- common-2.3.7.jar!/hive-log4j2.properties Async: true Exception in thread "main" java.lang.RuntimeExcepti.
Centos7上安装hive-1.1.0
m0_58134983的博客
09-24 251
1.准备一台虚拟机,安装好jdk,mysql和hadoop,这三个的安装可以参照我前面的博客 下载好hive-1.1.0-cdh5.14.2.tar.gz安装包 这里我用的Xshell,放在/opt目录下 然后解压 tar -zxf hive-1.1.0-cdh5.14.2.tar.gz 解压后移到/opt/soft/目录下,并改名 mv hive-1.1.0-cdh5.14.2 soft/hive110 2.切到/opt/soft/hive110/conf/目录下,创建一个 hive-site.xml
Hadoop 上 Hive 的安装与启动
kong
03-11 1万+
我把最近 Hadoop 学习的版本换成 CDH（感觉集合性比较好） CDH 地址：http://archive.cloudera.com/cdh5/cdh/5/ 下载 Hive 的版本：hive-1.1.0-cdh5.7.0.tar.gz 1）第一步：解压 Hive 解压命令：tar -xvf hive-1.1.0-cdh5.7.0.tar -C /opt 2) 第二步：mysql...
Logging initialized using configuration in jar:file:/usr/local/apache-hive-2.3.4/lib/hive-common-2.3
huicooling的博客
01-26 1万+
执行./hive后，一直卡在这里Logging initialized using configuration in jar:file:/usr/local/apache-hive-2.3.4/lib/hive-common-2.3.4.jar!/hive-log4j2.properties Async: true 最后给我报错： Exception in thread "main" jav...
Linux打开hive出现Logging initialized using configuration in jar:file:/usr/local/hive/lib/hive-common
热门推荐
weixin_43706372的博客
06-27 2万+
Linux打开hive出现Logging initialized using configuration in jar:file:/usr/local/hive/lib/hive-common-2.1.0.jar!/hive-log4j2.properties Async: true Exception in thread “main” java.lang.RuntimeException: org.apache.hadoop.hive.ql.metadata.HiveException: java.lan
Hive安装
m0_37658639的博客
10-01 4270
数据仓库工具hive是基于Hadoop集群运行的，在安装hive之前，确保电脑已经启动Hadoop集群。 1.安装单用户模式 对hive软件包进行上传解压，重命名后，输入命令启动hive。 [root@master ~]# cd /export/software/ [root@master software]# rz -be [root@master software]# tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /expo...
无法启动hive
01-07
hdfs在启动开始时会进入安全模式，这时文件系统中的内容不允许修改也不允许删除，直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性，同时根据策略必要的复制或者删除部分数据块...
hive安装依赖以及启动脚本
06-11
hive安装依赖以及启动脚本 文件包含如下： 01_mysql-community-common-5.7.29-1.el7.x86_64.rpm 02_mysql-community-libs-5.7.29-1.el7.x86_64.rpm 03_mysql-community-libs-compat-5.7.29-1.el7.x86_64.rpm 04_...
huaweicloudDocs#mrs#Hive启动失败问题的原因有哪些1
07-25
可能原因2DBservice的浮动IP配置有误，导致metastore节点IP无法正确连接浮动IP，或者是在与该ip建立互信的时候失败导致metastore启动
hive仓库的部署与启动
03-06
【Hive仓库的部署与启动】是针对Hive初学者和相关从业者的重要实践教程，主要讲解如何在个人电脑上通过虚拟机技术部署预配置好的Hive环境。以下是详细的知识点说明： 1. **Hive环境部署**： - **网络配置**：在...
Windows安装Hive时所需cmd相关命令
05-17
Windows环境下启动hive，执行.\bin\hive，报错 'hive' 不是内部或外部命令，也不是可运行的程序或批处理文件。 Apache Hive后续较新版本bin目录下缺少Windows环境下所需要的cmd相关命令。 Apache-Hive-2.1.1老版本...
Linux启动hive发生异常错误解决方法
lovely_Anita的博客
03-03 3437
在主节点hadoop01上执行指令start-dfs.sh，启动HDFS服务进程 在主节点hadoop01上执行指令start-yarn.sh，启动YARN服务进程 [root@hadoop01 ~]# start-dfs.sh 20/03/04 02:41:36 WARN util.NativeCodeLoader: Unable to load native-hadoop library fo...
Hive启动时，抛出异常的可能性（元数据服务未启动等）
Wayshowers的博客
04-18 597
[root@node01 bin]# hive SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/export/servers/apache-hive-2.1.1-bin/lib/log4j-slf4j-impl-2.4.1.jar!/org/slf4j/impl/Stati...
hive的搭建
十色花的博客
07-03 2344
三种模式内嵌模式：元数据保持在内嵌的derby模式，只允许一个会话连接 本地独立模式：在本地安装Mysql，吧元数据放到mySql内 远程模式：元数据放置在远程的Mysql数据库 1、下载Hive安装包http://hive.apache.org/downloads.html 2、将hive文件上传到HADOOP集群，并解压    将文件上传到：/export/softwaretar -zxvf...
解决hive客户端无法连接远程hive server问题
lda_ming的专栏
09-15 8357
问题描述 远端主机 hadoop01 安装了hive server并且已经启动 在hadoop02机器上安装hive作为客户端想登陆server，发现提示错误： Logging initialized using configuration in jar:file:/opt/hive/lib/hive-common-0.13.1.jar!/hive-log4j.properties
hive配置报错，及解决措施
weixin_43872683的博客
03-18 1184
Logging initialized using configuration in jar:file:/usr/local/src/apache-hive-1.2.2-bin/lib/hive-common-1.2.2.jar!/hive-log4j.properties [ERROR] Terminal initialization failed; falling back to unsupp...
【解决方案】Hive启动时报错 Logging initialized using configuration in jar:file:/usr/local/apache-hive-1.1.0-bin
计算机科研杂货铺
04-05 1万+
报错信息： Logging initialized using configuration in jar:file:/usr/local/apache-hive-1.1.0-bin/lib/hive-common-1.1.0.jar!/hive-log4j.properties SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/usr/local/hadoop-2.6.5/share/
hive报错：Logging initialized using configuration in jar:file:/home/software/apache-hive-1.2.0-bin/lib/
qq_45453185的博客
12-04 3699
在hive的bin目录下输入sh hive报错: [root@hadoop01 apache-hive-1.2.0-bin]# cd bin [root@hadoop01 bin]# sh hive Logging initialized using configuration in jar:file:/home/software/apache-hive-1.2.0-bin/lib/hive-co...
hive 启动报错ignor hive default
最新发布
12-03
根据提供的引用内容，我们无法确定具体的错误信息。但是，根据报错信息“ignore hive default”，我们可以猜测可能是Hive启动时没有正确加载默认配置文件导致的。可以尝试以下两种方法解决该问题： 1. 指定Hive配置文件路径 在启动Hive时，可以通过指定Hive配置文件路径来确保正确加载默认配置文件。具体操作如下： ```shell hive --config /path/to/hive/conf/dir ``` 其中，`/path/to/hive/conf/dir`是Hive配置文件所在的目录路径。 2. 设置HIVE_CONF_DIR环境变量 另一种解决方法是设置HIVE_CONF_DIR环境变量，该环境变量指向Hive配置文件所在的目录路径。具体操作如下： ```shell export HIVE_CONF_DIR=/path/to/hive/conf/dir hive ``` 其中，`/path/to/hive/conf/dir`是Hive配置文件所在的目录路径。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值