hive运行引擎Tez出现错误

最新推荐文章于 2024-09-02 19:51:39 发布
最新推荐文章于 2024-09-02 19:51:39 发布
阅读量1.7k 收藏
点赞数
文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_20790447/article/details/106023121
版权
在运行Hive时遇到一个异常错误，指出Hive metastore数据库未初始化。解决方案是使用schematool工具创建schema，或者在JDBC连接字符串中设置auto-create选项。
摘要由CSDN通过智能技术生成

运行hive之后出现以下问题，
Exception in thread “main” java.lang.RuntimeException: java.lang.RuntimeException: org.apache.hadoop.hive.ql.metadata.HiveException: org.apache.hadoop.hive.ql.metadata.HiveException: MetaException(message:Hive metastore database is not initialized. Please use schematool (e.g. ./schematool -initSchema -dbType …) to create the schema. If needed, don’t forget to include the option to auto-create the underlying database in your JDBC connection string (e.g. ?createDatabaseIfNotExist=true for mysql))
at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:636)
at org.apache.hadoop.hive.ql.session.SessionState.beginStart(SessionState.java:553)
at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:750)
at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:686)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.j

最低0.47元/天 解锁文章
师姐芳芳
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
（已解决）hive insert 插入报错[Tez session start thread] tez.TezSessionState: Failed to start Tez session
qq1156791036的博客
09-06 668
现在是，不用tez引擎就没事，一切正常，切换tez引擎，就是查询正常，创建正常，就是不能插入。这里是，以为是内存小，调大了一点，原来是1024 1cpu 0.4。上图为问题现象 求大佬救命啊 ，拜托拜托。
hive使用tez引擎后启动不起来的原因
用贪心算法解背包问题时对单位重量物品价值排序Java实现
03-15 1165
我遇到这样的情况，也不报错（因为我关闭了yarn的内存检查），如果不是用tez引擎就有启动hive，所以我百思不得其姐。后来我觉得会不会是因为内存太小，启动不起来呢，我就将集群的很多组件重启一遍：包括hdfs、yarn、flume、kafa、zookeeper。后来就重新启动hdfs和yarn和zookeeper，然后就可以启动hive了。 ...
Hive使用Tez引擎安装启动报错
weixin_45822753的博客
09-26 863
问题：org.apache.tez.dag.api.TezUncheckedException: Invalid configuration of tez jars, tez.lib.uris is not defined in the configuration 错误日志： 解决方案：将tez-site.xml cp 到hadoop的etc/hadoop/目录下 ok.
hive3.1.2 hiveserver启动报错 报tez配置找不到
spark_dev的博客
06-05 1044
项目场景： hive3.x安装报错 问题描述： 启动hiveserver 报错提示 2021-06-04T23:30:56,010 INFO [main] server.HiveServer2: Stopped tez session pool manager. 2021-06-04T23:30:56,010 WARN [main] server.HiveServer2: Error starting HiveServer2 on attempt 1, will retry in 60000ms
Hive运行引擎Tez
清风竹雨
12-16 1022
文章目录tez是什么安装1.下载地址2.安装目录3.hive中配置tez测试问题总结1.Tez运行时检查到用过多内存而被NodeManager杀死进程 tez是什么 Tez是一个Hive的运行引擎，性能优于MR。为什么优于MR呢？看下图。 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-hz3I51Ts-1576490945344)(G:\资料-md\assets\t...
cdh继承tez引擎 cdh添加tez引擎 hive引擎增加
07-07
在CDH环境中集成Tez引擎以提升Hive的性能，主要涉及以下几个关键步骤和知识点： 1. **Hadoop版本匹配**： CDH版本需要与Tez版本相匹配。在这个例子中，CDH版本是6.2.0，而Tez版本是0.9.1。确保使用兼容的Hadoop...
hive on tez 常见报错问题收集
01-26
然而，在实际操作中，我们经常会遇到一些常见的错误，特别是当Hive运行在Tez引擎上时。这里我们将深入探讨五个在Hive on Tez中常见的报错问题及其解决方案。 1. 错误一：Failing because I am unlikely to write ...
Hive on Tez配置过程
m0_45847655的博客
08-25 799
此时的hive已经配置完成，可以使用mapreduce引擎进行操作，前提是集群的hdfs,yarn开启，并且启动hive前，要先启动metastore和hiveserver2这两个服务。也可以直接把log4j-slf4j-impl-2.10.0.jar 删了，我就是这么搞的，也没有问题。以上命令启动后会在后台运行，启动之后jps所在的shell命令行，会显示两个runjar,即为启动成功。因为MySQL的密码策略，需要设置一个比较复杂的密码（此处先随便设置一个复杂的密码）是在hadoop的目录下创建。
Hive_1.2.1_Tez_0.9.1安装包.rar
02-11
6. 测试安装，可以通过运行简单的HQL查询来检查Hive和Tez是否正常工作。 在安装过程中，可能会遇到各种问题，比如依赖冲突、配置错误等。如果你遇到困难，可以参考提供的博客教程，或者直接联系资源提供者寻求帮助...
Hive On Tez报错汇总
TomAndersen的博客
06-04 1689
前言 Hive：2.3.0 Hadoop：2.7.7 JDK：1.8.0_221 Tez：0.9.1 报错一 报错内容： 在Hive下使用Tez引擎执行MR Job时报错：Container killed on request. Exit code is 143 问题分析： 从Container killed on request这几个关键字就可以猜测，Container在非正常结束时被kill，很有可能就是Container使用的内存超出Container限制导致的。 查看Hive运行日志： Hiv
hive查询count(*)出错tez.runtime.io.sort.mb及其解决办法
宝罗Paul 的博客
03-23 4436
【运行环境】hadoop-2.7.3  hive-1.2.1  Tez-0.7.0有关Apache Tez的简介：Tez is the next generation Hadoop Query Processing framework written on top of YARN. 它是一款基于YARN的新一代数据处理和分析框架，亮点：支持DAG调度作业，它能把多个有依赖的作业转换成一个作业，所以...
Hive的执行引擎Tez、spark出现的问题
cuichunchi的博客
09-15 1762
Hive on Tez中，切换成mr引擎出现以下问题： hadoop版本为2.7.3 tez版本为0.9.1 因为tez安装目录中应该有hadoop-mapreduce-client-core、hadoop-mapreduce-client-common等jar，hadoop中也有hadoop-mapreduce-client-core、hadoop-mapreduce-client-common等jar，确认他们的版本是否相同，如果不同，会有这个问题； 解决：将tez低版本的jar替换成2.7
pig-on-tez or hive-on-tez 报错
辉子的博客
09-16 1193
当pig-0.15或者hive-1.1-cdh5.4.0使用tez运行是 会报如下的错误，发现申请内存为-1，所以报错 发现无论是pig还是hive的相关默认配置如下 pig的 mapreduce.map.memory.mb=-1 mapreduce.reduce.memory.mb=-1 hive的 mapreduce.map.memory.mb=
Hive on tez 运行报错集锦
cuichunchi的博客
10-26 2007
执行 hive：直接报java.lang.ClassNotFoundException: org.apache.hadoop.mapred.MRVersion CDH集群安装组件都ok，在Hue界面中使用Hive的HQL是都是ok的 但是直接在liunx中，打开客户端命令： 执行 hive：直接报java.lang.ClassNotFoundException: org.apache.hadoop.mapred.MRVersion 解决方案： 因为CDH的hive-site.xml配置文件中没
tez引擎跑hive 语句报错问题解决
shileilei1988的博客
07-19 1137
tez引擎跑hive 语句报错问题解决 现象： Container [pid=151320,containerID=***] is running beyond physical memory limits. Current usage: 1.0 GB of 1 GB physical memory used; 2.8 GB of 5.1 GB virtual memory used. Killing container. 很明显，容器物理内存爆了。 我先设置了hive.tez.container.si
hive执行job的时候报错:hadoop.hive.ql.exec.tez.TezTask
云无痕的博客
11-04 3907
hive执行job的时候报错:hadoop.hive.ql.exec.tez.TezTask
cdh hive on tez 重启后 tez不可用
yy的博客
11-20 705
原因: 不可用是因为重启(或者点击 "部署客户端配置")后cdh会删除hive conf目录,然后重新生成新的.这就导致集群里面的手动拷贝过来的tez-site.xml丢失 导致hive无法正常使用tez引擎 解决方法: 我的解决方法很无语,因为cdh目录感觉太繁琐不公开了.求大佬评论贴上自己更官方的方法 我直接cdh页面的hive-env里面添加一行 让他执行软连接命令链接过来 亲测可用 ln -s /opt/cloudera/parcels/CDH-6.2.0-1.cdh6.2.0.
Hive 安装
最新发布
qq_45115959的博客
09-02 1438
原因在于 Hive 默认使用的元数据库为 Derby。Derby 数据库的特点是同一时间只允许一个客户端访问。如果多个 Hive 客户端同时访问，就会报错。由于在企业开发中，都是多人协作开发，需要多客户端同时访问 Hive，怎么解决呢？我们可以将 Hive 的元数据改为用 MySQL 存储，MySQL 支持多客户端同时访问。，体会 Hive 与 Hadoop 之间的关系。（2）source 一下。观察 HDFS 的路径。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值