Hive配置操作小规模数据使用本地模式不生效

已于 2022-03-01 21:37:19 修改
阅读量1.5k 收藏
点赞数 1
分类专栏： Debug心得 # Hive 文章标签： hive hadoop big data
于 2021-10-22 13:17:01 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41413743/article/details/120903804
版权

现象

查看hive配置时发现，hive.exec.mode.local.auto值为false
在这里插入图片描述

原因

配置文件（hive-site.xml）中mode多写了一个字母，写成了model。。。
在这里插入图片描述

解决方案

修改配置文件（hive-2.3.7//hive-site.xml）中model为mode，重启hive再次查看该值
在这里插入图片描述

wufabao
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
linux hive创建数据库失败,Hive本地模式安装及遇到的问题和解决方案
weixin_39648430的博客
05-04 767
Apache Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。Hive有三种运行模式：1.内嵌模式：将元数据保存在本地内嵌的Derb...
hive导出数据到本地文件报错解决方法
asdfgh0077的博客
09-07 556
hive导出数据到本地文件报错解决方法
部署hive本地模式遇到的问题
weixin_56181697的博客
11-13 502
部署hive本地模式遇到的问题 1、元数据没有初始化 解决方法： schematool -dbType mysql -initSchema（此时使用的数据库是MySQL） 2、hive启动时报错 Exception in thread "main" Java.lang.RuntimeException: java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: ${syst
hive本地模式设置
M10F的博客
05-23 908
set hive.exec.mode.local.auto=true;
hive插入数据失败解决方法
小小码农
03-24 1万+
记录一次hive 错误 描述错误： 进入hive客户端插入数据报错 # 报错： hive (default)> insert into javaAndBigdata.student(id,name) values (3,"java页大数据"); Query ID = root_20220323224810_5192a9f4-95ae-4166-b21e-c8e5f1493c32 Total jobs = 3 Launching Job 1 out of 3 Number of reduce task
Hive之DML数据操作
01-07
Hive简介：https://blog.csdn.net/weixin_45102492/article/details/104418259 Hive安装部署 ： https://blog.csdn.net/weixin_45102492/article/details/104418666 Hive数据类型： ...Hive
Hive小表的测试数据
07-31
在这个场景中，"Hive小表的测试数据"指的是用于测试Hive性能或功能的小规模数据集。小表相对大数据集而言，数据量较小，但它们在大数据处理中扮演着重要的角色，例如作为关联查询中的参照表。 在实际应用中，我们...
在python中使用pyspark读写Hive数据操作
12-17
pyspark读取hive数据非常简单，因为它有专门的接口来读取，完全不需要像hbase那样，需要做很多配置，pyspark提供的操作hive的接口，使得程序可以直接使用SQL语句从hive里面查询需要的数据，代码如下： from pyspark...
hive数据表-小文件合并代码（java）
最新发布
08-08
在大数据处理领域，Hive是广泛使用的数据仓库工具，它允许我们对大规模数据进行SQL查询。然而，当Hive表中包含大量小文件时，这可能会导致性能问题，因为每个小文件都会在MapReduce任务中生成一个Map任务，过多的小...
hive表插入数据的时候，插入数据失败报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.
是故事啊~关注我~
09-09 6785
往hive中的表插入数据的时候，不能直接运行成功，报一下错误 错误原因： namenode内存空间不够，JVM剩余内存空间不够新job运行所致 错误提示 0: jdbc:hive2://hadoop101:10000> insert into table student values(1002,"zss"); INFO : Compiling command(queryId=root_20210909172055_08738d9c-4ded-4067-a2ac-6a64572ad49b): inse
hive-site.xml修改之后不生效与一些beeline，hiveserver2的报错
大数据机器学习
03-12 697
这个是说关于hive.metastore.ds.retry.*这些配置已经不起作用，使用hive.hmshandler.retry.*来配置，这也是版本迭代更新的问题，不过警告在测试环境中，一般来说是没什么太大关系的，但是真实开发还是要好好关注下是什么情况。解释：如果你是用默认的配置文件，hive会连接自带的derby数据库，会在hive的根目录下生成derby.log这个日志文件，并且当启动两个bin/hive的时候，就会报错（如果是mysql就不会）它总是加载默认的配置文件，很烦。
Hive安装与配置
weixin_44847293的博客
06-21 831
第 1 节 Hive安装配置介绍 Hive官网：http://hive.apache.org 下载网址：http://archive.apache.org/dist/hive/ 文档网址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual 安装前提：3台虚拟机，安装了Hadoop 安装软件：Hive(2.3.7) + MySQL (5.7.26) 备注：Hive的元数据默认存储在自带的 derby 数据库中，生产中多采用MySQL
hive使用本地模式
热门推荐
wisgood的专栏
12-17 3万+
hive使用本地模式
Hive优化---启用local模式
tianqinglei的博客
08-22 3163
[查询优化] //是否启用local模式 SET hive.exec.mode.local.auto=true; //默认false //输入的数据量max配置 SET hive.exec.mode.local.auto.inputbytes.max=50000000;        //默认134217728(128M) //task的数量max SET hive.exec.mo
hive自定义配置文件不生效
https://blog.csdn.net/sinat_36710456
11-29 2036
说明：只有在/opt/hive-0.13.1-cdh5.3.6/conf 目录下执行/opt/hive-0.13.1-cdh5.3.6/bin/hive命令时才可以连接mysql数据库。 在/opt/hive-0.13.1-cdh5.3.6 目录下执行bin/hive命令连接的是默认的derby数据库。 总结：即只有在hive的conf目录下执行命令，自定义的配置文件才生效。   具体原因...
Hadoop集群之hive集成mysql作为元数据的方法及错误排解（hive-site.xml文件无法生效）
Just Do IT !
03-22 4215
Hadoop集群之hive集成mysql作为元数据的方法及错误排解（hive-site.xml文件无法生效）：hive集成mysql的本地模式不起作用，还发现该目录下生成了metastore_db文件，即derby的默认数据库；证明刚才配置的文件都没有生效；这样的问题继续了好几天，期间也怀疑是不是hive的版本不对，还是安装的mysql版本不匹配，或者mysql的jdbc驱动版本不对，试过很多方法，但是都没有解决问题；通过调试 hive -hiveconf hive.root.logger=DEBUG,c
hive 配置注意事项及初始化hive 元数据
czw698的专栏
03-16 2万+
今天配置hive 犯了一个问题：下载的hive tar.gz 里的conf目录只有一个 hive-default.xml.template，于是我就cp  了一份命名为：hive-default.xml 结果弄上去总是出现一个问题，就是我在 bin/ 运行hive 创建的database和在 任意其他目录运行hive 创建的database （已配置好环境变量） 在两个地方出现的并不相同，这个
hive本地模式开启不成功：MetaException(message:Version information not found in metastore. )
dafu_dafu的博客
07-29 1万+
今天在搭建hive本地模式的时候，开启hive遇到如下报错。 　　ps：去年同样的版本搭建了远程模式，所以首先过滤掉了版本的问题，网上那个搜了很多原因，其实是自己马虎造成的。下面为具体的报错即原因。 报错如下： [root@master lib]# hive which: no hbase in (/usr/spark/spark-2.4.0-bin-hadoop2.7/bin:/usr/scal...
Hive参数调整详细
someInNeed的博客
11-08 2382
--压缩配置： -- map/reduce 输出压缩（一般采用序列化文件存储） set hive.exec.compress.output=true; set mapred.output.compression.codec=org.apache.hadoop.io.compress.GzipCodec; set mapred.output.compression.type=BLOCK; --任务中间压缩 set hive.exec.compress.intermediate=true; set hi.
Hive数据操作详解：加载、查询与插入
"这份资料详细介绍了Hive数据操作语言，主要涵盖Hive的加载文件、基本查询、插入数据以及IMPORT和EXPORT操作。由智能与大数据学院夏汛编写，旨在帮助学习者掌握Hive数据仓库的基本操作。" 在大数据处理领域，Hive...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值