hive添加表字段失败

最新推荐文章于 2022-12-27 15:33:38 发布
最新推荐文章于 2022-12-27 15:33:38 发布
阅读量900 收藏
点赞数
分类专栏： hive 文章标签： hive 大数据 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wflh323/article/details/127010391
版权
在尝试使用Hive的ALTER TABLE语句一次性添加大量字段到分区表时，遇到了'Unable to alter table.null'错误，该错误源于Java的StackOverflowError。问题可能由递归调用过深或字段数量过多导致。为解决此问题，建议将字段分批逐个添加。这提供了一种避免栈溢出的临时解决方案。
摘要由CSDN通过智能技术生成

  hive某分区表有几千字段，执行alter table ...add columns时出现异常返回:

Unable to alter table. null 错误日志。

 alter语句在hive metastore中执行，在hive metastore 搜索error日志，发现报栈溢出java.lang.StackOverflowError.... ,StackOverflow  这个问题一般是程序里可能是有死循环或递归调用所产生的,或递归太深，在SQLText类中的toSQL()方法报出的，这个方法本身就是个递归方法。

alter.....add columns 后面加了几十个字段，将字段一个个添加解决。

Hive分区表的新增字段数据为null的问题解决方法
笑看风云路的博客
04-07 965
修改Hive分区表结构以后，元数据库中的SDS中该表对应的CD_ID会改变，但是该表历史分区下面对应的CD_ID还是原来表的CD_ID，导致无法获取新增加字段的值数据。使用cascade关键字之后，历史分区使用的元数据CD_ID也会统一修改，所以不存在通过insert overwrite覆写历史分区数据时出现新增字段为NULL的问题。注意：这种方法是预防insert overwrite覆写历史分区数据时出现新增字段为NULL的问题，等问题出现的时候就需要使用方法1来解决。
Hive ddl语法使用详解
congge_study的博客
02-26 8648
hive ddl语法使用详解
hive分区表新增字段(add columns)后旧分区报错/字段无法写入(CASCADE)
Lyx_h的博客
09-04 5609
1.问题描述 日常工作中我们经常会给hive表新增字段，常见的新增方式多为： ALTER TABLE db.table_test add columns (new string comment '我是新字段') ; 如果我们的表是分区表，那常常就会出现一些问题： 查询旧分区时会莫名其妙的出现 FAILED:Execution Error,return code 2 from XXXXXX 等报错 insert overwrite时 旧分区新增的字段无法更新 2.解决办法 通过查询官方文档，可以发现官方
hive——创建表不支持新增字段问题
youzhouliu的博客
11-01 8063
创建hive表后，可能会遇到需要增加字段的情况，我们可能会想当然的像mysql或其他数据库那样，直接添加一个字段。 但对于hive，直接添加的字段可能并不能使用，比如可能会在添加字段后，在插入数据时，会出现类似如下的错误： Error: java.io.IOException: java.lang.ArrayIndexOutOfBoundsException: 9 at org
hive表添加字段/修改字段导致的查询报错
一定要努力努力再努力的博客
11-01 5370
一般由于业务需要，会对hive的表有增加字段的操作，如下： ALTER TABLE 库名.表名 add columns (字段名 字段类型 comment '注释') ; 但是上面这种语法只能是对表的当前和以后新的分区生效，若存在历史分区，那么MySQL上的元数据信息没有修改。 若查询历史分区，就会报上面的return code 2 解决方案： 1、直接在添加字段的时候加上 CASCADE ALTER TABLE 库名.表名 add columns (字段名 字段类型 comment '注释') .
hive分区表增加字段会导致新增字段无法显示值的BUG
weixin_34353714的博客
03-23 813
2019独角兽企业重金招聘Python工程师标准>>> ...
hive 增加表字段
最新发布
01-02
### 如何在 Hive 表中增加字段 对于已经存在的 Hive 表，可以通过 `ALTER TABLE` 命令来修改其...此外，还可以指定默认值给新添加的字段，这有助于确保旧记录不会因为缺少该字段而导致查询失败或其他异常情况发生。
Hive浅谈
Ajaxtxdy的博客
09-16 1009
Hive浅谈
hive修改字段后查询不了数据
SW_LCC的博客
11-01 2291
情况描述 hive版本为: apache-hive-2.1.0 hadoop版本为: apache-hadoop-2.6.0-cdh-5.13.3 修改添加两个字段删除一个字段，但跟日志文件数据是一一对应的。 发现修改后，在hive中用mapreduce查询这两个新加的字段，值为null。 而用hive中用spark引擎却可以找到字段的值。 hive修改字段 通过alert table table...
HIve修改字段或者增加字段后，Spark访问不生效问题
BackToMe的博客
05-28 2743
问题重现（例） 当我将数据存储格式改变，或者增加一列的时候，我习惯使用了alter table add …来实现 原来的表： ALTER TABLE test ADD COLUMNS (weight STRING) CASCADE 加上一列weight字段后（这里使用cascade就是为了同步到hivemetastore），我用spark向表插入一个带有weight字段的表，此时抛出异常 Exception in thread "main" org.apache.spark.sql.AnalysisEx
HIVE分区表添加字段cascade 执行时间过长出现bug
xw514124202的博客
05-20 3983
执行hive分区表添加字段命令 alter table db_name.staging_user_log_minutes add columns( `ext_main_business_line` string COMMENT '主业务线' ) cascade; 因为历史分区量太大，所以执行命令花了很长的时间，正好又有新的调度任务写入新分区，导致有的分区没有添加上新的字段 找到问题路径（通过...
Hive分区表中 添加新字段,值为NULL 问题解决
zhuhailong
09-22 3626
Hive分区表中 添加字段，值为NULL 问题解决
hive建表导入数据后显示NULL
weixin_67816885的博客
08-13 2383
hive导入数据显示null
HIVE 分区表 增加字段 忘记 CASCADE
YJ语
12-05 2343
HIVE 分区表 增加字段 忘记 CASCADE
【原】Hive 分区表新增字段后，新增字段无法写入问题
qq_35218261的博客
12-27 1982
参考转载：https://www.cnblogs.com/zhangqian27/p/12654067.html
hive 外部表不支持添加列
zj360202的专栏
04-11 2618
alter table hbase_fct_mcht_item_day add columns(avg_stay_time_bi bigint);会报如下错误： FAILED: Error in metadata: Cannot use ALTER TABLE on a non-native table FAILED: Execution Error, return code 1 from o
hive误删除表,异常停止进程
qq_36470475的博客
07-22 1160
1报错 - Failed with exception Unable to alter partition. Put request failed : UPDATE `PARTITION_PARAMS` SET `PARAM_VALUE` = ? WHERE `PART_ID`=? AND `PARAM_KEY`=? INFO - FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Una
hive mysql 错误_mysql – Hive’无法改变表’错误
weixin_42136826的博客
03-04 481
我将数据加载到表格时出现错误,感谢您的帮助.hive> load data local inpath '/home/Xperttech/Desktop/datagen_10.txt' into table patient;Copying data from file:/home/Xperttech/Desktop/datagen_10.txtCopying file: file:/home/...
hive 添加表字段
08-13
Hive中添加表字段有多种方法。其中一种常用的方法是使用ALTER TABLE语句结合ADD COLUMN关键字。具体的语法如下： ```sql ALTER TABLE database.table_name ADD COLUMN column_name column_type COMMENT 'column_...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值