Error: Error while compiling statement: FAILED: SemanticException [Error 10035]: Column repeated in

最新推荐文章于 2025-02-24 14:59:42 发布
原创 最新推荐文章于 2025-02-24 14:59:42 发布 · 2.8w 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

博客针对Hive类SQL语句编译时出现的错误进行解读。错误信息显示为‘Column repeated in partitioning columns’，指出这是编译时错误，意味着SQL语句语法有误，具体是一个字段不能既做普通列又做分区字段。
部署运行你感兴趣的模型镜像

Error: Error while compiling statement: FAILED: SemanticException [Error 10035]: Column repeated in partitioning columns (state=42000,code=10035)

错的解读： Error: Error while compiling statement  这里的 意思是编译时错误。这就是说你的SQL语句 （这里是hive 所以类SQL语句）语法写错了。

Column repeated in partitioning columns  这里的意思是 一个字段不能既做普通列又不能做分区字段。

您可能感兴趣的与本文相关的镜像

Stable-Diffusion-3.5

Stable-Diffusion-3.5

图片生成
Stable-Diffusion

Stable Diffusion 3.5 (SD 3.5) 是由 Stability AI 推出的新一代文本到图像生成模型，相比 3.0 版本，它提升了图像质量、运行速度和硬件效率

Error: Error while compiling statement: FAILED: ParseException line 4:0 missing KW_END at ‘d‘ near ‘
不积跬步无以至千里，不积小流无以成江河
06-22 6452
在黑窗口中执行Hive的多行SQL时，直接报错，找了2个多小时，才发现是一个制表符的问题。 异常如下： Error: Error while compiling statement: FAILED: ParseException line 4:0 missing KW_END at 'd' near 'd' line 4:2 missing EOF at 'as' near 'd' (state=42000,code=40000) 错误SQL： 修正SQL： 解决办法： 看到不同了嘛，end前面.
HDP Error: Error while compiling statement: FAILED: HiveAccessControlException Permission denied: us
80后大叔爱学习
09-15 4780
hive报错：Error: Error while compiling statement: FAILED: HiveAccessControlException Permission denied: user [admin] does not have [USE] privilege on [Unknown resource!!] (state=42000,code=40000) 验证管理员权限：
解决：Error while compiling statement: FAILED: SemanticException [Error 10007]: Ambiguous column refere
愿我如星君如月 ... 夜夜流光相皎洁 ...
04-23 2万+
报错： Error while compiling statement: FAILED: SemanticException [Error 10007]: Ambiguous column reference creationtime in bcpt
hive导入数据报错Error while compiling statement: FAILED: RuntimeException java.io.FileNotFoundException: /
qq_41617316的博客
07-17 2174
请注意，修改系统配置文件可能需要管理员权限。如果您无法修改系统配置文件，或者修改后问题仍然存在，建议联系系统管理员或技术支持人员进行进一步的解决方案。如果返回的值较低（比如默认的1024），您可以通过修改系统配置文件来提高限制。具体的方法会因操作系统的不同而有所差异。这个错误是由于打开的文件数量过多导致的。可能是由于系统资源不足或者配置文件中定义的文件打开数量超过了系统限制。检查系统的文件打开限制。如果您使用的是Mac OS X系统，可以编辑。如果您使用的是Linux系统，可以编辑。
EError while compiling statement: FAILED: SemanticException [Error 10036]: Duplicate column name:
fuyun6363的博客
04-24 1万+
创建表的时候报如下错误： Error: Error while compiling statement: FAILED: SemanticException [Error 10036]: Duplicate column name: content_id (state=42000,code=10036) create table temp.temp_zhibo_0423 as select a....
报错信息：Error: Error while compiling statement
热门推荐
爱编程
08-11 4万+
建表语句： create external table table_sample(v1 string,v2 string,v3 string) STORED AS PARQUET TBLPROPERTIES('parquet.compression'='gzip') location '/user/spark/cmd/table_sample'; 报错信息： Error: Erro...
hive-hue:无法删除表数据报错，Error while compiling statement: FAILED: SemanticException [Error 10294]:
毛毛的博客
07-05 8720
Error while compiling statement: FAILED: SemanticException [Error 10294]: Attempt to do update or delete using transaction manager that does not support these operations. 解决方法一： 创建hive表是添加： 'transactional'='true' 例如：创建hive表指向hbase CREATE EXTERNAL T..
hiveserver2查询操作报错Error while compiling statement等
技术探求
02-22 9155
1 问题产生背景 更换hive客户端还使用原先的关系型数据库（我用的是mysql）的metastore 2 报错信息 Error: Error while compiling statement: FAILED: SemanticException Unable to fetch table emp. Exception thrown when executing query : SELECT DISTINCT 'org.apache.hadoop.hive.metastore.model.MTable'
但是报错Error while compiling statement: FAILED: SemanticException [Error 10035]: Column repeated in partitioning columns
11-23
这个错误信息是在Hive SQL编译阶段发生的，它表明你在创建表的时候，某个或某些列被同时定义为了主键列（如`KEY`或`PARTITIONED BY`）和分区列（`partitioned by`）。在Hive中，一个列只能作为主键的一部分或者是...
[hive on spark]Error while compiling statement: FAILED: SemanticException Failed to get a spark sess
smoogy的博客
10-23 932
在构建离线数仓时候，执行插入SQL语句，进行数据装载的时候，简单的插入sql一直执行到一分多钟时候，停止并报错。
Error while compiling statement: FAILED: SemanticException Cartesian products are disabled for .....
qq_29494693的博客
08-06 2086
问题 要执行的sql（需求：显示所有可能的比赛组合） select a.name,b.name from problem3 a, problem3 b where a.name < b.name; 报错： [5] J. K. Author, Title of the Report, Report No., month, year. SQL 错误 [40000] [42000]: Error while compiling statement: FAILED: SemanticException C
Error: Error while compiling statement: FAILED: SemanticException Unable to determine if hdfs://hado...
weixin_30735745的博客
06-27 2708
1.发现问题： 在hive客户端或者beeline查询hive表时候报错： 根据报错信息查看，是在集群namenode做了HA之后，产生的hdfs路径不对的问题； 2.解决问题，修改hive元数据mysql信息表DBS和SDS: 更改语句： mysql> update sds set LOCATION = REPLACE(LOCATION,'hadoopNode2:...
解决：Error while compiling statement: FAILED: ParseException line 11:5 missing KW_END at ‘substr‘ near
Klingx的博客
07-21 7658
hive 执行sql，报错： Error: Error while compiling statement: FAILED: ParseException line 11:5 missing KW_END at 'substr' near 'substr' line 11:11 missing EOF at '(' near 'substr' (state=42000,code=40000) sql如下： create table szdsjsxm_sj.xxx_10000453_jieguo R.
解决： Error while compiling statement: FAILED: ParseException line 23:13 extraneous input ‘(‘ expectin
愿我如星君如月 ... 夜夜流光相皎洁 ...
05-07 3万+
1. hive 执行sql，报错： Error while compiling statement: FAILED: ParseException line 23:13 extraneous input '(' expecting ) near ')' in subquery source 2. sql 如下 ： SELECT pxx_id, pxxx_name, xxx, ...
【踩坑实录】-Error while compiling statement: FAILED: RuntimeException Unable to instantiate
chimchim66的博客
02-24 798
确保你使用的 Hive 版本与 Hadoop 的版本兼容。不同版本的 Hadoop 可能需要特定版本的 Hive。如果你在使用 Kerberos 或其他安全机制，确保所有相关的安全配置都已正确设置，包括密钥和认证信息。查看 Hive 和 Hadoop 的日志文件，可能会提供更多关于错误原因的详细信息。有时候，JVM 参数（如内存设置）也可能影响 Hive 的启动。：如果使用了远程 metastore，确保这里正确设置了 metastore 的 URI。：确保这里设置了正确的数据仓库目录。
Error: Error while compiling statement: FAILED: ParseException line 1:28 mismatched input ‘,‘ expect
weixin_45140946的博客
02-28 5461
Error: Error while compiling statement: FAILED: ParseException line 1:28 mismatched input ‘,’ expecting ( near ‘char’ in primitive type specification (state=42000,code=40000) hive建表时报错 0: jdbc:hive2://linux01:10000> create table score(name char,`month`
Hive:Error while compiling statement: FAILED: ParseException cannot recognize input near '<EOF>' '<
三妹的博客
12-16 1万+
一、Hive SQL 报错如下： Error: Error while compiling statement: FAILED: ParseException line 79:17 cannot recognize input near '<EOF>' '<EOF>' '<EOF>' in subquery source (state=42000,code=4...
Error: Error while compiling statement: FAILED: ParseException line 1:20 cannot recognize input near
爱问西瓜爱大树的博客
07-17 1万+
在hive执行这个语句的时候报如下错误： Error: Error while compiling statement: FAILED: ParseException line 1:20 cannot recognize input near 'as' 'date' ',' in selection target 原因： date可能是hive的一个保留字，不能用做别名。 ...
Errors occurred while compiling module ‘模块名‘
weixin_47691902的博客
11-30 1112
Errors occurred while compiling module ‘模块名’ 一直运行的服务重启后突然报编译时异常，令人头大。查找一番后发现配置jdk的地方版本不一致，故此记录下。 解决方法: 查看编译环境的JDk版本是否一致 看下菜单File-Project Structure下的Project和modules的编译环境是jdk13 所有确认一致后，重新启动即可。 ...
Error while compiling statement: FAILED: SemanticException Error in parsing
最新发布
10-12
SQL 语句 `select count (1) from (SELECT DISTINCT drsubmit, drname FROM handwork.dwd_t_dynamic_requirement_plan WHERE DATE_FORMAT(drdate, '%Y-%m')CONCAT(CAST(year(TIMESTAMP 'drdate') AS STRING), '-', LPAD(CAST(month(TIMESTAMP 'drdate') AS STRING), 2, '0')) = '2025-09')Q` 编译报错 `SemanticException Error in parsing`，原因在于存在语法错误。 首先，`DATE_FORMAT(drdate, '%Y-%m')` 和 `CONCAT(CAST(year(TIMESTAMP 'drdate') AS STRING), '-', LPAD(CAST(month(TIMESTAMP 'drdate') AS STRING), 2, '0'))` 之间缺少运算符，且重复使用两种方式来提取年月，存在逻辑混乱。其次，`TIMESTAMP 'drdate'` 错误地将列名 `drdate` 当作字符串处理，应该直接使用列名 `drdate`。另外，`count (1)` 中间多了一个空格，正确的是 `count(1)`。 可以使用 `DATE_FORMAT` 函数来提取年月信息，优化后的 SQL 如下： ```sql SELECT count(1) FROM ( SELECT DISTINCT drsubmit, drname FROM handwork.dwd_t_dynamic_requirement_plan WHERE DATE_FORMAT(drdate, '%Y-%m') = '2025-09' ) Q; ``` 如果 `drdate` 列上有索引，为了能使用索引提高查询性能，可以使用 `year()` 和 `month()` 函数： ```sql SELECT count(1) FROM ( SELECT DISTINCT drsubmit, drname FROM handwork.dwd_t_dynamic_requirement_plan WHERE year(drdate) = 2025 AND month(drdate) = 9 ) Q; ```
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值