Hive SQL语法报错 及相应解决方法

最新推荐文章于 2024-01-30 16:23:22 发布
最新推荐文章于 2024-01-30 16:23:22 发布
阅读量1w 收藏 23
点赞数 3
分类专栏： 大数据 文章标签： SQL HIVE ERROR
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/soaring0121/article/details/87865074
版权
本文详细记录了在使用Hive SQL时遇到的一些常见错误，包括解析错误、SemanticException以及查询不到数据等问题，并提供了相应的解决办法。例如，解决ParseException可尝试为子查询添加别名；对于SemanticException，确保每个非聚合字段都在GROUP BY中；处理多条UNION查询的数据存取问题，可通过设置`mapred.input.dir.recursive=true`；遇到TEZ执行时的内存问题，可以调整container大小等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Hive SQL语法与经常用的mysql语法具有一定差异性，按照写mysql的习惯写出的sql经常报错，且报错很难看出问题原因，因此在此记录出现问题的现象和解决方式

  • Error: Error while compiling statement: FAILED: ParseException line 3:2 cannot recognize input near '(' 'SELECT' 'a' in joinSource (state=42000,code=40000)
    原因：如果你发现你的sql没有任何问题，此时一般是因为子查询没有别名造成的
    解决：select * from (select * from a)   更改成 select * from (select * from a) t
  • Error: Error while compiling statement: FAILED: SemanticException [Error 10025]: Expression not in GROUP BY key id (state=42000,code=10025)
    原因：在select语句中而不在group by 语句中的字段会导致该报错
    解决: select id,name from a group by name 更改成 select collect_set(id),name from a group by name
  • Error: Error while compiling statement: FAILED: SemanticException [Error 10004]: Line 1:1
最低0.47元/天 解锁文章
ApacheHive的SQL优化及HiveSQL语法详解
AI天才研究院
07-30 1798
Apache Hive 是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射到一张表上，并提供简单的数据查询功能。Hive提供了一个类似SQL语言的查询语句用来定义数据的运算逻辑，通过MapReduce实现数据的离线计算和分析。由于Hadoop自身的特点导致Hive存在性能问题，因此出现了Hive on Spark项目，它允许在Spark集群上运行HiveQL命令。Hive支持的语法包括HiveQL、HPL(Hadoop Pig Latin)等。
oracle和hive之间关于sql的语法差异及转换
weixin_42771366的博客
10-17 1589
Oracle与hive相互转换
hive操作错误总结
萤火之光，照亮前行
03-31 1223
Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. org.apache.hadoop.hive.ql.metadata.HiveException: Unable to move source file: 解决： 退出hive，关闭namenode和datanode，删除namenode的...
HIVE SQL cannot recognize input near ‘(‘ ‘select‘ ‘uid‘ in joinSource
weixin_45759139的博客
02-08 6851
HIVE SQL cannot recognize input near '(' 'select' 'uid' in joinSource 排除子查询少别名的问题后，另一个可能
hive报错：SQL 错误 [40000] [42000]
lingdong69的博客
07-21 2万+
SQL 错误 [40000] [42000]hive报错：SQL 错误 [40000] [42000] hive报错：SQL 错误 [40000] [42000] SQL 错误 [40000] [42000]: Error while compiling statement: FAILED: ParseException line 2:11 mismatched input ‘unsigned’ expecting ) near ‘int’ in create table statement 错误信息提示：
HIVE 常见问题：Both left and right aliases encountered in JOIN'*' 以及 cannot recognize input near in sub
Keepdream的博客
12-13 7264
最近在使用HIVE的时候，在Spark上面其实还没有出错，但是一迁移到HIVE上运行，就会报错。首先报了一个cannot recognize的错误。后来经过解决发现又有其他错误，这些错误主要也是两者解释SQL的方式上面有所不同吧。 cannot recognize 这个错误主要由于每一个子查询最好是能够有别名，所以在select * from (select * from table_name...
Hive常见错误
大数据开发Boy
10-08 3426
[Error 10070]: CREATE-TABLE-AS-SELECT cannot create external table (state=42000,code=10070) [Error 10146]: Cannot truncate non-managed table external_emp01. (state=42000,code=10146)
24年某马最新分布式SQL计算 Hive 语法与概念PPT
12-12
分布式SQL计算引擎，特别是Hive的语法和概念，为处理和分析大数据提供了便利。 首先，理解数据仓库和数据库之间的区别是关键。数据库主要用于操作型处理，也就是OLTP（On-Line Transaction Processing），它面向...
二百二十一、Hive——HQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
tiantang2renjian的博客
01-30 1141
Hive——HQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
hive -e 出现cannot recognize input nearXXX
热门推荐
后知后觉的it路
04-18 4万+
    做接口平台，将 hive sql放在shell里，用   hive -e "'     select xxx, concat_ws(",",collect_set(字段))  字段  from tablexxx; "   报  FAILED: ParseException line cannot recognize input near ',' ',' 'collect...
使用Hive进行join查询的时报错
04-23
NULL 博文链接：https://weigang-gao.iteye.com/blog/2260663
hive sql 离奇识别不了？
weixin_47787261的博客
02-27 1578
select t.app_type, t.cnt, (cast(t.cnt as double)/cast(all.all_count as double)) as percent from ( select app_type, count(*) as cnt from xxx where dt='2022-02-26' .
Hive 报错：Error: Error while compiling statement: FAILED: ParseException line 1:7 Failed to recognize
三妹的博客
09-12 3万+
执行hive SQL 语句“select out from XXX ” 时报错如下： Error: Error while compiling statement: FAILED: ParseException line 1:7 Failed to recognize predicate 'out'. Failed rule: 'identifier' in table or column ...
Hive:Error while compiling statement: FAILED: ParseException cannot recognize input near '<EOF>' '<
三妹的博客
12-16 1万+
一、Hive SQL 报错如下： Error: Error while compiling statement: FAILED: ParseException line 79:17 cannot recognize input near '<EOF>' '<EOF>' '<EOF>' in subquery source (state=42000,code=4...
hive数据库中有关半角符使用报错
qq_45635773的博客
08-18 2129
hive中使用分号踩过的坑
hive sql表中敏感字段查询报ParseException错误
爱折腾的小土豆的博客
07-02 1579
hive sql表中敏感字段查询报cannot recognize input near ‘time’ ‘string’ ‘,’ in column name or constraint 解决方法： 在sql中把这个敏感字段加反引号解决
Hive/MySql 踩坑
sunwenxu的博客
07-08 2117
在使用hive 需要配置元数据存储在mysql中，来解决不能多连接的问题 数据库的名称 1）不能含有" . " 2）不要以数字开始
Hive建表异常cannot recognize input near ')' 'row' 'format' in column specification
时间静止
11-05 3万+
有问题的建表语句 hive> create table tb_emp0 > ( > id int, > name string, > ) > row format delimited > fields terminated by ','; 错误信息 NoViableAltException(307@[]) ...
cannot recognize input near ‘,‘ ‘deviceid‘ ‘,‘ in expression specification
life is short,I love data analysis的博客
01-11 3170
解决sql脚本在shell中报错问题
hive+insert报错
最新发布
12-13
在使用Hive进行数据插入操作时，可能会遇到各种错误。以下是一些常见的错误及其解决方法： 1. **权限问题**： - **错误信息**：`Permission denied: user=xxx, access=WRITE, inode="/user/hive/warehouse/xxx.db/xxx":hive:hive:drwxr-xr-x` - **解决方法**：确保当前用户对目标表所在的HDFS目录具有写权限。可以使用以下命令授予权限： ```bash hdfs dfs -chmod -R 777 /user/hive/warehouse/xxx.db/xxx ``` 2. **表不存在**： - **错误信息**：`Table or view not found: xxx` - **解决方法**：确认表名是否正确，并且该表确实存在于当前数据库中。可以使用以下命令查看当前数据库中的表： ```sql SHOW TABLES; ``` 3. **数据类型不匹配**： - **错误信息**：`Cannot insert into target table because column number/types are different` - **解决方法**：确保插入的数据类型与目标表的列类型匹配。可以使用`DESCRIBE`命令查看表的结构： ```sql DESCRIBE xxx; ``` 4. **数据格式问题**： - **错误信息**：`Invalid data found in file` - **解决方法**：检查插入的数据格式，确保数据格式与表的定义一致。例如，如果表定义为`STRING`类型，但插入的数据包含非字符串字符，就会报错。 5. **资源不足**： - **错误信息**：`Too many counters` - **解决方法**：检查集群资源使用情况，确保有足够的资源进行插入操作。可以尝试减少并行任务数量或增加集群资源。 6. **语法错误**： - **错误信息**：`Syntax error` - **解决方法**：检查SQL语句的语法，确保语法正确。例如，使用`INSERT INTO`或`INSERT OVERWRITE`时，确保语句格式正确。 以下是一个示例，展示了如何正确使用`INSERT`语句进行数据插入： ```sql INSERT INTO table_name (column1, column2, column3) VALUES ('value1', 'value2', 'value3'); ```
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值