阿里云DataWorks--odps常见报错及解决方案

本文用于记录工作中,阿里云DataWorks–odps常见报错及解决方案,欢迎分享。
注:其中ODPS SQL 和ODPS Script具体用法略有差异,执行相同sql任务,可能会报错。
1、未指定查询分区,全表扫描,查看表是否有分区表未指定分区

FAILED: ODPS-0130071:[0,0] Semantic analysis exception - physical plan generation failed: java.lang.RuntimeException: Table(空间名,表名) is full scan with all partitions, please specify partition predicates.

2、没有权限 --涉及公司对部分用户、表权限问题,找公司领导申请权限,此处是用户没有某张表的访问权限

FAILED: ODPS-0130013:Authorization exception - Authorization Failed [4002], You don’t exist in project 空间名. Context ID:d01f0bae-d27d-41ad-819a-c4e5ab8f4315. —>Tips: CurrentProject:空间名; Pricipal:RAM$ascm-org-1613957221881:用户名; No permission ‘odps:Select’ on resource acs:odps:*:projects/空间名/tables/表名

3、没有表,检查表是否未创建

FAILED: ODPS-0130131:Table not found - ‘空间名.表名’ table not found

4、字段别名错误,检查表别名、字段别名、字段名是否一致,此处是b.zjlxz字段找不到

FAILED: ODPS-0130071:[89,7] Semantic analysis exception - column b.zjlx cannot be resolved

5、标点符号中英文错误,此处是语句结尾的“;”用的中文导致报错

FAILED: ODPS-0130161:[1,1] Parse exception - invalid token ’ ’

6、同一任务,执行多个查询语句(ODPS Script不支持同时执行两句以上select语句)

FAILED: ODPS-0130071:[28,1] Semantic analysis exception - only one screen printing statement is allowed

7、ODPS Script不支持查看建表语句(show create table ),可以在ODPS SQL中执行

FAILED: ODPS-0130071:[1,1] Semantic analysis exception - invalid statement or wrong position, valid sequence is [SET …], [DDL] then DML

8、UDTF报错,(本错误为执行explode函数时,旁边跟有别的字段导致报错),可参考explode函数的说明,将其作为临时视图使用。

FAILED: ODPS-0130071:[1,1] Semantic analysis exception - only a single expression in the SELECT clause is supported with UDTF’s

eg:

SELECT  tmp.class
        ,b.name
FROM    (
            SELECT  '1班' class
                    ,'张三,李四,王五' name
        ) tmp
LATERAL VIEW explode(split(name,',')) b AS name
;
-- 执行结果:
-- class	name
-- 1班	张三
-- 1班	李四
-- 1班	王五

9、脚本中含有字符‘$’导致解析异常,一般是任务需要获取参数,比如工作中需要指定运行环境生产、测试环境,或者指定运行日期之类的

FAILED: ODPS-0130161:[1,59] Parse exception - invalid token ‘$’

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
阿里云大数据计算服务MaxCompute(原ODPS)是一种云端大数据处理和分析服务,它提供了一个高效、安全和稳定的SQL引擎,用于处理和分析大规模数据。 MaxCompute的SQL使用指南如下: 1. 创建表:使用CREATE TABLE语句创建表,指定表的名称、列名和数据类型。 2. 插入数据:使用INSERT INTO语句将数据插入到表中,可以一次插入多行数据。 3. 查询数据:使用SELECT语句从表中查询数据,可以使用条件语句、排序和聚合函数进行筛选和处理。 4. 更新数据:使用UPDATE语句更新表中的数据,可以根据条件对指定的行进行更新。 5. 删除数据:使用DELETE语句删除表中的数据,可以根据条件删除指定的行。 6. 表连接:使用JOIN语句将多个表连接在一起,根据指定的关联条件进行数据的查询和分析。 7. 数据转换:通过使用转换函数,将数据在不同的数据类型之间进行转换,如字符串转换为日期、数字转换为字符串等。 8. 数据分组:使用GROUP BY语句将数据按照指定的列进行分组,然后对每个分组进行聚合操作,如计算平均值、求和等。 9. 数据排序:通过使用ORDER BY语句对查询结果按照指定的列进行排序,可以按照升序或降序排列。 10. 数据统计:使用聚合函数,如COUNT、SUM、AVG等对查询结果进行统计分析,可以获取总数、求和、平均值等数据。 11. 数据分区:使用PARTITION BY子句将表数据划分成多个分区,可以加快查询和分析的速度。 总之,MaxCompute提供了强大的SQL功能,可以方便地对大规模数据进行处理、分析和洞察,帮助用户更好地进行数据驱动的决策和业务创新。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值