基于ODPS解析字段值为JSON的情况

于 2024-06-26 15:56:20 发布
阅读量316 收藏
点赞数 1
分类专栏： 真 · 解决问题 · 小知识 文章标签： odps json oracle
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/flash_love/article/details/139991546
版权

最近在使用ODPS数据库，其中一个字段他是用JSON存储的，但是我是需要JSON字符串中的一个属性值就行，刚好ODPS中有一个函数可以用来使用!

使用案例

select GET_JSON_OBJECT('{"id":1,"name":"xiaobai"}','$.name');

结果

_c0
小白
枫叶梨花
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
odps编写UDF 利用Gson提取JSON
iamiman的博客
03-14 4383
利用阿里云ODPS平台解析json字符串。需要导入官方的MAVEN骨架，使用GSON包编写UDF，从json字符串中提取对象属性，计算所有对象属性的均值和方差，并且解决unterminated object问题。
SQL 多个字段的值拼接成Josn
weixin_43946756的博客
12-02 2224
语法结构如下： 注意多个字段不要换行， 仔细看最后一个字段的格式 SELECT ColumnName1, CONCAT('{anytName:"', yourColumnName, '", anyName:"', yourColunName, '"}') as ext FROM TableName GROUP BY ColumnName1; 执行结果如下图： ...
odps SQL解析json对象的一些问题
qq_40772429的博客
10-13 2379
例如一个json就是一个界面，有多个shop；一个shop有多个product；每个product都有一个title。我们该如何获取所有shop的所有product的title呢？这就需要探讨第二个问题了。后面可以再用lateral view展开。但上述代码返回的是一个数组型的。odps同样也提供了一个函数。通过上述代码可以将返回的。
利用DataWorks 中的odpspy3提取JSON中的信息
最新发布
weixin_46051319的博客
05-29 249
利用DataWorks 中的odpspy3提取JSON中的信息
odps GET_JSON_OBJECT函数获取嵌套json
nisemono_ct的博客
02-28 1222
odps获取嵌套json数据解决方案，踩坑解决方案
ODPS SQL 拆解json字段
在服务器上挂载OSS_bucket
01-07 3666
1.切分包含数组和json字符串 #1.原始info字段的数据: [ {"num":1,"name":"Lisa","score":90}, {"num":2,"name":"Melody","score":80} ] #2.解析代码: select distinct b.id, b.info, GET_JSON_OBJECT(b.info,'$.id') as id, GET_JSON_OBJECT(b.info,'$.name') as name, GET_JSON_OBJE
json数组解析
huobumingbai1234的博客
10-18 824
工作中会有这样的数据类型,需要规则化的解析出来方便下游使用 解析如下： select crawler_data_time ,nav ,model ,author_id ,nick_name ,follower_num ,create_time ,get_json_object(concat('{',report_1,'}'),'$.distribution_key') as distribution_key ,get_json_object(concat('.
解析阿里云大数据服务——ODPS
02-21
基于飞天的ODPS，对内是阿里集团30多个事业部唯一的大数据处理平台；对外，以RESTfulAPI对外提供数据仓库、数据挖掘和其他数据应用服务。阿里云总裁王文彬为之站场，称其为“中国进入大数据时代的里程碑”。阿里云有...
Java连接ODPS文档和代码
07-14
Java连接ODPS（MaxCompute）是一项关键的技能，特别是在大数据处理和分析的场景下。ODPS，即阿里云的大数据处理服务MaxCompute，是企业级的海量数据处理平台，提供了SQL、API等多种方式进行数据操作。Java SDK是ODPS...
ODPS技术架构及应用实践
01-30
ODPS是分布式的海量数据处理平台，提供了丰富的数据处理功能和灵活的编程框架。本文从ODPS面临的挑战、技术架构、Hadoop迁移到ODPS、应用实践注意点等方面带领我们初步了解了ODPS的现状与前景。 ODPS是分布式的海量...
odps（MaxCompute） 权威详尽说明帮助手册
06-09
本权威详尽的帮助手册旨在深入解析ODPS的核心功能、底层优化原理以及实际操作中的各种细节，帮助用户充分利用这一工具进行大规模数据分析。 在前言部分，作者李妹芳可能对编写此手册的目的和背景进行了简要介绍，...
odps传大文件到oss上_JSON数据从OSS迁移至MaxCompute
weixin_39636987的博客
12-31 186
{"type": "job","steps": [{"stepType": "oss","parameter": {"fieldDelimiterOrigin": "^","nullFormat": "","compress": "","datasource": "OSS_userlog","column": [{"name": 0,"type": "string","index": 0}],"s...
【ODPS新品发布第2期】实时数仓Hologres：推出计算组实例/支持JSON数据/向量计算+大模型等新能力
科技很有意思
09-22 152
阿里云ODPS系列产品以MaxCompute、DataWorks、Hologres为核心，致力于解决用户多元化数据的计算需求问题，实现存储、调度、元数据管理上的一体化架构融合，支撑交通、金融、科研、等多场景数据的高效处理，是目前国内最早自研、应用最为广泛的一体化大数据平台。
阿里云大数据实战记录8：拆开 json 的每一个元素，一行一个
明而决之
08-29 1503
本文分别通过 pgsql、ODPS SQL 和 MySQL 三种 SQL 语法进行 json 类型的处理。其中，使用 pgsql 处理方式最简单且简洁，而 ODPS SQL 最复杂，中间进行了多次数据类型的变更，甚至还需要使用一种更少见的数据类型 map 类型来辅助处理；而 MySQL 则处于二者之间。
ODPS 常用命令汇总
wwHRestarting的博客
04-06 8114
1.切换工程：use projectName; 2.查看工程下的所有表：list tables; 3.查看表的分区：ls partition tableName; 4.查找分区的数据：select *from tableName where partitionName=$partitionValue; 5.get_json_object(src,value)  : select poi
ODPS核心接口
integrity
01-04 3529
转载自：http://www.aiwanba.net/plugin/odps-doc/prddoc/odps_security/index.html ODPS SDK介绍 在本小节，我们仅会对较为常用的ODPS核心接口做简短介绍，更多详细信息请参阅SDK Java Doc。 AliyunAccount 阿里云认证账号。输入参数为accessId及accessKe
【Hive】解析json（get_json_object）
热门推荐
喜东东的博客
05-25 20万+
get_json_object(string json_string, string path) 说明： 第一个参数填写json对象变量，第二个参数使用$表示json变量标识，然后用 . 或 [] 读取对象或数组；如果输入的json字符串无效，那么返回NULL。 每次只能返回一个数据项。 举例： data 为 test表中的字段，数据结构如下： data = { "store": ...
一些 odps sql技巧
yichudu
05-24 6616
日期行为汇总 有张表为pv_daily_table, 在不同partitionds 中记录每篇内容每日的pv, 那么想汇总每篇内容近3日, 近7日的pv, 就可以用下面的sql. SELECT content_id , SUM(IF(ds = '${ds}', pv, 0)) AS today_pv -- 当日pv , SUM(IF(ds > '${ds3...
odps解析json数组
04-27
您可以使用ODPS的内置函数 `json_tuple()` 来解析JSON数组。 `json_tuple()` 函数可以将JSON字符串解析为多个字段，并支持嵌套的JSON对象和数组。 例如，假设您有一个名为 `test_table` 的表，其中包含一个名为 `json_array` 的JSON数组列。您可以使用以下查询来解析该列并获取其中一个元素的值： ``` SELECT json_tuple(json_array, '$[0]') AS element FROM test_table; ``` 在此查询中，`json_array` 是要解析的JSON数组列的名称，`$[0]` 是要获取的数组元素的索引。 `json_tuple()` 函数将返回一个包含解析后的元素值的新列，该列的名称由 `AS` 子句中的别名指定。 您也可以使用类似的查询来解析嵌套的JSON数组或对象。只需在 `json_tuple()` 函数的第二个参数中提供相应的路径即可。 注意： `json_tuple()` 函数仅适用于JSON格式的数据。如果您的列中包含其他格式的数据，可能需要使用其他函数进行解析。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值