clickhouse----高阶函数 JSON解析日志数据导入hive 事件漏斗

最新推荐文章于 2024-06-26 13:40:07 发布

T D Z

最新推荐文章于 2024-06-26 13:40:07 发布

阅读量3.1k

点赞数 1

分类专栏： clickhouse

本文链接：https://blog.csdn.net/weixin_51077563/article/details/110848088

版权

本文介绍了ClickHouse中的高阶函数，如arrayMap，以及字符串处理函数splitByString和concat。接着讨论了JSON处理，包括visitParamHas、visitParamExtractString和JSONExtract。还提到了Enum类型，并分享了两种将日志数据导入Hive ODS的方法。最后，展示了如何利用windowFunnel进行事件漏斗分析。

摘要由CSDN通过智能技术生成

一. 高阶函数

方法: 是一段逻辑代码的封装,实现功能,代码的重复使用,方便调用方法是对象的一部分

函数:是一段逻辑代码的封装,实现功能,代码的重复使用,方便调用函数比方法高级,可以作为一个特殊的对象单独存在

function f (int a , int b){

return a*b    --a*b在方法中就是a*b , a+b在方法中就是a+b

}

public int opt(int a , int b , f){

return f(a,b)

}

}

arrayMap是一个高级函数参数一是一个函数参数二是一个数组

select arrayMap(x->x*x , [1,2,3,4]);

┌─arrayMap(lambda(tuple(x), multiply(x, x)), [1, 2, 3, 4])─┐
│ [1,4,9,16]                                               │
└──────────────────────────────────────────────────────────┘

二. 字符串函数

1. splitByString() 字符串切割

select splitByString(',' , 'hello,tom');  --切割成一个数组

┌─splitByString(',', 'hello,tom')─┐
│ ['hello','tom']                 │
└─────────────────────────────────┘

2. concat() 字符串拼接

select concat('hello' , 'tom');   --拼接成一个字符串

┌─concat('hello', 'tom')─┐
│ hellotom               │
└────────────────────────┘

三. JSON

-- 在CH中建表 
create table tb_json(cont String) engine=Log ;

insert into  tb_json values('{"movie":"1207","rate":"4","timeStamp":"978300719","uid":"1"}')...

┌─cont──────────────────────────────────────────────────────────┐
│ {"movie":"1207",