FlinkSql（二）API使用-transform

最新推荐文章于 2023-08-18 17:24:27 发布

我是星星我会发光i

最新推荐文章于 2023-08-18 17:24:27 发布

阅读量231

点赞数

分类专栏：大数据生态圈 Flink 文章标签： flink

我是星星我会发光

本文链接：https://blog.csdn.net/weixin_43233971/article/details/107887833

版权

大数据生态圈同时被 2 个专栏收录

19 篇文章 1 订阅

订阅专栏

Flink

13 篇文章 0 订阅

订阅专栏

这个算子可以说是很多的，查看官方文档即可https://ci.apache.org/projects/flink/flink-docs-release-1.11/dev/table/tableApi.html#column-operations

这个是从flink官网整下来的，需要什么找那个就行

// environment configuration
// ...

// specify table program
val orders: Table = tEnv.from("Orders") // schema (a, b, c, rowtime)

val result: Table = orders
        .filter($"a".isNotNull && $"b".isNotNull && $"c".isNotNull)
        .select($"a".lowerCase() as "a", $"b", $"rowtime")
        .window(Tumble over 1.hour on $"rowtime" as "hourlyWindow")
        .groupBy($"hourlyWindow", $"a")
        .select($"a", $"hourlyWindow".end as "hour", $"b".avg as "avgBillingAmount")

    val resultTable: Table = sensorTable
    //在调用方法时字段更加推荐'ziduan的方式进行编写
      .select('id, 'temp)
      .filter('id === "sensor_1")
    // 4.2 聚合转换（聚合我们的习惯是groupBy写在后边，但是编写代码先分组后查询）
    val aggResultTable: Table = sensorTable
      .groupBy('id)
      .select('id, 'id.count as 'count)