clickhouse 查询group 分组最大值的一行数据。

按照 sql_finger_md5 分组取query_time_ms 最大的一行数据。
使用any函数可以去匹配到的第一行数据,所以可以先让数据按照query_time_ms 排序,然后再使用group by 和any结合取第一行数据,就是最大值的那一行数据。

select
  any (time) as time ,
  any (query_time_ms) as query_time_ms ,
  any (sqltext) as sqltext,
  any (inst_id) as inst_id,
  any (inst_name) as inst_name,
  any (dbname) as dbname,
  any (host_address) as host_address,
  any (lock_times) as lock_times,
  any (parse_row_counts) as parse_row_counts,
  any (return_row_counts) as return_row_counts,
  any (sql_finger) as sql_finger,
  sql_finger_md5,
  any (sqltext_md5) as sqltext_md5
FROM
  (
    SELECT
      inst_id,
      inst_name,
      dbname,
      execution_start_time as time,
      host_address,
      query_time_ms,
      sqltext,
      lock_times,
      parse_row_counts,
      return_row_counts,
      sql_finger,
      sql_finger_md5,
      sqltext_md5
    FROM
      cmdb.rds_all_slow_sql_record_distributed
    WHERE
      (
        execution_start_time >= toDateTime(1711079437) 
        AND execution_start_time <= toDateTime(1711684237) 
      )
      AND (dbname = 'leopard_admin')
      AND host_address  not like '%root%' AND host_address  not like '%bi_user%' AND sqltext  not like '%insert%'
    order by sql_finger_md5 desc,
      query_time_ms desc
  ) a
group by
  a.sql_finger_md5
order by query_time_ms desc
limit
  1000

窗体函数在数据量大的时候性能堪忧,在clickhouse中还有其他的处理方式。比如使用any()、anyLast()函数。

按官方文档的定义:any() “selects the first encountered value.”,也就是返回遇到的首个值,看上去是很符合当前的情况。但文档又做了说明:因为查询可能是以任意顺序执行的,并且可能每次执行得顺序都不同(如同我们上面的select * from user_order返回的行顺序不同),所以这个函数的执行结果可能是不确定的。如果要获得确定的值,可以使用“min”或者“max”。或者,select的对象的是一个已经排序过的子查询。

参考资料:
http://www.tracefact.net/tech/112.html

  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
基于C++、MFC的Windows安全管家系统,功能包括:病毒查杀、垃圾清理、内存优化、进程管理、开机启动项管理、软件卸载 C++是一种广泛使用的编程语言,它是由Bjarne Stroustrup于1979年在新泽西州美利山贝尔实验室开始设计开发的。C++是C语言的扩展,旨在提供更强大的编程能力,包括面向对象编程和泛型编程的支持。C++支持数据封装、继承和多态等面向对象编程的特性和泛型编程的模板,以及丰富的标准库,提供了大量的数据结构和算法,极大地提高了开发效率。12 C++是一种静态类型的、编译式的、通用的、大小写敏感的编程语言,它综合了高级语言和低级语言的特点。C++的语法与C语言非常相似,但增加了许多面向对象编程的特性,如类、对象、封装、继承和多态等。这使得C++既保持了C语言的低级特性,如直接访问硬件的能力,又提供了高级语言的特性,如数据封装和代码重用。13 C++的应用领域非常广泛,包括但不限于教育、系统开发、游戏开发、嵌入式系统、工业和商业应用、科研和高性能计算等领域。在教育领域,C++因其结构化和面向对象的特性,常被选为计算机科学和工程专业的入门编程语言。在系统开发领域,C++因其高效性和灵活性,经常被作为开发语言。游戏开发领域中,C++由于其高效性和广泛应用,在开发高性能游戏和游戏引擎中扮演着重要角色。在嵌入式系统领域,C++的高效和灵活性使其成为理想选择。此外,C++还广泛应用于桌面应用、Web浏览器、操作系统、编译器、媒体应用程序、数据库引擎、医疗工程和机器人等领域。16 学习C++的关键是理解其核心概念和编程风格,而不是过于深入技术细节。C++支持多种编程风格,每种风格都能有效地保证运行时间效率和空间效率。因此,无论是初学者还是经验丰富的程序员,都可以通过C++来设计和实现新系统或维护旧系统。3
### 回答1: 您好,针对您的问题,可以使用ClickHouse的"Group by"语句结合"First"函数来实现查询每一种分组的第一条数据。示例如下: ``` SELECT first(column1) as first_column1, first(column2) as first_column2, ... FROM table_name GROUP BY column1, column2, ...; ``` 其中,"column1"、"column2"等为需要分组的列,"first_column1"、"first_column2"等为每个分组的第一条数据对应的列。使用"first"函数可以获取每个分组的第一个值。 ### 回答2: ClickHouse是一个开源的列式数据库管理系统,用于大规模数据分析和处理。对于分组查询并获取每种分组的第一条数据,可以使用ClickHouse提供的窗口函数ROW_NUMBER()。 首先,使用GROUP BY子句按照需要分组的字段进行分组。然后,在SELECT语句中使用ROW_NUMBER()窗口函数来给每个分组的行进行编号。将分组字段与ROW_NUMBER()的结果组合成一个表达式,然后使用WHERE条件筛选出编号为1的行即可。 以下是一个示例查询语句: ```sql SELECT group_field, other_fields FROM ( SELECT group_field, other_fields, ROW_NUMBER() OVER (PARTITION BY group_field ORDER BY some_column) AS row_number FROM your_table GROUP BY group_field, other_fields ) AS subquery WHERE row_number = 1 ``` 其中,group_field表示用于分组的字段,other_fields表示除分组字段外的其他字段,your_table表示数据所在的表名,some_column表示用于指定排序顺序的列名。 通过以上查询,可以获取每一种分组的第一条数据。请根据实际情况调整查询语句中的字段名和表名等部分。 ### 回答3: ClickHouse是一个高性能的分布式列式数据库管理系统,可用于快速处理大规模数据。在ClickHouse中,要进行分组查询并获取每个分组的第一条数据,可以使用以下方法: 1. 使用GROUP BY子句将数据按指定的列进行分组。例如,假设有一个表t,有两个列a和b,需要按列a进行分组查询,可以使用如下语句: SELECT a, MIN(b) FROM t GROUP BY a 上述语句中使用了MIN函数来获取每个分组的最小值,即每个分组的第一条数据。 2. 使用子查询和JOIN操作。首先,在子查询中获取每个分组的第一条数据,然后将其与原表进行JOIN操作。例如,假设有一个表t,有两个列a和b,需要按列a进行分组查询,可以使用如下语句: SELECT t.a, t.b FROM t JOIN ( SELECT a, MIN(b) AS min_b FROM t GROUP BY a ) AS sub ON t.a = sub.a AND t.b = sub.min_b 上述语句中,子查询中获取每个分组的最小值组成的表sub,然后将其与原表t进行JOIN操作,从而得到每个分组的第一条数据。 以上是两种常用的方法,使用其中一种可以实现分组查询每一种分组的第一条数据。但需要注意的是,ClickHouse是一种分布式系统,数据存储在多个节点上,因此在使用GROUP BY进行分组查询时,可能需要考虑数据分片和数据复制的情况,以确保结果的准确性和性能的最优化。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值