Clickhouse进阶分组复合排序查询

group by分组后的字段聚合查询:

groupArray:分组聚合

arrayJoin:分组拆分

arraySort:自定义排序

arrayFilter:中间值过滤

对数据中的特殊字符串进行替换,并根据分隔符进行切割,过滤掉为空的数组数据,对数据元素进行排序,在用分隔符拼接。

sql 复制代码
arrayStringConcat(  arraySort(   arrayDistinct(  arrayFilter(o -> o != '' , splitByChar(';',   assumeNotNull(REPLACE(POOR_APP_CATEGORY, ',', ';'))) )   )  ) , '; ' ) as "质差应用"

arraySort支持自定义排序

参数 1:lambda表达式,- 表示!asc排序方式

参数 2:数组

参数 3:权值顺序

sql 复制代码
select arraySort((x, y) -> y, arrayDistinct(  arrayFilter(o -> o != '' , splitByChar(';', '优;中;差'))), [0, 1, 2]);
['优','中','差']
select arraySort((x, y) -> - y, arrayDistinct(  arrayFilter(o -> o != '' , splitByChar(';', '优;中;差'))), [0, 1, 2]);
['差','中','优']

max、argMax、argMin函数:获取某个列维度,对应的那一行数据。

获取时间最新的预警数据:

sql 复制代码
    select PREWARN_ID,
           max(CREATE_DATE),
           argMax(END_DATE, CREATE_DATE) as END_DATE,
           argMax(CHECK_DATE, CREATE_DATE) as CHECK_DATE,
           argMax(STATUS, CREATE_DATE) as STATUS,
           argMax(MODIFY_USER, CREATE_DATE) as MODIFY_USER,
           argMax(WARN_TIMES, CREATE_DATE) as WARN_TIMES,
           MAX(RANK) as RANK, MAX(CITY) as CITY
    from ADO_SA_OVERSEA_BUSINESS.T_PRE_WARNING_STATUS
    group by PREWARN_ID 
    HAVING STATUS = 0
    ORDER BY WARN_TIMES, CHECK_DATE, PREWARN_ID;

注意点:

该函数取不到null,会根据列维度排序,取最大(小)的不为空数据,所以请考虑数据中是否有null数据。

如果有,建议使用 如下判断数据的形式进行规避

sql 复制代码
select argMax(if(STATUS is null, '', STATUS), CREATE_DATE) as STATUS
相关推荐
陈年老古董1 天前
ClickHouse 单机搭建记录
hive·笔记·学习·clickhouse·硬件架构
pjj198545 天前
ClickHouse 与 Doris 数据库技术梳理:看懂分析型数据库
数据库·clickhouse
SelectDB技术团队5 天前
ClickHouse 支持存算分离吗?Doris 社区版原生存算分离怎么落地
数据库·clickhouse·云原生·开源·apache doris·技术选型·存算分层
SelectDB技术团队6 天前
ClickHouse SQL 好学吗?从 MySQL 迁移 Doris 的完整兼容验证
人工智能·sql·mysql·clickhouse·开源·apache doris·增量计算
喵了几个咪7 天前
GoWind UBA 拆解:把 Doris UNIQUE KEY 翻译成 ClickHouse——读数正确性对齐实录
开发语言·后端·clickhouse·微服务·golang·gowind
爱吃火鸡面呀7 天前
MySQL、ClickHouse、Doris、Hive、Spark SQL、Flink SQL 选型对比:优点、缺点与面试话术
hive·mysql·clickhouse
SelectDB技术团队10 天前
SelectDB 架构演进与 ClickHouse 迁移指南
大数据·数据库·clickhouse·云原生·架构·数据分析·apache doris
ClickHouseDB11 天前
使用 ClickHouse 与 Massive 构建实时市场数据应用
clickhouse
秉寒-CHO11 天前
从 ClickHouse 到 StarRocks:我在真实业务中怎么选明细、聚合、主键模型
大数据·clickhouse
IT界的老黄牛12 天前
ClickHouse 运维 SQL 速查:system 表查跑批、内存、合并与磁盘一篇通
大数据·clickhouse·磁盘占用·命令速查·运维排查·system表