Apache Doris 4.0.3 版本正式发布

亲爱的社区小伙伴们,**Apache Doris 4.0.3 版本已正式发布。** 此版本新增了在 AI & Search、湖仓一体、查询引擎等方面的能力,并同步进行了多项优化改进及问题修复,欢迎下载体验!

新增功能

  • 添加倒排索引 NORMALIZER 支持
  • 实现类似 ES 的布尔查询
  • 为搜索函数引入 lucene 布尔模式

湖仓一体

  • 支持通过 AwsCredentialsProviderChain 加载 Catalog 凭证
  • 支持使用 OSSHDFS 存储的 Paimon DLF Catalog
  • 为 Iceberg 表添加 manifest 级别缓存

查询引擎

  • 支持 INTERVAL 函数并修复 EXPORT_SET
  • 支持 TIME_FORMAT 函数
  • 支持 QUANTILE_STATE_TO/FROM_BASE64 函数

优化改进

  • 引入加载作业系统表
  • 使视图、物化视图、生成列和别名函数能够持久化会话变量
  • 将表查询计划操作接收的 SQL 添加到审计日志
  • 启用流式加载记录到审计日志系统表
  • 通过列裁剪优化复杂类型列读取
  • 兼容 MySQL MOD 语法
  • 为 sql_digest 生成添加动态配置
  • 使用 Youngs-Cramer 算法实现 REGR_SLOPE/INTERCEPT 以与 PG 对齐

问题修复

  • 修复 JdbcConnector 关闭时的 JNI 全局引用泄漏
  • 修复由于 BE 统计信息上传不及时导致 CBO 无法稳定选择同步物化视图的问题
  • 用默认的 JSONB null 值替换无效的 JSONB
  • 修复由于并发删除后端导致的 OlapTableSink.createPaloNodesInfo 空指针异常
  • 修复 FROM DUAL 错误匹配以 dual 开头的表名
  • 修复 BE 宕机时预热取消失败的问题
  • 修复当物化视图被 LimitAggToTopNAgg 重写但查询未被重写时物化视图重写失败的问题
  • 修复刷新时 lastUpdateTime 未更新的问题并添加定时刷新日志
  • 修复 hll_from_base64 输入无效时的崩溃问题
  • 修复带表达式的加载列映射的敏感性问题
  • 修复删除表时未删除约束相关信息的问题
  • 修复 parquet topn 延迟物化复杂数据错误结果
  • 始终创建数据和索引页缓存以避免空指针
  • 修改 tablet cooldownConfLock 以减少内存占用
  • 修复读取 parquet footer 时缺失 profile 的问题
  • 修复 Exception::to_string 中潜在的释放后使用问题
  • 修复浮点字段 to_string 问题
  • 修复读取 hudi parquet 导致 BE 崩溃的问题
  • 修复 Kerberos 认证配置检测
  • 修复空表下的同步失败问题
  • 修复 parquet 类型未处理 float16 的问题
  • 修复 BM25 LENGTH_TABLE 范数解码问题
  • 避免某些日期类函数的误报
相关推荐
莫爷1 天前
JSON 性能优化实战:大数据量 JSON 的处理技巧
性能优化·json·apache
D愿你归来仍是少年1 天前
Flink 并行度变更时 RocksDB 状态迁移的关键机制与原理
大数据·flink·apache
荒古前1 天前
Spring Boot + MyBatis 启动报错:不允许有匹配 “[xX][mM][lL]“ 的处理指令目标
spring boot·后端·mybatis
w1225h1 天前
IDEA搭建SpringBoot,MyBatis,Mysql工程项目
spring boot·intellij-idea·mybatis
没有bug.的程序员1 天前
Spring Boot 与 MyBatis-Plus 批量插入的生死狙击
java·spring boot·后端·mybatis·plus·批量插入
User_芊芊君子1 天前
大数据时代时序数据库选型指南:Apache IoTDB技术解析与实践建议
大数据·apache·时序数据库
SeaTunnel1 天前
Apache SeaTunnel 提速不难,JVM 参数这样调
jvm·apache
小马爱打代码1 天前
Apache HttpClient 核心设计模式详解
设计模式·apache
想你依然心痛1 天前
大数据时代时序数据库选型指南:Apache IoTDB 如何成为工业物联网的“数据底座“
大数据·apache·时序数据库
小江的记录本1 天前
【泛型】泛型:泛型擦除、通配符、上下界限定
java·windows·spring boot·后端·spring·maven·mybatis