使用StreamLoad向Doris-4.0.3版本的聚合表导数据超时问题

最近将Doris环境的版本从2.1.5升级到4.0.3,升级后验证功能是否都正常时发现使用streamload方式向一张聚合表批量导入数据时会超时ReadTimeOut, 表结构如下

sql 复制代码
CREATE TABLE `instantaneous` (
  `interval` bigint NOT NULL COMMENT "统计区间(年月日)",
  `org_id` varchar(32) NULL DEFAULT "" COMMENT "工厂ID",
  `device_code` varchar(64) NULL COMMENT "设备编码",
  `point_name` varchar(128) NULL COMMENT "点位名称",
  `max_value` decimal(21,5) MAX NULL COMMENT "最大值",
  `min_value` decimal(21,5) MIN NULL COMMENT "最小值",
  `avg_value` decimal(21,5) REPLACE_IF_NOT_NULL NULL COMMENT "平均值",
  `diff_value` decimal(21,5) REPLACE_IF_NOT_NULL NULL COMMENT "累计型点位为当天的差值",
  `instantaneous` varchar(64) REPLACE NULL COMMENT "瞬时值",
  `last_update_time` datetime REPLACE NULL COMMENT "最后修改时间"
) ENGINE=OLAP AGGREGATE KEY(`interval`, `org_id`, `device_code`, `point_name`)
DISTRIBUTED BY HASH(`interval`) BUCKETS AUTO;

一开始怀疑是httpclient的问题,尝试过将http请求由hutool的HttpRequest换成HttpURLConnection、okHttp和apache的httpclient都不行,甚至还手动用apifox客户端发起请求,也是以失败告终。

为了不长时间影响业务,将streamload方式改为insert into方式批量插入。

然后在测试环境下尝试将上述的表改为UNIQUE模型的表,居然没有问题,也不知道是怎么回事。

相关推荐
东方护航数据恢复(深圳)1 分钟前
勒索病毒加密数据库怎么办?深圳 0 赎金解密恢复实录【东方护航数据恢复深圳店】
数据库·数据恢复·服务器数据恢复·勒索病毒·数据镜像
倔强的石头_3 分钟前
应用账号最小权限实践:读写账号、报表账号、运维账号分层
数据库
苦瓜打怪兽6 分钟前
PostgreSQL 报错“字段 datlastsysoid 不存在”排查与解决
数据库·postgresql
2401_8724187821 分钟前
Windows服务器:错误 403 - 禁止访问:本地 FTP 上传文件到网站服务器后提示无访问权限
运维·服务器·windows
XLYcmy29 分钟前
PDF 论文处理器 — 技术报告文档
数据库·python·网络安全·pdf·embedding·dify·rag
吴声子夜歌37 分钟前
Nginx应用与运维——Nginx在Kubernetes中的应用(二)
运维·nginx·kubernetes
ShineWinsu1 小时前
对于Redis:RDB持久化的解析
linux·数据库·redis·缓存·面试·持久化·rdb
做运维的阿瑞1 小时前
MYSQL从语义到执行计划:UNION、EXISTS、IN 的深度辨析
数据库·sql·mysql
Ruiery9 小时前
Linux 6.6内核 CPU 深度解析(七):调度器启动 — 从单核到多核,调度器分阶段点亮
linux·运维·服务器
50万马克的面包9 小时前
CSDN-栈队列数组-知识点整理
linux·运维·服务器