使用StreamLoad向Doris-4.0.3版本的聚合表导数据超时问题

最近将Doris环境的版本从2.1.5升级到4.0.3,升级后验证功能是否都正常时发现使用streamload方式向一张聚合表批量导入数据时会超时ReadTimeOut, 表结构如下

sql 复制代码
CREATE TABLE `instantaneous` (
  `interval` bigint NOT NULL COMMENT "统计区间(年月日)",
  `org_id` varchar(32) NULL DEFAULT "" COMMENT "工厂ID",
  `device_code` varchar(64) NULL COMMENT "设备编码",
  `point_name` varchar(128) NULL COMMENT "点位名称",
  `max_value` decimal(21,5) MAX NULL COMMENT "最大值",
  `min_value` decimal(21,5) MIN NULL COMMENT "最小值",
  `avg_value` decimal(21,5) REPLACE_IF_NOT_NULL NULL COMMENT "平均值",
  `diff_value` decimal(21,5) REPLACE_IF_NOT_NULL NULL COMMENT "累计型点位为当天的差值",
  `instantaneous` varchar(64) REPLACE NULL COMMENT "瞬时值",
  `last_update_time` datetime REPLACE NULL COMMENT "最后修改时间"
) ENGINE=OLAP AGGREGATE KEY(`interval`, `org_id`, `device_code`, `point_name`)
DISTRIBUTED BY HASH(`interval`) BUCKETS AUTO;

一开始怀疑是httpclient的问题,尝试过将http请求由hutool的HttpRequest换成HttpURLConnection、okHttp和apache的httpclient都不行,甚至还手动用apifox客户端发起请求,也是以失败告终。

为了不长时间影响业务,将streamload方式改为insert into方式批量插入。

然后在测试环境下尝试将上述的表改为UNIQUE模型的表,居然没有问题,也不知道是怎么回事。

相关推荐
kk”6 小时前
Linux的组和权限管理
linux·运维·服务器
智购科技智能售货柜7 小时前
2026自动售货机整机可靠性测试:从高低温交变到EMC电磁兼容的认证工程实践~YH
运维·服务器·数据库·人工智能·物联网
ltl7 小时前
RocksDB 架构演进:相对 LevelDB 的 diff 地图
数据库
ltl7 小时前
存储读取性能优化:索引、Bloom Filter 与读放大
数据库
酒神dnspup8 小时前
CDN 回源检测怎么做?用 DNSPup 验证节点命中、源站暴露与多地可用性
运维·服务器·网络·网络协议·tcp/ip
Rain的Java大神之路9 小时前
短信接口被狂刷怎么处理
java·运维·后端·web安全·面试·架构·xss
江南风月9 小时前
3分钟快速上手日志审计系统 WGLOG v2.2 更新了什么
运维·服务器·网络
孙克旭_9 小时前
Docker 镜像构建|Vue+SpringBoot+Go 多语言项目 Dockerfile 案例
linux·运维·vue.js·spring boot·docker·dockerfile
接口不宕机10 小时前
外贸公司实战:利用 1688API 自动化监控竞品价格,解决采购定价痛点
运维·自动化