使用StreamLoad向Doris-4.0.3版本的聚合表导数据超时问题

最近将Doris环境的版本从2.1.5升级到4.0.3,升级后验证功能是否都正常时发现使用streamload方式向一张聚合表批量导入数据时会超时ReadTimeOut, 表结构如下

sql 复制代码
CREATE TABLE `instantaneous` (
  `interval` bigint NOT NULL COMMENT "统计区间(年月日)",
  `org_id` varchar(32) NULL DEFAULT "" COMMENT "工厂ID",
  `device_code` varchar(64) NULL COMMENT "设备编码",
  `point_name` varchar(128) NULL COMMENT "点位名称",
  `max_value` decimal(21,5) MAX NULL COMMENT "最大值",
  `min_value` decimal(21,5) MIN NULL COMMENT "最小值",
  `avg_value` decimal(21,5) REPLACE_IF_NOT_NULL NULL COMMENT "平均值",
  `diff_value` decimal(21,5) REPLACE_IF_NOT_NULL NULL COMMENT "累计型点位为当天的差值",
  `instantaneous` varchar(64) REPLACE NULL COMMENT "瞬时值",
  `last_update_time` datetime REPLACE NULL COMMENT "最后修改时间"
) ENGINE=OLAP AGGREGATE KEY(`interval`, `org_id`, `device_code`, `point_name`)
DISTRIBUTED BY HASH(`interval`) BUCKETS AUTO;

一开始怀疑是httpclient的问题,尝试过将http请求由hutool的HttpRequest换成HttpURLConnection、okHttp和apache的httpclient都不行,甚至还手动用apifox客户端发起请求,也是以失败告终。

为了不长时间影响业务,将streamload方式改为insert into方式批量插入。

然后在测试环境下尝试将上述的表改为UNIQUE模型的表,居然没有问题,也不知道是怎么回事。

相关推荐
Elastic 中国社区官方博客几秒前
Elasticsearch 9.4 为 Elastic AI 生态系统的下一阶段提供支持:Dell AI Data Platform(与 NVIDIA 合作)
大数据·数据库·人工智能·elasticsearch·搜索引擎·ai·全文检索
预测模型的开发与应用研究2 分钟前
Oracle双库部署
数据库·oracle
想唱rap6 分钟前
传输层协议TCP
linux·运维·服务器·网络·c++·tcp/ip
m0_591364739 分钟前
JavaScript中Object-hasOwn作为现代安全检测方案
jvm·数据库·python
m0_6245785911 分钟前
html标签怎么避免标签嵌套错误_div不能放在p内原因【详解】
jvm·数据库·python
曦夜日长20 分钟前
Linux系统篇,权限(二):缺省权限、最终权限的计算、文件隔离的两种方式
linux·运维·服务器
霸道流氓气质27 分钟前
SpringAIAlibaba整合百炼平台实现多MCP Server调用示例及指定某MCP Server调用示例
数据库
2301_7693406734 分钟前
怎样导出用于负载测试的样本数据_LIMIT限制数据量提取
jvm·数据库·python
kebidaixu1 小时前
OK3568开发板更新Ubuntu22.04方法总结
linux·运维·服务器
2401_850491651 小时前
c++如何通过文件映射mmap在多进程间实现高性能数据共享【进阶】
jvm·数据库·python