原因出现问题
因为我们的maxwell对接rabbitmq rabbitmq监听的是mysql的belog日志文件，所以mysql数据的实时操作都会同步数据到maxwell中
从而导致新增插入一条，修改插入一条，删除插入一条，导致同一条数据有大量的重复数据。
解决方案
在仪表板调用统计相关接口之前，先将重复数据处理掉
OPTIMIZE TABLE table_name FINAL
这样就可以根据order by (uuid) 的uuid去掉重复数据，保留最新的一条数据
相关推荐
longxibo2 天前
【Ubuntu datasophon1.2.1 二开之八：验证实时数据入湖】阿坤带你走近大数据11 天前
ClickHouse的介绍南修子13 天前
【Flink 30天】Day24-27 实时数仓规范：ODS→DWD→DWS→ADS 分层 + Temporal Join + 生产最佳实践l1t1 个月前
DeepSeek总结的用Parquet从 ClickHouse 迁移至 CedarDB查询longxibo1 个月前
【Ubuntu datasophon1.2.1 二开之六：解决CLICKHOUSE安装问题】l1t1 个月前
在python 3.14 容器中安装和使用chdb包linweidong1 个月前
别让老板等：千人并发下的实时大屏极致性能优化实录Paraverse_徐志斌1 个月前
基于 Kafka + Flink + ClickHouse 电商用户行为实时数仓实践李兆龙的博客1 个月前
从一到无穷大 #62 ClickHouse 加速机制持久化格式拆解