kafka C++ 和 java端计算分区ID不一致排查

生产端使用C++,将std:string key 传入,parititon设为-1,表示让kafka自动计算分区id

java端拿到反序列化后的key string,通过murmur2 算法计算出的分区id和kafka分配的分区id不一致

根本原因:C++的kafka使用CRC32 计算hash,Java端使用Murmur2

Key Difference: Hashing Algorithms

Java clients use the Murmur2 hash function by default.

C/C++ clients (which use the librdkafka library) use the CRC32 hash function by default.

只需要在java端也使用CRC32 计算key的hash就行了

相关推荐
掉头发的王富贵2 小时前
【2025年终总结】对象有了,工作没了
java·后端·年终总结
Reenrr2 小时前
C++学习
开发语言·c++·学习
沛沛老爹2 小时前
Web转AI决策篇 Agent Skills vs MCP:选型决策矩阵与评估标准
java·前端·人工智能·架构·rag·web转型
LuckyLay2 小时前
Ubuntu配置多版本Java,自由切换
java·linux·ubuntu
m0_748248942 小时前
C++ 数据类型
java·jvm·c++
进阶小白猿2 小时前
Java技术八股学习Day18
java·开发语言·学习
lpfasd1232 小时前
Spring Boot + WebFlux 全面使用指南
java·spring boot·后端
Halo_tjn2 小时前
基于Java的相关知识点
java·开发语言·windows·python·算法
Cosolar2 小时前
Java 后端访问 https接口报 SSLHandshakeException 你遇到过吗
java·后端·面试