RPC远程调用的序列化框架

序列化框架对比:

一、Java Serialiazer

字段serialVersionUID的作用是为了在序列化时保持版本的兼容性,即版本升级时反序列化仍保持对象的唯一性。

java 复制代码
//序列化
ByteArrayOutputStream bout = new ByteArrayOutputStream();
ObjectOutoutStream out = new ObjectOutputStream(bout);
out.writeObject(obj);
byte[] bytes = bout.toByteArray();

//反序列化
ObjectInputStream bin = new ObjectInputStream(new ByteArrayInputStream(bytes));
bin.readObject();

二、Hessian

底层基于list和HashMap实现

其在序列化的类有父类的时候,如果有字段相同,父类的值会覆盖子类的值,因此使用时一定要注意子类和父类不能有同名字段

Hessian的实现有v1和v2两个版本,并不兼容。推荐使用Hessian2相关的类

java 复制代码
//序列化
ByteArrayOutputStream os = new ByteArrayOutputStream();
Hessian2Output out = new Hessian2Output(os);
out.startMessage();
TestUser user = new TestUser();
out.writeObject(user);
out.completeMessage()
out.flush();
byte[] bytes = os.toByteArray();
out.close();
os.close();

//反序列化
ByteArrayInputStream ins = new ByteArrayInputStream(bytes);
Hessian2Input input = new Hessian2Input(ins);
input.startMessage();
TestUser newUser = (TestUser)input.readObject();
input.completeMessage();
input.close();
ins.close();

三、MsgPack

需要在序列化的类上加@Message注解

为了保证序列化向后兼容,新增加的属性需要加在类的最后面,且要加@Optional注解

MsgPack提供了动态类型的功能,通过接口Value来实现动态类型

首先将数组序列化为Value类型的对象,然后用converter转化为本身的类型

java 复制代码
//TestUser.java
@Message
public class TestUser{
	private String name;
	private String mobile;
	//...
}

TestUser user = new TestUser();
MessagePack messagePack = new MessagePack();

//序列化
byte[] bs = messagePack.write(user);

//反序列化
user = messagePack.read(bs,TestUser.class);

四、Kryo

java 复制代码
Kryo kryo = new Kryo();

//序列化
ByteArrayOutputStream os = new ByteArrayOutputStream();
Output output = new Output(os);
TestUser user = new TestUser();
kryo.writeObject(output,user);
output.close();
byte[] bytes = os.toByteArray();

//反序列化
Input input = new Input(new ByteArrayInputStream(bytes));
TestUser newUser = kryo.readObject(input,TestUser.class);
input.close();

五、Thrift

需要先定义IDL,再使用Thrift

java 复制代码
//定义IDL
//TestUser.thrift
namespace java.me.rowkey.pje.datatrans.rpc.thrift

struct TestUser{
	1: required string name
	2: required string mobile
}

thrift --gen java TestUser.trhrift

使用生成的TestUser类做序列化和反序列化

java 复制代码
TestUser user = new TestUser();//由Thrift代码生成引擎生成

//序列化
ByteArrayOutputStream bos = new ByteArrayOutputStream();
user.write(new TBinaryProtocol(new TIOStreamTransport(bos)));
byte[] result = bos.toByteArray();
bos.close();

//反序列化
ByteArrayInputStream bis = new ByteArrayInputStream(result);
TestUser user = new TestUser();
user.read(new TBinaryProtocol(new TIOStreamTransport(bis)));
bis.close();

由于Thrift序列化时,丢弃了部分信息,故使用ID+Type来做标识

因此对新增的字段属性采用ID递增的方式标识并以Optional修饰来添加,这样才能做到向后兼容

六、Protobuf

Google开源的序列化框架

首先需要编写.proto文件,并使用Protobuf代码生成引擎生成Java代码

java 复制代码
//TestUser.proto
syntax = "proto3";
option java_package = "me.rowkey.pje.datatras.rpc.proto";
option java_outer_classname = "TestUserProto";
message TestUser{
	string name = 1;
	string mobile = 2;
}

protoc --java_out = ./TestUser.proto

即生成TestUserProto.java,使用此类即可完成序列化和反序列化

java 复制代码
//序列化
TestUserProto.TestUser testUser = TestUserProto.TestUser.newBuilder()
												.setMobile("xxx")
												.setName("xxx")
												.build();
byte[] bytes = testUser.toByteArray();

//反序列化
testUser = TestUserProto.TestUser.parseFrom(bytes);

使用提示:

面对RPC框架,选择的时候需要一下方面进行选择

  • 是否允许代码侵入,即需要依赖响应的代码生成器生成代码,入Thrift
  • 是否需要长连接获取高性能,如果性能需求高,则选择基于TCP的Thrift/Dubbo
  • 是否需要跨网段、跨防火墙,需要基于HTTP协议的Hessian和Thrift的HTTP Transport
相关推荐
花间相见15 小时前
【计算基础|网络14】网络层:IP、ICMP 与 ping
网络·网络协议·tcp/ip
OnlineProxy15 小时前
为 LangChain 和 CrewAI 构建自定义工具:将代理 IP 轮换封装至智能体函数中
网络协议·tcp/ip·langchain
半杯咖啡半行码17 小时前
Linux 驱动开发入门:内核模块编程基础
linux·服务器·网络
智能直播17 小时前
RK3528 V4L2 框架 UVC 接口自动获取 H.264 / MJPEG / YUYV 格式:从内核采集到硬解分发
java·网络·实时音视频·视频编解码·h.264
睿智の男孩18 小时前
MIG IP核对DDR3的输出时序分析记录
网络·网络协议·tcp/ip
艾芯微科技18 小时前
高充放电流锂电充放 SoC:ETA9885E10,便携储能、小移动电源 BOM 选型笔记
网络·单片机·嵌入式硬件·集成测试·51单片机
2401_8685347818 小时前
数据交换方式
服务器·网络
艾芯微科技18 小时前
钰泰 ETA6973PQ3Y|QFN3×3 2A 同步降压 Buck,I2C 可配置多档输出,动态调压 PMIC
网络·单片机·嵌入式硬件·fpga开发·集成测试·51单片机
默|笙19 小时前
【Linux网络】_udp_socket(认识)
linux·网络·udp