分布式RPC网络框架

项目概述

mprpc是一个基于C++开发的轻量级RPC框架,它整合了muduo网络库 的高性能I/O模型和Protobuf的高效序列化能力。框架的设计目标是提供简单易用、高性能的远程调用解决方案,支持服务自动注册与发现。

核心特性

  • 高性能网络通信:基于muduo的Reactor多线程模型
  • 高效序列化:使用Protobuf进行二进制数据序列化
  • 服务治理:集成Zookeeper实现服务注册与发现
  • 配置化:支持配置文件动态加载
  • 异步日志:记录框架运行状态

RPC通信原理及实现

黄色部分:设计rpc方法参数的打包和解析,也就是数据的序列化和反序列化,使用Protobuf。

绿色部分:网络部分,包括寻找rpc服务主机,发起rpc调用请求和响应rpc调用结果,使用muduo网络 库和zookeeper服务配置中心(专门做服务发现)。 mprpc框架主要包含以上两个部分的内容。


核心功能

RPC的核心是让远程调用像本地调用一样简单透明。具体有以下功能

  1. 服务注册:服务提供者启动时,将服务地址注册到Zookeeper。
  2. 服务发现:消费者从Zookeeper获取服务提供者地址,并缓存本地。
  3. 负载均衡:随机选择策略,从多个服务提供者中选择一个。
  4. 远程调用:通过动态代理,实现透明的远程方法调用。
  5. 心跳检测:定期检查服务提供者的健康状态。

项目代码工程目录

c 复制代码
bin:可执行文件  
build:项目编译文件 
lib:项目库文件  
src:源文件  
test:测试代码  
example:框架代码使用范例  
CMakeLists.txt:顶层的
cmake文件  
README.md:项目自述文件  
autobuild.sh:一键编译脚本

Protobuf的服务定义与代码生成

在RPC调用中,客户端需告诉服务端三要素

  • 服务名 :如 UserService
  • 方法名 :如 LoginRegister
  • 方法参数:序列化的参数数据
c 复制代码
syntax = "proto3";
package mprpc;

option cc_generic_services = true //选项生成RPC服务框架代码

class LoginRequest{
		xx=1;
		yy=2;
}
class GetFriendListsResponse{
		xx=1;
		yy=2;
}
service UserService {
    rpc Login(LoginRequest) returns (LoginResponse);
}

// 编译命令
protoc user_service.proto --cpp_out=./   输出到当前目录

生成的服务基类为框架提供了标准的接口,我们只需要实现具体的业务逻辑。当使用 protoc 编译 .proto 文件时,Protobuf会自动生成Stub类 ,这个Stub类就是客户端调用远程方法的代理 :每个Stub方法内部都会调用channel_->CallMethod(),并传入方法描述符ServiceDescriptor* GetDescriptor() virtual void Login() 等虚函数两者是整个框架动态调用的核心机制。

日志模块实现


znode节点存储格式

项目收获

  • 深入理解了RPC框架的工作原理,包括网络通信、序列化、服务发现等。
  • 掌握了muduo网络库、Protobuf、Zookeeper等开源工具的使用和集成。
  • 提升了C++编程能力,特别是多线程编程、内存管理和资源管理。
  • 增强了问题解决能力,通过查阅文档、调试和优化,独立解决了开发中的各种问题。

项目地址:
https://gitee.com/min_zh/mprpc


相关推荐
fy zs1 小时前
Linux线程互斥与同步
linux·c++
老王熬夜敲代码1 小时前
万能引用、完美转发
c++·笔记
FMRbpm1 小时前
栈练习--------(LeetCode 739-每日温度)
数据结构·c++·算法·leetcode·新手入门
山峰哥1 小时前
从指针到智能体:我与C++的二十年技术进化与AI革命
大数据·开发语言·数据结构·c++·人工智能
mjhcsp1 小时前
P1906 凯撒密码洛谷(mjhcsp)
c++
dragoooon341 小时前
[Linux网络基础——Lesson7.「传输层协议 UDP 与 TCP」]
linux·网络·udp
黑客思维者1 小时前
智能配电系统代码审查详细设计与实战体系:从缺陷预防到架构守护
网络·架构·代码复审·代码评审
Xの哲學1 小时前
Linux 分段卸载技术深度剖析
linux·服务器·网络·架构·边缘计算
大袁同学1 小时前
【C++完结篇】:深入“次要”但关键的知识腹地
开发语言·数据结构·c++·算法