从零开始实现RPC框架 - RPC原理及实现

RPC概述

RPC(Remote Procedure Call)即远程过程调用,允许一台计算机调用另一台计算机上的程序得到结果,而代码中不需要做额外的编程,就像在本地调用一样。

现在互联网应用的量级越来越大,单台计算机的能力有限,需要借助可扩展的计算机集群来完成,分布式的应用可以借助RPC来完成机器之间的调用。

RPC框架原理

在RPC框架中主要有三个角色:Provider、Consumer和Registry。如下图所示: 

节点角色说明: 
* Server: 暴露服务的服务提供方。 
* Client: 调用远程服务的服务消费方。 
* Registry: 服务注册与发现的注册中心。

RPC调用流程

RPC基本流程图: 

一次完整的RPC调用流程(同步调用,异步另说)如下: 
1)服务消费方(client)调用以本地调用方式调用服务; 
2)client stub接收到调用后负责将方法、参数等组装成能够进行网络传输的消息体; 
3)client stub找到服务地址,并将消息发送到服务端; 
4)server stub收到消息后进行解码; 
5)server stub根据解码结果调用本地的服务; 
6)本地服务执行并将结果返回给server stub; 
7)server stub将返回结果打包成消息并发送至消费方; 
8)client stub接收到消息,并进行解码; 
9)服务消费方得到最终结果。

RPC框架的目标就是要2~8这些步骤都封装起来,让用户对这些细节透明。

服务注册&发现

 
服务提供者启动后主动向注册中心注册机器ip、port以及提供的服务列表; 
服务消费者启动时向注册中心获取服务提供方地址列表,可实现软负载均衡和Failover;

使用到的技术

1、动态代理 
生成 client stub和server stub需要用到 Java 动态代理技术 ,我们可以使用JDK原生的动态代理机制,可以使用一些开源字节码工具框架 如:CgLib、Javassist等。

2、序列化 
为了能在网络上传输和接收 Java对象,我们需要对它进行 序列化和反序列化操作。 
* 序列化:将Java对象转换成byte[]的过程,也就是编码的过程; 
* 反序列化:将byte[]转换成Java对象的过程;

可以使用Java原生的序列化机制,但是效率非常低,推荐使用一些开源的、成熟的序列化技术,例如:protobuf、Thrift、hessian、Kryo、Msgpack

关于序列化工具性能比较可以参考:jvm-serializers

3、NIO 
当前很多RPC框架都直接基于netty这一IO通信框架,比如阿里巴巴的HSF、dubbo,Hadoop Avro,推荐使用Netty 作为底层通信框架。

4、服务注册中心 
可选技术: 
* Redis 
* Zookeeper 
* Consul 
* Etcd

编程实践

本人基于 Netty4 + Zookeeper + protostuff + Spring 实现了一个简单、高效的RPC框架Mango:https://github.com/TiFG/mango,欢迎大家fork/star。

从零开始实现RPC框架 - RPC原理及实现相关推荐

  1. 详解RPC框架核心原理

    RPC概念: RPC(Remote Procedure Call):远程过程调用.服务调用者可以像调用本地接口一样调用远程的服务提供者,RPC 框架负责屏蔽底层的传输方式(TCP 或者 UDP).序列 ...

  2. 牛逼哄哄的 RPC 框架,底层到底什么原理?

    1. RPC框架的概念 RPC(Remote Procedure Call)–远程过程调用,通过网络通信调用不同的服务,共同支撑一个软件系统,微服务实现的基石技术. 使用RPC可以解耦系统,方便维护, ...

  3. RPC框架面试总结-RPC原理及实现

    一.什么是RPC RPC是远程调用过程的简写,是一个协议,处于网络通信协议的第五层:会话层,其下就是TCP/IP协议,在建立在其基础上的通信会话协议.RPC定义了交互的模式,而应用程序使用这些模式,来 ...

  4. Java 动态代理及 RPC 框架介绍

    所谓动态代理,指的是语言提供的一种语法,能够将对对象中不同方法的调用重定向到一个统一的处理函数中来. python重写__getattr__函数能够做到这一点,就连世界上最好的语言也提供称为魔术方法的 ...

  5. 经典项目|手撸一个高质量RPC框架

    hi, 大家好,RPC是后端系统节点之间通信的核心技术,属于后端开发必须要学习的技能. 后端技术趋势指南|如何选择自己的技术方向 如何从0搭建公司的后端技术栈 远程过程调用(Remote Proced ...

  6. 一文带你实现RPC框架

    原文地址:一文带你实现RPC框架 想要获取更多文章可以访问我的博客 - 代码无止境. 现在大部分的互联网公司都会采用微服务架构,但具体实现微服务架构的方式有所不同,主流上分为两种,一种是基于Http协 ...

  7. 高并发架构系列:如何从0到1设计一个类Dubbo的RPC框架

    优知学院 2019-01-22 18:43:51 之前持续分享的几十期阿里Java面试题中,几乎每次必问Dubbo,比如:"如何从0到1设计一个Dubbo的RPC框架",其实主要考 ...

  8. 手动实现一个基于netty的RPC框架(模拟dubble)

    轻量级RPC框架开发 内容安排: 1.掌握RPC原理 2.掌握nio操作 3.掌握netty简单的api 4.掌握自定义RPC框架 RPC原理学习 什么是RPC RPC(Remote Procedur ...

  9. 【分布式服务架构】常用的RPC框架

    1. RPC 框架的原理 RPC(Remote Procedure Call,远程服务调用),用来实现部署在不同机器之间系统的方法调用,使程序像当问本地系统资源一样,通过网络传出资源. 1)Clien ...

最新文章

  1. 马云的 ATM 梦实现了
  2. 计算机网络 实验六 静态路由配置,《计算机网络》实六 静态路由配置 实验报告.doc...
  3. 尝试在wireshark中查找密码
  4. 使用Prometheus针对自己的服务器采集自定义的参数
  5. matlab sobel锐化,sobel锐化 - yirui wu.ppt
  6. java专业术语 ioc_什么叫IOC(编程术语
  7. 在集设浏览学习高水准海报设计,会带给你不一样的灵感!
  8. BZOJ【1606】购买干草
  9. excel的sumif()函数和sumifs()函数
  10. 信用评分模型详解(下)之 信用评分系统搭建
  11. Linux文件误删的恢复
  12. Postgresql之split_part()切割函数
  13. c++求三个数中的最大值和最小值
  14. jquery.Deferred()
  15. 波音承认 737MAX 飞行模拟器存在缺陷;韩国政府计划从 Win7 迁移到 Linux
  16. cesium实现流入迁徙图(仿echarts)(着色器)(cesium篇.52)
  17. 从今天起,每天写一篇日志,记录我的学习!
  18. 外贸小白适合哪种邮箱?
  19. 亿唐高管反思六年烧钱:转型Web2.0重提专注
  20. 新媒体管理师怎么考,通过率高吗,要不要考?

热门文章

  1. HTML怎么在li中加select标签,Vue.js做select下拉列表的实例(ul-li标签仿select标签)_莺语_前端开发者...
  2. vc 时间字符串转时间戳_Instant(时间戳)
  3. 【飞控理论】从零开始学习Kalman Filters之四:卡尔曼滤波C语言代码实现
  4. c++计算数组均值方差_协方差分析的基本思想和应用前提(上)
  5. css如何重置触发动画,如何通过JavaScript重新触发WebKit CSS动画?
  6. 《深入理解 Spring Cloud 与微服务构建》第十五章 微服务监控 Spring Boot Admin
  7. 【设计模式】第七章 享元模式
  8. Java集合框架之Collection实例解析
  9. docker for mac的JSON配置文件中的hosts项修改后无法生效
  10. 重拾MVC——第二天:Vue学习与即时密码格式验证