百度360必应搜狗淘宝本站头条
分布式事务框架框架图cad怎么画框架scrapy框架grpc框架
当前位置：网站首页 > 技术文章 > 正文

如何设计一个 RPC 框架（实现一个最简单的rpc框架）

ccwgpt 2024-09-17 12:49 32 浏览 0 评论

1. 服务框架的设计

尽管不同的分布式服务框架实现细节存在差异，但是核心功能差异不大，下面的架构图描绘了一个分布式服务框架的整体逻辑架构。

总共分为 3 层：

  1. 服务层，Service，其中主要部分就是动态代理，主要用于将服务提供者的接口封装成远程服务调用。上层的服务接口用于 Spring 之类的业务框架使用，也是 Spring 的 bean.
  2. 过滤器层，服务调用职责链，提供多种调用切面供框架自身和使用者扩展，例如负载均衡，性能统计，服务调用完成通知，失败重试等。
  3. RPC 层，这里就是 RPC 框架的核心部分，包括通信框架，序列化框架，还有用于屏蔽底层通信框架和序列化框架的抽象接口。

分布式服务框架通常会包含另外两个重要功能：服务治理中心 和 服务注册中心。

1. 服务注册中心：负责服务的发布和通知，通常支持对等集群部署，某个节点宕机不会影响整个集群不可用。即使全部宕机，只影响新的节点注册和发布，不影响现有的，因为客户端需要缓存服务路由信息。

2. 服务治理中心： 服务治理中心通常包括服务治理接口和服务治理 Portal，架构师，测试人员和系统运维人员通过服务治理 Portal 对服务的运行状态，历史数据，健康度和调用关系等进行可视化的分析和维护，目标是要持续优化服务，防止服务架构腐化，保证服务高质量运行。

2. 服务框架的功能

虽然每个服务框架不尽相同，但是还有有一些核心功能是相同的，比如以下功能：

  1. 服务订阅发布：比如，配置化发布和引用服务，服务自动发现，服务在线注册和取消注册。
  2. 服务路由：比如，默认提供随机路由，轮询，基于权重的路由，粘滞连接，路由定制功能。
  3. 集群容错：比如，Failover（失败自动切换），Failback（失败自动恢复），Failfast（快速失败）。
  4. 服务调用：需要支持：同步调用，异步调用，并行调用。
  5. 多协议：包括私有协议，公有协议。
  6. 序列化方式：需要支持二进制和文本类序列化方式。
  7. 统一配置：支持本地静态配置，支持基于配置中心的动态配置。

以上功能可以按照业务定制，不需要 100% 支持。

3. 服务框架的性能指标

分布式服务框架的性能肯定比不上本地调用，原因是：网络通信，序列化，反射调用，动态代理这些都会消耗性能。所以需要有性能指标。

  1. 高性能：在同等资源占用情况下，单服务提供者的 TPS 要尽量高。
  2. 低延时：在同等资源占用情况下，服务调用延时要尽量低。
  3. 性能线性增长：如果增加了服务提供者，整体性能要能够线性增长。
  4. 可靠性：服务注册中心的可靠性，网络链路的可靠性。

4. 服务治理需要哪些功能？

  1. 服务运行态监控，例如通过路由导流，限流，服务降级，动态控制超时时间。
  2. 服务监控，性能统计，报表，报警。
  3. 服务生命周期管理
  4. 故障快速定位
  5. 服务安全

总结

以上就是在设计分布式服务框架需要注意的地方，例如整体架构的设计，框架需要哪些功能，框架的需要保证哪些性能。同时，一个框架只是可以使用时不够的，还需要服务治理，保证服务不被腐化，同时保证服务的健康。

引用

《分布式服务框架——原理和实践》——李林峰

相关推荐

Python Scrapy 项目实战（python scripy）

爬虫编写流程首先明确Python爬虫代码编写的流程：先直接打开网页，找到你想要的数据，就是走一遍流程。比如这个项目我要爬取历史某一天所有比赛的赔率数据、每场比赛的比赛结果等。那么我就先打开这个网址...

为何大厂后端开发更青睐 Python 而非 Java 进行爬虫开发?

在互联网大厂的后端开发领域，爬虫技术广泛应用于数据收集、竞品分析、内容监测等诸多场景。然而，一个有趣的现象是，相较于Java，Python成为了爬虫开发的首选语言。这背后究竟隐藏着怎样的原因呢？让...

爬虫小知识，scrapy爬虫框架中爬虫名词的含义

在上一篇文章当中学记给大家展示了Scrapy爬虫框架在爬取之前的框架文件该如何设置。在上一篇文章当中，是直接以代码的形式进行描述的，在这篇文章当中学记会解释一下上一篇文章当中爬虫代码当中的一些名词...

python爬虫神器--Scrapy（python爬虫详细教程）

什么是爬虫，爬虫能用来做什么？文章中给你答案。*_*今天我们就开发一个简单的项目，来爬取一下itcast.cn中c/c++教师的职位以及名称等信息。网站链接：http://www.itcast.cn...

Gradio:从UI库到强大AI框架的蜕变

Gradio，这个曾经被简单视为PythonUI库的工具，如今已华丽转身，成为AI应用开发的强大框架。它不仅能让开发者用极少的代码构建交互式界面，更通过一系列独特功能，彻底改变了机器学习应用的开发和...

研究人员提出AI模型无损压缩框架，压缩率达70%

大模型被压缩30%性能仍与原模型一致，既能兼容GPU推理、又能减少内存和GPU开销、并且比英伟达nvCOMP解压缩快15倍。这便是美国莱斯大学博士生张天一和合作者打造的无损压缩框架...

阿里发布Qwen-Agent框架，赋能开发者构建复杂AI智能体

IT之家1月4日消息，阿里通义千问Qwen推出全新AI框架Qwen-Agent，基于现有Qwen语言模型，支持智能体执行复杂任务，并提供多种高级功能，赋能开发者构建更强大的AI...

向量数仓与大数据平台:企业数据架构的新范式

在当前的大模型时代，企业数据架构正面临着前所未有的挑战和机遇。随着大模型的不断发布和多模态模型的发展，AIGC应用的繁荣和生态配套的逐渐完备，企业需要适应这种新的数据环境，以应对行业变革。一、大模型时...

干货!大数据管理平台规划设计方案PPT

近年来，随着IT技术与大数据、机器学习、算法方向的不断发展，越来越多的企业都意识到了数据存在的价值，将数据作为自身宝贵的资产进行管理，利用大数据和机器学习能力去挖掘、识别、利用数据资产。如果缺乏有效的...

阿里巴巴十亿级并发系统设计:实现高并发场景下的稳定性和高性能

阿里巴巴的十亿级并发系统设计是其在大规模高并发场景下（如双11、双12等）保持稳定运行的核心技术框架。以下是其关键设计要点及技术实现方案：一、高可用性设计多数据中心与容灾采用多数据中心部署，通过异地容...

阿里云云原生一体化数仓—数据治理新能力解读

一、数据治理中心产品简介阿里云DataWorks：一站式大数据开发与治理平台架构大图阿里云DataWorks定位于一站式的大数据开发和治理平台，从下图可以看出，DataWorks与MaxCom...

DeepSeek R1:理解 GRPO 和多阶段训练

人工智能在DeepSeekR1的发布后取得了显著进步，这是一个挑战OpenAI的o1的开源模型，在高级推理任务中表现出色。DeepSeekR1采用了创新的组相对策略优化（GroupR...

揭秘永久免费视频会议软件平台架构

如今视频会议已经成为各个团队线上协同的必备方式之一，视频会议软件的选择直接影响团队效率与成本，觅讯会议凭借永久免费迅速出圈，本文将从技术架构、核心功能和安全体系等维度，深度解析其技术实现与应用价值，为...

DeepSeek + Kimi = 五分钟打造优质 PPT

首先，在DeepSeek中输出提示词，示例如下：为课程《提示词基础-解锁AI沟通的秘密》设计一个PPT大纲，目的是让学生：1.理解提示词的概念、作用和重要性2.掌握构建有效提示词的基本原则和技巧...

软件系统如何设计可扩展架构?方法论,Java实战代码

软件系统如何设计可扩展架构?方法论，Java实战代码,请关注,点赞,收藏。方法论那先想想方法论部分。扩展性架构的关键点通常包括分层、模块化、微服务、水平扩展、异步处理、缓存、负载均衡、分布式架构等等...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表