百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

分布式系统的两种常用架构类型(分布式架构特征)

ccwgpt 2024-10-31 12:31 28 浏览 0 评论

随着互联网的不断发展,程序员能够掌握的编程开发方法也越来越多,而今天我们就通过案例分析来了解一下,分布式系统的两种常用架构类型。

1、中心化

中心化的分布式设计理念是目前主流的方案,在中心化的设计方案中,节点是有角色区分的:Leader节点和Work节点,即:领导和干活的。就和现实中类似,leader只负责分发任务和监督,Work节点只负责领取任务干活,多说一句,这里Work节点领取任务,当然从通信的角度来说,又可以分为push和pull(推和拉)方式。推方式是指,leader节点主动将任务分发给Work节点,拉方式是指:Work节点主动去申请任务。至于push和pull的优缺点,不作为今天的主题展开讨论。

在任何系统中,无可避免的需要考虑节点down掉的问题,分布式系统也一样。在中心化分布式设计中,leader和Work也一样存在down掉的可能性。如果leader掉的话,整个系统陷入瘫痪,按照简单的设计思路,leader节点需要一个从节点或者备用节点,在主节点down掉之后,从主节点或者备用主节点可以手动或者自动实现leader节点服务。至于一个Work节点down掉,一般不会使整个系统陷入瘫痪,除非全部Work节点同时down掉。一个Work节点down掉,但是会影响这个节点当前正在执行的任务,所以在必要的条件下可以设计成任务需要Ack才好,即:一个任务的完成需要确认,如果长时间没有确认,leader会发起重新分配任务的操作。

说到leader的问题,现在目前大多数分布式系统具备了自动选举leader的功能,这还要感谢paxos,raft等选举算法。在leader不可用的时候,这些系统会自动根据节点情况选举出新的leader节点来继续提供服务,这大大提高了系统可用性。

在所有的中心化设计中,数据的写操作发生在leader节点,这在某种程度上类似于单机系统,所以这种中心化设计并不适合那些大量写的操作。

2、去中心化

在去中心化分布式系统设计中,节点类型并不区分Leader和Work,所有节点是相等的。所以任何一个节点down掉不会导致整个系统瘫痪,这是它的优势。但是获取系统中每个节点的信息却比中心化设计要难很多,在中心化设计中,leader节点存储着系统中所有的节点信息,并可以实时把这些信息同步到其他节点,同时可以利用相应算法来达到一致性的要求。去中心化的设计中,每个节点只能依靠和其他节点不断通信来获取整个系统的节点信息,这在技术难度上要比中心化高出很多。

在网络中,网络是不可靠的。恰恰是这个原因,又加大了每个节点互相通信的难度。在极限情况下,去中心化的设计方案会出现多个小范围的“团伙”,这就是所说的脑裂。比如:现在一个由10个节点组成的分布式系统,有可能由于网络原因会划分为两个5节点互相通信的两个“团伙”

如果出现脑裂的情况,目前主流的解决方案和数据库死锁的处理情况类似,自爆一个对系统影响比较小的。

完全中心化和去中心化的系统并不常见,反而现在慢慢出现的是二者的搭配者,表面看似去中心化,设计理念却是中心化的思路,在这种架构下,leader是程序根据某种算法选举出来的,而且在系统leader发生故障的时候,系统会自动重新选举leader节点。

相关推荐

滨州维修服务部“一区一策”强服务

今年以来,胜利油田地面工程维修中心滨州维修服务部探索实施“一区一策”服务模式,持续拓展新技术应用场景,以优质的服务、先进的技术,助力解决管理区各类维修难题。服务部坚持问题导向,常态化对服务范围内的13...

谷歌A2A协议和MCP协议有什么区别?A2A和MCP的差异是什么?

在人工智能的快速发展中,如何实现AI模型与外部系统的高效协作成为关键问题。谷歌主导的A2A协议(Agent-to-AgentProtocol)和Anthropic公司提出的MCP协议(ModelC...

谷歌大脑用架构搜索发现更好的特征金字塔结构,超越Mask-RCNN等

【新智元导读】谷歌大脑的研究人员发表最新成果,他们采用神经结构搜索发现了一种新的特征金字塔结构NAS-FPN,可实现比MaskR-CNN、FPN、SSD更快更好的目标检测。目前用于目标检测的最先...

一文彻底搞懂谷歌的Agent2Agent(A2A)协议

前段时间,相信大家都被谷歌发布的Agent2Agent开源协议刷屏了,简称A2A。谷歌官方也表示,A2A是在MCP之后的补充,也就是MCP可以强化大模型/Agent的能力,但每个大模型/Agent互为...

谷歌提出创新神经记忆架构,突破Transformer长上下文限制

让AI模型拥有人类的记忆能力一直是学界关注的重要课题。传统的深度学习模型虽然在许多任务上取得了显著成效,但在处理需要长期记忆的任务时往往力不从心。就像人类可以轻松记住数天前看过的文章重点,但目前的...

不懂设计?AI助力,人人都能成为UI设计师!

最近公司UI资源十分紧张,急需要通过AI来解决UI人员不足问题,我在网上发现了几款AI应用非常适合用来进行UI设计。以下是一些目前非常流行且功能强大的工具,它们能够提高UI设计效率,并帮助设计师创造出...

速来!手把手教你用AI完成UI界面设计

晨星技术说晨星技术小课堂第二季谭同学-联想晨星用户体验设计师-【晨星小课堂】讲师通过简单、清晰的语言描述就能够用几十秒自动生成一组可编辑的UI界面,AIGC对于UI设计师而言已经逐步发展成了帮助我们...

「分享」一端录制,多端使用的便捷 UI 自动化测试工具,开源

一、项目介绍Recorder是一款UI录制和回归测试工具,用于录制浏览器页面UI的操作。通过UIRecorder的录制功能,可以在自测的同时,完成测试过程的录制,生成JavaScr...

APP自动化测试系列之Appium介绍及运行原理

在面试APP自动化时,有的面试官可能会问Appium的运行原理,以下介绍Appium运行原理。Appium介绍Appium概念Appium是一个开源测试自动化框架,可用于原生,混合和移动Web应用程序...

【推荐】一个基于 SpringBoot 框架开发的 OA 办公自动化系统

如果您对源码&技术感兴趣,请点赞+收藏+转发+关注,大家的支持是我分享最大的动力!!!项目介绍oasys是一个基于springboot框架开发的OA办公自动化系统,旨在提高组织的日常运作和管理...

自动化实践之:从UI到接口,Playwright给你全包了!

作者:京东保险宋阳1背景在车险系统中,对接保司的数量众多。每当系统有新功能迭代后,基本上各个保司的报价流程都需要进行回归测试。由于保司数量多,回归测试的场景也会变得重复而繁琐,给测试团队带来了巨大的...

销帮帮CRM移动端UI自动化测试实践:Playwright的落地与应用

实施背景销帮帮自2015年成立以来,移动端UI自动化测试的落地举步维艰,移动端的UI自动化测试一直以来都未取得良好的落地。然而移动互联网时代,怎样落地移动端的UI自动化测试以快速稳定进行移动端的端到端...

编写自动化框架不知道该如何记录日志吗?3个方法打包呈现给你。

目录结构1.loguru介绍1.1什么是日志?程序运行过程中,难免会遇到各种报错。如果这种报错是在本地发现的,你还可以进行debug。但是如果程序已经上线了,你就不能使用debug方式了...

聊聊Python自动化脚本部署服务器全流程(详细)

来源:AirPython作者:星安果1.前言大家好,我是安果!日常编写的Python自动化程序,如果在本地运行稳定后,就可以考虑将它部署到服务器,结合定时任务完全解放双手但是,由于自动化程序与平...

「干货分享」推荐5个可以让你事半功倍的Python自动化脚本

作者:俊欣来源:关于数据分析与可视化相信大家都听说自动化流水线、自动化办公等专业术语,在尽量少的人工干预的情况下,机器就可以根据固定的程序指令来完成任务,大大提高了工作效率。今天小编来为大家介绍几个P...

取消回复欢迎 发表评论: