网络编程模型的演进之路（网络编程5种模式）
ccwgpt 2024-10-01 08:16 19 浏览 0 评论
在没有IO多路复用的模型的情况下，为了支持高并发采取以下网络模型
一：阻塞IO+多线程
client连接服务器，服务器有一个线程阻塞的调用accept,accept接收到连接后，创建一个线程来读写读写，并且处理业务逻辑
阻塞IO不能充分利用CPU，后面就出现了reactor模型
二：reactor模型
特点：
1：非阻塞IO+IO多路复用（此处的IO多路复用采用的是epoll模型，关于为何选用epoll，可以看下以前的一篇文章
）
2：事件循环+以事件驱动或者事件回调的方式处理业务逻辑
?
典型的模型应用代表:redis
可以发现服务器只有一个线程，一个epoll，epoll接收到连接事件后就调用accept,接收到客户端的fd后，将fd加入到epoll，监听客户端的读写以及断开连接事件，读取到客户端的消息后，对消息进行解码，然后业务逻辑处理，处理完后编码需要回复的数据包，然后发送消息，交互完成后客户端断开连接，监听到断开连接的消息后调用close.
由上面可以看出来所有的事情都是在一个线程上跑，一个线程的处理能力也是有上限的，要是IO密集型或者是业务处理比较复杂的模型，在该网络模型上跑就会暴露其确定，为了逻辑处理的密集型问题引出下面的 单reacotor +消息队列+多线程模型
三：单reactor+消息队列+多线程
?
可以看到该模型跟reactor的区别就是在业务逻辑处理的地方加了消息队列，接收到的消息放入接收消息队列，然后业务线程从该队列取消息进行业务处理(业务线程数量最好是跟cpu核心数，业务线程中基本没有了IO操作)，业务线程处理完后，将需要回复的消息放入发送队列中，当有可发送事件触发时，epoll从发送队列取消息发送。该模型很典型的应用到游戏里面，代表框架skynet,游戏中的业务是比较多的。该场景可以解决业务逻辑重的问题，但是IO密集问题没有得到解决，后面一种场景就是为解决IO秘密而生的模型，多reactor模型
四：多reactor模型 也叫one eventloop per net thread
?
多reactor指的是有多个epoll，具体多少个可以根据cpu的核心数决定，一个reactor专门负责接收连接，接收到的连接添加到sub reactor进行读写以及逻辑处理
典型的应用代表为memcached
使用多线程模型就会带来一个线程crash就会导致整个进程crash，同时数据的读取需要加锁，此时就会产生一个多reactor多进程模型
五：多进程reactor
?
一个main进程 fork出多个reactor进程，每个reactor都是跟上面第一种的reactor一样，这样每个reactor可以利用一个核心，充分利用多核技术，但是此处有一个问题就是当有事件接入的时候只能一个进程accept，这个时候需要引入一个accept锁，保证同一时刻只用一个进程调用accept就可以解决该问题，main process可以管理所有的reactor进程，当reactor进程crash时拉起与做一些公共的管理事件
典型的应用就是nginx
六：多reactor+消息队列+多线程
?
这种网络模型在实际开发中用的会比较多，在我看来主要是为了达到一个解构的目的，网络库跟逻辑处理分离
相关推荐
- 如何为Hadoop选择最佳弹性MapReduce框架
-
ZDNet至顶网服务器频道07月22日新闻消息：亚马逊Web服务的弹性MapReduce是一项基于Hadoop的实施，它可允许你运行大型的预处理工作，如格式转换和数据聚合等。虽然我们可以选择很多的...
- 《平安小猪》:J.K.罗琳用“魔法”放大的真实
-
对很多孩子来说，某些玩具是抚慰心灵的“忠实伙伴”，几乎无可替代。J.K.罗琳在看到儿子大卫对玩偶小猪的依恋后创作了“平安小猪”的故事，这也是她自《哈利·波特》之后创作的首部儿童长篇小说。男孩杰克在平安...
- 一页纸精华 | HDFS
-
要入门大数据，最好的办法就是理清hadoop的生态系统。本期为你介绍分布式文件系统HDFS。ApacheHadoop2.0生态系统如下图所示：Hadoop2.0生态系统图Hadoop核心项目包括：H...
- 谷歌搁置与法国出版商的协议，将等候反垄断裁定
-
据路透社6月29日消息，两位知情消息人士称，谷歌搁置了与一些法国出版商达成的为新闻内容付费的初步协议，将等待反垄断审议结果。该决定可能为欧洲在线新闻的版权谈判定下基调。文件显示，按照谷歌与法国新闻总联...
- Java 微服务从源码实战开始 | Gitee 项目推荐
-
在软件开发的不同时期、阶段，对技术架构的理解、选择和应用都有着不一样的诉求。微服务架构是当前互联网业界的一个技术热点，它的思想也更符合我们的目标：根据业务模块划分服务种类。每个服务可以独立部署并且互相...
- 快讯|谷歌搁置向法国出版商付费协议:等待反垄断决定
-
财经网科技6月30日讯，据新浪科技消息，两位知情人士透露，谷歌已经搁置此前与一些法国出版商达成的为新闻内容付费的初步协议。因为谷歌正在等待一项反垄断决定，这项决定可能会为该公司的欧洲在线新闻版权谈判定...
- 外媒:谷歌搁置与法国出版商的协议 等候反垄断决定
-
路透中文网30日报道，据两位知情消息人士透露，谷歌GOOGL.O搁置了与一些法国出版商达成的为新闻内容付费的初步协议，等待一项反垄断决定。该决定可能为欧洲在线新闻的版权谈判定下基调。报道显示，根据路透...
- 大数据任务调度框架Oozie
-
Oozie（驯象人）是一个基于工作流引擎的开源框架，由Cloudera公司贡献给Apache，提供对HadoopMapReduce、PigJobs的任务调度与协调。Oozie需要部署到JavaS...
- 惊了!SpringBoot 3.4 触雷，升级后参数绑定竟悄悄破坏你的代码?
-
背景在微服务架构中，我们经常利用HTTP请求头来控制系统行为，比如实现灰度发布和流量控制。在PIG微服务框架中，我们通过重写SpringCloudLoadBalancer，根据请求he...
- 《终结者》:科幻电影巅峰的里程碑
-
在阅读此文之前，麻烦您点击一下“关注”，既方便您进行讨论和分享，又能给您带来不一样的参与感，感谢您的支持。文|庭芥摘要：本文以一位影评家的视角赏析詹姆斯·卡梅隆执导的经典科幻电影《终结者》。通过对该...
- AI已经越过红线?复旦大学:在知道自己将被关闭后，AI复制了自己
-
2024年12月9日，复旦大学的一项研究引发了全球科技界的强烈关注。研究团队对Meta与阿里巴巴旗下的两个大型AI系统展开测试，结果发现，在知晓自身可能被关闭的情况下，它们居然选择自我复制。这不是普通...
- 重磅开源!LocalAI让你在个人电脑上运行AI大模型，无需显卡，已获28K Star!
-
随着AI技术的快速发展，如何在本地设备上高效运行AI模型成为了开发者关注的焦点。LocalAI开源项目提供了一个革命性的解决方案-它让用户能够在个人电脑上轻松部署和运行各种AI模型，并且完全兼容...
- 了解《终结者》的恐怖末日世界观，能让你看懂《终结者6》
-
相信很多人的科幻动作启蒙片，应该就是《终结者》系列，起码对于我来说，童年的暑假里，不止一次反复看着《终结者2》的电影，深深被影片中施瓦辛格的硬核铁汉形象吸引，也为片中的液态机器人着迷。《终结者》系列成...
- Golang底层是用什么语言编写的?
-
Go底层语言Go语言在1.5版本之前主要由汇编和C语言写的,C语言占比85%以上,另外有少量的周边模块如文档等,带了些htmlshellperl代码,可以忽略不计。1.5版本及之后...
- skynet服务的缺陷 lua死循环
-
服务端高级架构—云风的skynet这边有一个关于云风skynet的视频推荐给大家观看点击就可以观看了！skynet是一套多人在线游戏的轻量级服务端框架，使用C+Lua开发。skynet的显著优点是，...
欢迎 你 发表评论:
- 一周热门
- 最近发表
- 标签列表
-
- MVC框架 (46)
- spring框架 (46)
- 框架图 (58)
- bootstrap框架 (43)
- flask框架 (53)
- quartz框架 (51)
- abp框架 (47)
- jpa框架 (47)
- laravel框架 (46)
- springmvc框架 (49)
- 分布式事务框架 (65)
- scrapy框架 (56)
- shiro框架 (61)
- 定时任务框架 (56)
- java日志框架 (61)
- grpc框架 (55)
- ppt框架 (48)
- 内联框架 (52)
- winform框架 (46)
- gui框架 (44)
- cad怎么画框架 (58)
- ps怎么画框架 (47)
- ssm框架实现登录注册 (49)
- oracle字符串长度 (48)
- oracle提交事务 (47)