一篇文章让你全面了解Skynet基于Actor模式的开源框架
ccwgpt 2024-10-15 08:55 43 浏览 0 评论
使用多进程解决高并发带来的问题是进程安全锁,框架经常会因为部分代码的报错而导致死锁或内存占用不释放等诸多问题。而使用单进程的服务器框架,通过线程池来做消息轮询和任务执行,能够避开锁带来的诸多问题。
框架的初衷
- 众核时代的并行编程
- 免费的晚餐已经结束了(The Free Lunch Is Over -- Herb Sutter, 2005)
- E5420(2.5GHz 2004) VS E5-2620v3(2.4GHz 2014)
- 我们获得了更多的核心、更多的线程、更大的缓存、更大的带宽。我们得不到更高的主频。
Erlang
- 1998年Erlang开源
- 2006年传入国内C++程序员圈
Erlang China User Group始于2007,现改名为Effective Cloud User Group
- 并行和分布式
Erlang采用的Actor模式使其增长并行处理,错误处理机制和储存管理为分布式服务,Erlang并不擅长存储密集型数值计算。
Actor模式
- 一切都是Actor
一切都是Object?并行的面向对象模式!创建actor/处理消息/发送消息。发送的消息和发送者解耦、异步通讯。
- 没有Actor的语言提供的框架
Akka by Scala、CAF: C++ Actor Framework by C++、Remact.Net by .net
Skynet
- 2010 年想法
- 2011年12月基于Erlang的第一版本实现
- 2012年7月基于C重写
- 2012年8月1日开源发布
- 2014年4月22日 v0.1.0
- 2014年11月28日 v0.9.1
注:想要学习skynet的可以关注+后台私信“skynet”获取视频学习地址,学习内容详见下图
CodeBase
- 5000行C核心代码
消息分发、Actor调度、Timer管理、基于epoll/kqueue的socket库(支持TCP/UDP)
- 1000行C核心服务代码
- 1000行Lua核心库
- 5000行Lua外围库
Redis/MySQL/MongoDB Driver
crypt、sproto、sharedata,etc
- 单进程+可选Lua沙盒
- 可选分布式结构
- MIT License
消息调度模块
异步编程
- coroutine VS callback
- Lua5.2 coroutine的内存开销仅208字节
C线程很难减少栈的内存开销
- coroutine对异常有良好的支持
javascript需要promise模式
- 服用coroutine避免过频的GC
- 远程过程调用RPC
小心异步过程中的状态改变
- 快速失败模式
Actor沙盒
- C模块 动态库*.so
- Lua State != Erlang Process
- Lua 沙盒隔离(30+20K内存占用)
- Lua5.2(Lua JIT 2.0可选)
命令式语言、轻量coroutine、良好的C交互性能
- Lua库+服务
异步socket库、Launcher、DB Driver
- 共享数据(sharedata/STM)
通讯协议
- 进程内消息传递
文本协议(C服务)、自定义序列化库(Lua服务)、内存数据结构(自定义)
- 跨进程消息传递
自定义协议、sproto、google proto buffers、json, etc
- 广播和组播
分布式解决方案
- skynet 支持两种分布式方案
harbor模式用于拓展计算能力的不足、cluster模式提供弹性、可以一起使用
- 如非必要、在一台机器解决
使用cluster做弱关联
- 不做热更新、只做热修复
A/B滚服、定期维护、减少复杂度
MMORPG 服务器性能
MMORPG
- E5-2620v1(2.0 GHz)*2,32G RAM
开启超线程,系统可见24个核心。
- 10K个TCP长连接
- 200人相互面积伤害,延迟在可接受范围。
计算复杂度O(n^2) Lua编写、CPU平均开销0.5%每人,系统上限2400%,<5M RAM/人
- 多核的优势在于处理时间平滑
陌陌争霸
- E5-2420v1 到 E5-2650v3
- 初期压力测试单机20K用户
承载能力随业务复杂而下降,承载能力随核心数增加线性上升。
- 全服峰值接近200K用户
登录操作无明显延迟,对手搜索(全局单点)无明显延迟。
典型手游集群
电信手游集群
- 不按硬件分服
- 玩家在登录处获取令牌
- 玩家登录任意agent池
- 逻辑服处理排行榜
- 根据运营需要在线调整
- 统一使用数据库集群
- 避免单点
调试与优化
- 内建性能分析模块
- Lua模块内建监控协议
- 替换CRT内存管理库(jemalloc)
- 进程内消息传递减少拷贝
- 优化向自身发送的消息
- 合并timer请求
- 高性能要求的服务使用C/C++编写(慎用)
- 为Lua编写C模块:AOI、寻路、组播、公式计算
- 优化登录、找到热点、避免单点
相关推荐
- RACI矩阵:项目管理中的角色与责任分配利器
-
作者:赵小燕RACI矩阵RACI矩阵是项目管理中的一种重要工具,旨在明确团队在各个任务中的角色和职责。通过将每个角色划分为负责人、最终责任人、咨询人和知情人四种类型,RACI矩阵确保每个人都清楚自己...
- 在弱矩阵组织中,如何做好项目管理工作?「慕哲制图」
-
慕哲出品必属精品系列在弱矩阵组织中,如何做好项目管理工作?【慕哲制图】-------------------------------慕哲制图系列0:一图掌握项目、项目集、项目组合、P2、商业分析和NP...
- Scrum模式:每日站会(Daily Scrum)
-
定义每日站会(DailyScrum)是一个Scrum团队在进行Sprint期间的日常会议。这个会议的主要目的是为了应对Sprint计划中的不断变化,确保团队能够有效应对挑战并达成Sprint目标。为...
- 大家都在谈论的敏捷开发&Scrum,到底是什么?
-
敏捷开发作为一种开发模式,近年来深受研发团队欢迎,与瀑布式开发相比,敏捷开发更轻量,灵活性更高,在当下多变环境下,越来越多团队选择敏捷开发。什么是敏捷?敏捷是一种在不确定和变化的环境中,通过创造和响应...
- 敏捷与Scrum是什么?(scrum敏捷开发是什么)
-
敏捷是一种思维模式和哲学,它描述了敏捷宣言中的一系列原则。另一方面,Scrum是一个框架,规定了实现这种思维方式的角色,事件,工件和规则/指南。换句话说,敏捷是思维方式,Scrum是规定实施敏捷哲学的...
- 敏捷项目管理与敏捷:Scrum流程图一览
-
敏捷开发中的Scrum流程通常可以用一个简单的流程图来表示,以便更清晰地展示Scrum框架的各个阶段和活动。以下是一个常见的Scrum流程图示例:这个流程图涵盖了Scrum框架的主要阶段和活动,其中包...
- Mockito 的最佳实践(mock方法)
-
记得以前面试的时候,面试官问我,平常开发过程中自己会不会测试?我回答当然会呀,自己写的代码怎么不测呢。现在想想我好像误会他的意思了,他应该是想问我关于单元测试,集成测试以及背后相关的知识,然而当时说到...
- EffectiveJava-5-枚举和注解(java枚举的作用与好处)
-
用enum代替int常量1.int枚举:引入枚举前,一般是声明一组具名的int常量,每个常量代表一个类型成员,这种方法叫做int枚举模式。int枚举模式是类型不安全的,例如下面两组常量:性别和动物种...
- Maven 干货 全篇共:28232 字。预计阅读时间:110 分钟。建议收藏!
-
Maven简介Maven这个词可以翻译为“知识的积累”,也可以翻译为“专家”或“内行”。Maven是一个跨平台的项目管理工具。主要服务于基于Java平台的项目构建、依赖管理和项目信息管理。仔...
- Java单元测试框架PowerMock学习(java单元测试是什么意思)
-
前言高德的技术大佬在谈论方法论时说到:“复杂的问题要简单化,简单的问题要深入化。”这句话让我感触颇深,这何尝不是一套编写代码的方法——把一个复杂逻辑拆分为许多简单逻辑,然后把每一个简单逻辑进行深入实现...
- Spring框架基础知识-第六节内容(Spring高级话题)
-
Spring高级话题SpringAware基本概念Spring的依赖注入的最大亮点是你所有的Bean对Spring容器的存在是没有意识的。但是在实际的项目中,你的Bean必须要意识到Spring容器...
- Java单元测试浅析(JUnit+Mockito)
-
作者:京东物流秦彪1.什么是单元测试(1)单元测试环节:测试过程按照阶段划分分为:单元测试、集成测试、系统测试、验收测试等。相关含义如下:1)单元测试:针对计算机程序模块进行输出正确性检验工作...
- 揭秘Java代码背后的质检双侠:JUnit与Mockito!
-
你有没有发现,现在我们用的手机App、逛的网站,甚至各种智能设备,功能越来越复杂,但用起来却越来越顺畅,很少遇到那种崩溃、卡顿的闹心事儿?这背后可不是程序员一拍脑袋写完代码就完事儿了!他们需要一套严谨...
- 单元测试框架哪家强?Junit来帮忙!
-
大家好,在前面的文章中,给大家介绍了以注解和XML的方式分别实现IOC和依赖注入。并且我们定义了一个测试类,通过测试类来获取到了容器中的Bean,具体的测试类定义如下:@Testpublicvoid...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- 框架图 (58)
- flask框架 (53)
- quartz框架 (51)
- abp框架 (47)
- jpa框架 (47)
- springmvc框架 (49)
- 分布式事务框架 (65)
- scrapy框架 (56)
- shiro框架 (61)
- 定时任务框架 (56)
- java日志框架 (61)
- JAVA集合框架 (47)
- mfc框架 (52)
- abb框架断路器 (48)
- ui自动化框架 (47)
- beego框架 (52)
- java框架spring (58)
- grpc框架 (65)
- ppt框架 (48)
- 内联框架 (52)
- cad怎么画框架 (58)
- ps怎么画框架 (47)
- ssm框架实现登录注册 (49)
- oracle字符串长度 (48)
- oracle提交事务 (47)