一篇文章让你全面了解Skynet基于Actor模式的开源框架
liuian 2024-12-25 14:00 75 浏览
使用多进程解决高并发带来的问题是进程安全锁,框架经常会因为部分代码的报错而导致死锁或内存占用不释放等诸多问题。而使用单进程的服务器框架,通过线程池来做消息轮询和任务执行,能够避开锁带来的诸多问题。
框架的初衷
- 众核时代的并行编程
- 免费的晚餐已经结束了(The Free Lunch Is Over -- Herb Sutter, 2005)
- E5420(2.5GHz 2004) VS E5-2620v3(2.4GHz 2014)
- 我们获得了更多的核心、更多的线程、更大的缓存、更大的带宽。我们得不到更高的主频。
Erlang
- 1998年Erlang开源
- 2006年传入国内C++程序员圈
Erlang China User Group始于2007,现改名为Effective Cloud User Group
- 并行和分布式
Erlang采用的Actor模式使其增长并行处理,错误处理机制和储存管理为分布式服务,Erlang并不擅长存储密集型数值计算。
Actor模式
- 一切都是Actor
一切都是Object?并行的面向对象模式!创建actor/处理消息/发送消息。发送的消息和发送者解耦、异步通讯。
- 没有Actor的语言提供的框架
Akka by Scala、CAF: C++ Actor Framework by C++、Remact.Net by .net
Skynet
- 2010 年想法
- 2011年12月基于Erlang的第一版本实现
- 2012年7月基于C重写
- 2012年8月1日开源发布
- 2014年4月22日 v0.1.0
- 2014年11月28日 v0.9.1
注:想要学习skynet的可以关注+后台私信“skynet”获取视频学习地址,学习内容详见下图
CodeBase
- 5000行C核心代码
消息分发、Actor调度、Timer管理、基于epoll/kqueue的socket库(支持TCP/UDP)
- 1000行C核心服务代码
- 1000行Lua核心库
- 5000行Lua外围库
Redis/MySQL/MongoDB Driver
crypt、sproto、sharedata,etc
- 单进程+可选Lua沙盒
- 可选分布式结构
- MIT License
消息调度模块
异步编程
- coroutine VS callback
- Lua5.2 coroutine的内存开销仅208字节
C线程很难减少栈的内存开销
- coroutine对异常有良好的支持
javascript需要promise模式
- 服用coroutine避免过频的GC
- 远程过程调用RPC
小心异步过程中的状态改变
- 快速失败模式
Actor沙盒
- C模块 动态库*.so
- Lua State != Erlang Process
- Lua 沙盒隔离(30+20K内存占用)
- Lua5.2(Lua JIT 2.0可选)
命令式语言、轻量coroutine、良好的C交互性能
- Lua库+服务
异步socket库、Launcher、DB Driver
- 共享数据(sharedata/STM)
通讯协议
- 进程内消息传递
文本协议(C服务)、自定义序列化库(Lua服务)、内存数据结构(自定义)
- 跨进程消息传递
自定义协议、sproto、google proto buffers、json, etc
- 广播和组播
分布式解决方案
- skynet 支持两种分布式方案
harbor模式用于拓展计算能力的不足、cluster模式提供弹性、可以一起使用
- 如非必要、在一台机器解决
使用cluster做弱关联
- 不做热更新、只做热修复
A/B滚服、定期维护、减少复杂度
MMORPG 服务器性能
MMORPG
- E5-2620v1(2.0 GHz)*2,32G RAM
开启超线程,系统可见24个核心。
- 10K个TCP长连接
- 200人相互面积伤害,延迟在可接受范围。
计算复杂度O(n^2) Lua编写、CPU平均开销0.5%每人,系统上限2400%,<5M RAM/人
- 多核的优势在于处理时间平滑
陌陌争霸
- E5-2420v1 到 E5-2650v3
- 初期压力测试单机20K用户
承载能力随业务复杂而下降,承载能力随核心数增加线性上升。
- 全服峰值接近200K用户
登录操作无明显延迟,对手搜索(全局单点)无明显延迟。
典型手游集群
电信手游集群
- 不按硬件分服
- 玩家在登录处获取令牌
- 玩家登录任意agent池
- 逻辑服处理排行榜
- 根据运营需要在线调整
- 统一使用数据库集群
- 避免单点
调试与优化
- 内建性能分析模块
- Lua模块内建监控协议
- 替换CRT内存管理库(jemalloc)
- 进程内消息传递减少拷贝
- 优化向自身发送的消息
- 合并timer请求
- 高性能要求的服务使用C/C++编写(慎用)
- 为Lua编写C模块:AOI、寻路、组播、公式计算
- 优化登录、找到热点、避免单点
相关推荐
- 电脑最高配置是什么配置2025
-
一,2023最新主流电脑装机配置如下。二,处理器可以使用十二代的i512400或者i512490f,内存16gb双通道,显卡rtx3060,主板可以使用b660m或者h610m。三,如果十三代酷睿...
- MySQL慢查询优化:从explain到索引,DBA手把手教你提升10倍性能
-
数据库性能是应用系统的生命线,而慢查询就像隐藏在系统中的定时炸弹。某电商平台曾因一条未优化的SQL导致订单系统响应时间从200ms飙升至8秒,最终引发用户投诉和订单流失。今天我们就来系统学习MySQL...
- 一文读懂SQL五大操作类别(DDL/DML/DQL/DCL/TCL)的基础语法
-
在SQL中,DDL、DML、DQL、DCL、TCL是按操作类型划分的五大核心语言类别,缩写及简介如下:DDL(DataDefinitionLanguage,数据定义语言):用于定义和管理数据库结构...
- 闲来无事,学学Mysql增、删,改,查
-
Mysql增、删,改,查1“增”——添加数据1.1为表中所有字段添加数据1.1.1INSERT语句中指定所有字段名语法:INSERTINTO表名(字段名1,字段名2,…)VALUES(值1...
- 数据库:MySQL 高性能优化规范建议
-
数据库命令规范所有数据库对象名称必须使用小写字母并用下划线分割所有数据库对象名称禁止使用MySQL保留关键字(如果表名中包含关键字查询时,需要将其用单引号括起来)数据库对象的命名要能做到见名识意,...
- 下载工具合集_下载工具手机版
-
迅雷,在国内的下载地位还是很难撼动的,所需要用到的地方还挺多。缺点就是不开会员,软件会限速。EagleGet,全能下载管理器,支持HTTP(S)FTPMMSRTSP协议,也可以使用浏览器扩展检测...
- mediamtx v1.15.2 更新详解:功能优化与问题修复
-
mediamtxv1.15.2已于2025年10月14日发布,本次更新在功能、性能优化以及问题修复方面带来了多项改进,同时也更新了部分依赖库并提升了安全性。以下为本次更新的详细内容:...
- 声学成像仪:泄露监测 “雷达” 方案开启精准防控
-
声学成像仪背景将声像图与阵列上配装的摄像实所拍的视频图像以透明的方式叠合在一起,就形成了可直观分析被测物产生状态。这种利用声学、电子学和信息处理等技术,变换成人眼可见的图像的技术可以帮助人们直观地认识...
- 最稳存储方案:两种方法将摄像头接入威联通Qu405,录像不再丢失
-
今年我家至少被4位邻居敲门,就是为了查监控!!!原因是小区内部监控很早就停止维护了,半夜老有小黄毛掰车门偷东西,还有闲的没事划车的,车主损失不小,我家很早就配备监控了,人来亮灯有一定威慑力,不过监控设...
- 离岗检测算法_离岗检查内容
-
一、研发背景如今社会许多岗位是严禁随意脱离岗位的,如塔台、保安室、监狱狱警监控室等等,因为此类行为可能会引起重大事故,而此类岗位监督管理又有一定困难,因此促生了智能视频识别系统的出现。二、产品概述及工...
- 消防安全通道占用检测报警系统_消防安全通道占用检测报警系统的作用
-
一、产品概述科缔欧消防安全通道占用检测报警系统,是创新行业智能监督管理方式、完善监管部门动态监控及预警预报体系的信息化手段,是实现平台远程监控由“人为监控”向“智能监控”转变的必要手段。产品致力于设...
- 外出住酒店、民宿如何使用手机检测隐藏的监控摄像头
-
最近,一个家庭在他们的民宿收到了一个大惊喜:客厅里有一个伪装成烟雾探测器的隐藏摄像头,监视着他们的一举一动。隐藏摄像头的存在如果您住在酒店或民宿,隐藏摄像头不应再是您的担忧。对于民宿,房东应报告所有可...
- 基于Tilera众核平台的流媒体流量发生系统的设计
-
曾帅,高宗彬,赵国锋(重庆邮电大学通信与信息工程学院,重庆400065)摘要:设计了一种基于Tilera众核平台高强度的流媒体流量发生系统架构,其主要包括:系统界面管理模块、服务承载模块和流媒体...
- 使用ffmpeg将rtsp流转流实现h5端播放
-
1.主要实现rtsp转tcp协议视频流播放ffmpeg下载安装(公认业界视频处理大佬)a、官网地址:www.ffmpeg.org/b、gitHub:github.com/FFmpeg/FFmp…c、推...
- 将摄像头视频流从Rtsp协议转为websocket协议
-
写在前面很多通过摄像头拿到的视频流格式都是Rtsp协议的,比如:海康威视摄像头。在现代的浏览器中,已经不支持直接播放Rtsp视频流,而且,海康威视提供的本身的webSdk3.3.0视频插件有很多...
- 一周热门
- 最近发表
- 标签列表
-
- python判断字典是否为空 (50)
- crontab每周一执行 (48)
- aes和des区别 (43)
- bash脚本和shell脚本的区别 (35)
- canvas库 (33)
- dataframe筛选满足条件的行 (35)
- gitlab日志 (33)
- lua xpcall (36)
- blob转json (33)
- python判断是否在列表中 (34)
- python html转pdf (36)
- 安装指定版本npm (37)
- idea搜索jar包内容 (33)
- css鼠标悬停出现隐藏的文字 (34)
- linux nacos启动命令 (33)
- gitlab 日志 (36)
- adb pull (37)
- python判断元素在不在列表里 (34)
- python 字典删除元素 (34)
- vscode切换git分支 (35)
- python bytes转16进制 (35)
- grep前后几行 (34)
- hashmap转list (35)
- c++ 字符串查找 (35)
- mysql刷新权限 (34)
