百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

一篇文章让你全面了解Skynet基于Actor模式的开源框架

liuian 2024-12-25 14:00 47 浏览

使用多进程解决高并发带来的问题是进程安全锁,框架经常会因为部分代码的报错而导致死锁或内存占用不释放等诸多问题。而使用单进程的服务器框架,通过线程池来做消息轮询和任务执行,能够避开锁带来的诸多问题。

框架的初衷

  • 众核时代的并行编程
  • 免费的晚餐已经结束了(The Free Lunch Is Over -- Herb Sutter, 2005)
  • E5420(2.5GHz 2004) VS E5-2620v3(2.4GHz 2014)
  • 我们获得了更多的核心、更多的线程、更大的缓存、更大的带宽。我们得不到更高的主频。

Erlang

  • 1998年Erlang开源
  • 2006年传入国内C++程序员圈

Erlang China User Group始于2007,现改名为Effective Cloud User Group

  • 并行和分布式

Erlang采用的Actor模式使其增长并行处理,错误处理机制和储存管理为分布式服务,Erlang并不擅长存储密集型数值计算。

Actor模式

  • 一切都是Actor

一切都是Object?并行的面向对象模式!创建actor/处理消息/发送消息。发送的消息和发送者解耦、异步通讯。

  • 没有Actor的语言提供的框架

Akka by Scala、CAF: C++ Actor Framework by C++、Remact.Net by .net

Skynet

  • 2010 年想法
  • 2011年12月基于Erlang的第一版本实现
  • 2012年7月基于C重写
  • 2012年8月1日开源发布
  • 2014年4月22日 v0.1.0
  • 2014年11月28日 v0.9.1

注:想要学习skynet的可以关注+后台私信“skynet”获取视频学习地址,学习内容详见下图

CodeBase

  • 5000行C核心代码

消息分发、Actor调度、Timer管理、基于epoll/kqueue的socket库(支持TCP/UDP)

  • 1000行C核心服务代码
  • 1000行Lua核心库
  • 5000行Lua外围库

Redis/MySQL/MongoDB Driver

crypt、sproto、sharedata,etc

  • 单进程+可选Lua沙盒
  • 可选分布式结构
  • MIT License

消息调度模块

异步编程

  • coroutine VS callback
  • Lua5.2 coroutine的内存开销仅208字节

C线程很难减少栈的内存开销

  • coroutine对异常有良好的支持

javascript需要promise模式

  • 服用coroutine避免过频的GC
  • 远程过程调用RPC

小心异步过程中的状态改变

  • 快速失败模式

Actor沙盒

  • C模块 动态库*.so
  • Lua State != Erlang Process
  • Lua 沙盒隔离(30+20K内存占用)
  • Lua5.2(Lua JIT 2.0可选)

命令式语言、轻量coroutine、良好的C交互性能

  • Lua库+服务

异步socket库、Launcher、DB Driver

  • 共享数据(sharedata/STM)

通讯协议

  • 进程内消息传递

文本协议(C服务)、自定义序列化库(Lua服务)、内存数据结构(自定义)

  • 跨进程消息传递

自定义协议、sproto、google proto buffers、json, etc

  • 广播和组播

分布式解决方案

  • skynet 支持两种分布式方案

harbor模式用于拓展计算能力的不足、cluster模式提供弹性、可以一起使用

  • 如非必要、在一台机器解决

使用cluster做弱关联

  • 不做热更新、只做热修复

A/B滚服、定期维护、减少复杂度

MMORPG 服务器性能

MMORPG

  • E5-2620v1(2.0 GHz)*2,32G RAM

开启超线程,系统可见24个核心。

  • 10K个TCP长连接
  • 200人相互面积伤害,延迟在可接受范围。

计算复杂度O(n^2) Lua编写、CPU平均开销0.5%每人,系统上限2400%,<5M RAM/人

  • 多核的优势在于处理时间平滑

陌陌争霸

  • E5-2420v1 到 E5-2650v3
  • 初期压力测试单机20K用户

承载能力随业务复杂而下降,承载能力随核心数增加线性上升。

  • 全服峰值接近200K用户

登录操作无明显延迟,对手搜索(全局单点)无明显延迟。

典型手游集群

电信手游集群

  • 不按硬件分服
  • 玩家在登录处获取令牌
  • 玩家登录任意agent池
  • 逻辑服处理排行榜
  • 根据运营需要在线调整
  • 统一使用数据库集群
  • 避免单点

调试与优化

  • 内建性能分析模块
  • Lua模块内建监控协议
  • 替换CRT内存管理库(jemalloc)
  • 进程内消息传递减少拷贝
  • 优化向自身发送的消息
  • 合并timer请求
  • 高性能要求的服务使用C/C++编写(慎用)
  • 为Lua编写C模块:AOI、寻路、组播、公式计算
  • 优化登录、找到热点、避免单点

相关推荐

Docker 47 个常见故障的原因和解决方法

【作者】曹如熙,具有超过十年的互联网运维及五年以上团队管理经验,多年容器云的运维,尤其在Docker和kubernetes领域非常精通。Docker是一种相对使用较简单的容器,我们可以通过以下几种方式...

电脑30个快问快答,解决常见电脑问题

1.强行关机/停电对电脑有影响吗?答:可能损坏硬盘(机械硬盘风险高)、未保存数据丢失,偶尔一次影响小,但频繁操作会缩短硬件寿命。2.C盘满影响速度吗?答:会!系统运行需C盘空间缓存临时数据,空间不...

使用Tcpdump包抓取分析数据包的详细用法

TcpDump可以将网络中传送的数据包的“头”完全截获下来提供分析。它支持针对网络层、协议、主机、网络或端口的过滤,并提供and、or、not等逻辑语句来帮助你去掉无用的信息。tcpdump就是一种...

电脑启动不了(BootDevice Not Found Hard Disk-3F0)解决方案

HP品牌机,开机启动不了,黑屏,开机取下主板电池恢复BIOS后,开机显示找不到启动盘。一、按F2键进入BIOS,出现硬盘内存检测界面的话,直接退出。就会出现这个界面,光标键向下,选择BIOSSetu...

电脑开机黑屏别慌!快码住!起底维修老师傅不能说的秘密

按下开机键却只收获黑屏大礼包?那些神秘的英文提示、刺耳的蜂鸣声,其实是电脑在给你发送求救信号!从按下电源到进入桌面的12秒里,你的电脑经历了史诗级的硬件自检与系统加载,今天我们就破译这段“摩斯电码”。...

电脑启动故障为何总要先看BIOS?新手必读的关键知识解析

最近在帮朋友们解答电脑无法正常开机的问题时,发现大家经常收到一句高频建议:“先检查BIOS”。对不少普通用户而言,BIOS依然是个神秘的存在。那么,BIOS到底是什么?电脑出现哪些故障会与它相关呢?本...

Windows 11 KB5053598更新:安全补丁还是系统噩梦?

2025年3月11日,微软发布了Windows1124H2的强制性更新KB5053598,作为“周二补丁日”(PatchTuesday)的一部分。然而,这款本应提升系统安全性的更新却引发了广泛的...

飞牛OS入门安装遇到问题,如何解决?

之前小编尝试了用旧电脑装飞牛OS安装之前特意查了一些硬件要求飞牛OS目前支持主流的x86架构硬件主机需能连网线飞牛OS暂时不支持只有无线网卡的安装貌似很多小伙伴在一开始安装就卡住了那今天咱们汇总分...

几种常见的电脑开机黑屏显示白色英文字母解决方法

当电脑开机出现黑屏并显示白色英文字母时,通常表示系统启动过程中遇到了错误。以下是几种常见原因及对应的解决方法,按照排查顺序整理:一、检查外接设备与硬件连接可能原因:外接U盘、移动硬盘等未拔出,或内部硬...

电脑启动出现问题,为什么都要先检查BIOS?

【ZOL中关村在线原创技巧应用】最近在回答问题的时候,总会发现很多朋友都在问“电脑无法正常开机怎么办?”这样类似的问题,而许多DIY大佬的回复总会出现一条高频建议“先检查BIOS”。但对于许多普通用户...

教你怎么用JavaScript检测当前浏览器是无头浏览器

什么是无头浏览器(headlessbrowser)?无头浏览器是指可以在图形界面情况下运行的浏览器。我可以通过编程来控制无头浏览器自动执行各种任务,比如做测试,给网页截屏等。为什么叫“无头”浏览器?...

12个高效的Python爬虫框架,你用过几个?

实现爬虫技术的编程环境有很多种,Java、Python、C++等都可以用来爬虫。但很多人选择Python来写爬虫,为什么呢?因为Python确实很适合做爬虫,丰富的第三方库十分强大,简单几行代码便可实...

运维的报表之路,用 node.js 轻松发送 grafana 报表

在运维过程中,无论是监控还是报表,都会有一些通过邮件发送图表的需求,由于开源的zabbix,grafana和kibana等并不完全具有“想发送哪儿就发送哪儿”的图片生成功能,在grafana...

C#基于浏览器内核的高级爬虫(c#爬取网页内容)

基于C#.NET+PhantomJS+Sellenium的高级网络爬虫程序。可执行Javascript代码、触发各类事件、操纵页面Dom结构、甚至可以移除不喜欢的CSS样式。很多网站都用Ajax动态加...

如何优化一个秒杀项目?(秒杀实现思路)

问题1:使用jmeter性能压测,定位瓶颈代码步骤流程:线程组--->Http请求--->查看结果树--->聚合报告tips:host的文件--->优先调用映射,减少DNS的时...