十年前的微信消息收发架构居然是这样子的

2023 年,微信及 WeChat 的 DAU(月活用户)达到 13.4 亿,微信已经是很多人工作、生活中不可或缺的一个环节。从 2011 年 1 月 21 日上线至今,微信已经走过了 13 个年头,其背后的技术基座与架构也发生了巨大的变化。这些变化背后,所折射的也正是中国互联网高速发展的黄金年代。腾讯云开发者社区特别策划了「十年前的技术」系列,带大家回顾那些明星项目背后最初的技术架构。好的架构是生长出来的,却也少不了良好的设计,愿各位读者都能从中获得启发,找到力量。

01

背景
微信诞生于 QQMail 团队,初始的整个微信后台架构都带着浓重的邮箱气息,消息收发
 
架构作为微信最为核心的部分,同样是基于邮箱的存储转发机制演变而来。
 
微信定位为即时通讯软件,对消息的收发有2个基本的要求:
1. 消息尽可能的实时送达
2. 不丢消息
 
在邮箱的存储转发机制上做了改良后,微信的消息收发实现了以上2个基本要求。

02

消息收发架构
 
   2.1 消息发送架构

首先通过手机 A 给手机 B 发送一条微信消息来看消息发送的整体架构是怎样的,如图1所示:
十年前的微信消息收发架构居然是这样子的
微信消息发送在整体架构上可以分为2个部分:
1)手机A发送消息到服务器(图1中1,2,3部分)
1:手机A发送发消息请求到接入层 ConnnectSvr;
2:接入层收到请求后,将请求转到逻辑层 SendSvr 进行处理;
3:逻辑层处理完各种逻辑(如反垃圾,黑名单等等)之后,将消息存入存储MsgStore。
2)服务器发送通知到手机B(图1中4,5.1,5.2,6,7部分)
4:逻辑层 SendSvr 将给手机 B 的新消息到达通知发送到通知处理服务器 PushSvr;
5.1:PushSvr 查询手机 B 在接入层所在长连接的 ConnectSvr,并将通知发给该 ConnectSvr;
5.2:PushSvr 发送一个 Push tips 给手机操作系统自建的第三方 Push 系统(如苹果的 ApnsPush,微软的 WPPush,黑莓的 BBPush 等)。像苹果的 IOS 系统,在 APP 退出到后台10分钟后就会释放掉该 APP 所持有的所有资源(如 CPU,网络,内存等),导致之前建立的长连接通道也会一并断掉,此时通过5.1的方式进行通知是不可达的,所以还需要依赖与苹果自身的 apns 通道来达到实时通知的目的;
6:接入层 ConnnectSvr 通过手机 B 建立的长连接通道将新消息达到通知发送给手机 B;
7:第三方 Push 服务器通过自建的 Push 通过发送 Push tips 到手机 B。
   2.2 消息接收架构

手机 B 在收到新消息到达通知后进行消息收取的整体架构如图2所示:
 
十年前的微信消息收发架构居然是这样子的
消息收取的流程主要分为3个步骤:
  1. 手机 B 发起收取消息的请求到接入层服务器 ConnnectSvr;
  2. 接入层服务器 ConnnectSvr 接到请求后转给逻辑层服务器 ReceiveSvr 进行处理;
  3. ReceiveSvr 从存储层 MsgStore 中获取到需要下发的消息。
   2.3 小结

以上消息收发架构可以保证手机 A 在发出消息 100ms 级别内让手机 B 收取到该条消息。当然 对于退出后台的苹果 IOS 用户,在苹果的 apns 服务器正常的情况下,也可以保证在秒级别内通知到手机 B 点开 APP 进入前台来收取消息。

03

消息防丢失机制
消息收发架构保证了消息收发双方能够及时收发消息,但该架构不能保证消息在传输过程中不发生丢弃。当然为了达到任意一条消息都不丢的状态,最简单的方案是手机端对收到的每条消息都给服务器进行一次 ack 确认,但该方案在手机端和服务器之间的交互过多,并且也会遇到在弱网络情况下 ack 丢失等问题。为了完美的做到消息不丢,微信消息系统对消息收发引入了 sequence 机制。
 
   3.1 sequence 机制

  1. 每个用户都有42亿的 sequence 空间(从1到 UINT_MAX),从小到大连续分配;
  2. 每个用户的每条消息都需要分配一个 sequence;
  3. 服务器存储有每个用户已经分配到的最大 sequence;
  4. 手机端存储有已收取消息的最大 sequence。
   3.2 消息收取 sequnece 确认机制

当服务器和手机端都拥有了一个 sequence 之后,服务器和手机端之间就可以根据两者 sequence 的差异来收取消息,同时保证手机端未收取下去的消息最终能够收取下去。具体程如图3表示:
十年前的微信消息收发架构居然是这样子的
  1. 根据服务器和手机端之间 sequence 的差异,可以很轻松的实现增量下发手机端未收取下去的消息。
  2. 对于在弱网络环境差的情况,丢包情况发生概率是比较高的,此时经常会出现服务器的回包不能到达手机端的现象。由于手机端只会在确切的收取到消息后才会更新本地的 sequence,所以即使服务器的回包丢了,手机端等待超时后重新拿旧的 sequence 上服务器收取消息,同样是可以正确的收取未下发的消息。
  3. 由于手机端存储的 sequence 是确认收到消息的最大 sequence,所以对于手机端每次到服务器来收取消息也可以认为是对上一次收取消息的确认。一个帐号在多个手机端轮流登录的情况下,只要服务器存储手机端已确认的 sequence,那就可以简单的实现已确认下发的消息不会重复下发,不同手机端之间轮流登录不会收到其他手机端已经收取到的消息。
十年前的微信消息收发架构居然是这样子的
如图4所示,假如手机 A 拿 Seq_cli = 100 上服务器收取消息,此时服务器的 Seq_svr =  150,那手机 A 可以将 sequence 为[101 – 150]的消息收取下去,同时手机 A 会将本地的 Seq_cli 置为150。
 
十年前的微信消息收发架构居然是这样子的
如图5所示,手机 A 在下一次再次上来服务器收取消息,此时 Seq_cli = 150,服务器的 Seq_svr = 200,那手机 A 可以将 sequence为[151 – 200]的消息收取下去。
十年前的微信消息收发架构居然是这样子的
如图6所示,假如原手机 A 用户换到手机 B 登录,并使用 Seq_cli = 120 上服务器收取消息,由于服务器已经确认 sequence
这里虽然 sequence 为[151 – 200]的消息有可能是被手机 A 和手机 B 都收取到,但由于手机 A 在收到 sequence 为[151 – 200]的消息时并没有给服务器进行确认或者这些消息手机 A 压根就没有收取到,所以为了防止消息丢失,sequence 为[151 – 200]的消息也是需要下发给手机 B 的。
 

04

总结

以上简单的描述了微信消息收发的架构,该架构实现了即时通讯软件对消息收发所需的两个基本要求:

  1. 消息尽可能的实时送达 。

  2. 不丢消息。

以上,是 2014 年微信古早时期的消息收发架构的基本介绍,时过境迁,微信的消息收发架构已经发生了巨大的变化,但我们还是可以从中看到技术演变的价值与力量。

 

程序员最大的成就与幸福,或许就是自己的代码跑在千万人的设备上,默默支撑着海量的需求。

-End-
原创作者 | 黄清

近期好文

每个程序员都应该了解的硬件知识

十年前的微信消息收发架构居然是这样子的

主题测试文章,只做测试使用。发布者:欣科技,转转请注明出处:https://www.xinenw.com/4156

(1)
上一篇 2024年4月17日 00:10
下一篇 2024年4月17日 00:10

相关推荐

  • 中国最能生娃的省,根本不用催生

    对于生孩子这件事,有人坚持不婚不育保平安,有人用猫狗双全替代儿女双全,而广东人大概率会表示:不用催,我们自己会主动生。 很多人对广东的印象是:作为改革开放的先行地,不但敢拼事业,也敢拼二胎、三胎。 数据也印证了这一点。近日,大部分省市公布了最新人口情况,2023 年,广东省以 103 万的出生人口增量位列全国第一,遥遥领先其他省份 [1]。换句话说,全国每九…

    2024年4月22日
    5200
  • “凭什么姥姥把我带大,却要我多孝顺奶奶?”爸爸的回答令人深思

    作者 | 主创团 哎呀妈 来源 | 小十点(ID:sdikid) 朋友前几天突然打来电话,哭着说: “我当初怎么瞎了眼,嫁给这种忘恩负义的男人!” 追问之下才知道,问题出在她老公身上。 朋友是本地人,家里就她一个宝贝女儿。 当初嫁给外地老公,家里没少反对的,直到男方保证家里还有个哥哥,婚后不回老家,才勉强答应这门婚事。 老人家想着独生女儿在身边,有个什么急事…

    2024年3月17日
    44400
  • 雷军,新造的“神”

    欢迎来到第23期每日新语,今天,我们要介绍的是——雷学。     过去这段时间,雷军俨然成了互联网新造的“神”。以他为创作对象的“雷学”,也迅速跻身成功人士必读教材——包括但不限于汽车圈、营销圈、育儿赛道和霸总文学领域的从业者们,纷纷拿上放大镜,逐帧解读雷军直播视频和过往资料,当起了“雷学家”——一切都是为了分一瓢“泼天的流量”。   4月18日,“火到提心…

    2024年4月19日
    8800
  • 淘宝实现3D沉浸式购物

    虚拟和现实正在“破壁”。 出品 | 互联网头条   作者 | 潘多拉 淘宝上线苹果Vision Pro版本 把商品直接从详情页“拖进”现实,从平面走进3D立体,360°无死角看货,真的不是在做梦! 近日,淘宝在App Store上线了Vision Pro版本。 Vision Pro是苹果今年正式在美国开售的首款头显设备,目前还未在中国市场上市。不过这款产品所…

    2024年4月17日
    7700
  • 网红猫一杯被封杀,秦朗丢作业事件大结局

    网红乱象何时休? 出品 | 互联网头条   作者 | 李迎   千万粉丝网红猫一杯被多平台封号   事实证明,弄虚作假是经不住时间考验,终究会露出马脚的。 今年2月,“秦朗巴黎丢寒假作业”事件收获了大量关注,霸榜热搜,一度闹得沸沸扬扬。热度发酵,后来还衍生了“秦朗舅舅”等相关话题。彼时,就有很多人在讨论事情的真伪,但没有一个确切的结论。 纸包不住火,如今,事…

    2024年4月16日
    6700

发表回复

登录后才能评论

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
原欣文网读者需要重新注册,平台不断升级敬请见谅!