顺序消息实现思路讲解


前言

不管什么情况,都需要一个标尺来衡量时序的先后顺序,可以根据业务场景,以客户端或者服务端的时间为准,例如:邮件的发送、秒杀生效时间的判断等等


一、消息顺序性的使用场景分析

  1. 单聊消息投递,保证发送方发送顺序与接收方展现顺序一致;
  2. 群聊消息投递,保证所有接收方展现顺序一致
  3. 充值支付消息,保证同一个用户发起的请求在服务端执行序列一致

二、消息顺序性的实现

1.数据库、服务端生成递增id

对于严格时序的业务场景,可以利用单点写db的seq/auto_inc_id生成单调递增的id,来保证顺序性。
画外音:这个生成id的单点容易成为瓶颈。

2.单点序列化

数据为了保证高可用,需要做到进行数据冗余,同一份数据存储在多个地方,怎么保证这些数据的修改消息是一致的呢?

“单点序列化”是可行的:

(1)先在一台机器上序列化操作;
(2)再将操作序列分发到所有的机器,以保证多机的操作序列是一致的,最终数据是一致的;

典型场景一:数据库主从同步

在这里插入图片描述
数据库的主从架构,上游分别发起了op1,op2,op3三个操作,主库master来序列化所有的SQL写操作op3,op1,op2,然后把相同的序列发送给从库slave执行,以保证所有数据库数据的一致性,就是利用“单点序列化”这个思路。

典型场景二:GFS中文件的一致性

在这里插入图片描述
GFS(Google File System)为了保证文件的可用性,一份文件要存储多份,在多个上游对同一个文件进行写操作时,也是由一个主chunk-server先序列化写操作,再将序列化后的操作发送给其他chunk-server,来保证冗余文件的数据一致性的。

3.服务器绝对时序

单对单聊天,怎么保证发送顺序与接收顺序一致呢?
单人聊天的需求,发送方A依次发出了msg1,msg2,msg3三个消息给接收方B,这三条消息能否保证显示时序的一致性(发送与显示的顺序一致)?
方案设计思路如下:
(1)如果利用服务器单点序列化时序,可能出现服务端收到消息的时序为msg3,msg1,msg2,就会与发出序列不一致。

(2)业务上不需要全局消息一致,只需要对于同一个发送方A,ta发给B的消息时序一致,常见优化方案,在A往B发出的消息中,加上发送方A本地的一个绝对时序,来表示接收方B的展现时序。

在这里插入图片描述
可能存在问题是:如果接收方B先收到msg3,msg3会先展现,后收到msg1和msg2后,会展现在msg3的前面。

4.服务端接受消息有序性(id串行化)

群聊消息,怎么保证各接收方收到顺序一致?
群聊消息的需求,N个群友在一个群里聊,怎么保证所有群友收到的消息显示时序一致?

方案设计思路如下:
(1)假设和单聊消息一样,利用发送方的seq来保证时序,因为发送方不单点,seq无法统一生成,可能存在不一致。
(2)于是,可以利用服务器的单点做序列化。

在这里插入图片描述
如上图,此时群聊的发送流程为:

(1)sender1发出msg1,sender2发出msg2;
(2)msg1和msg2经过接入集群,服务集群;
(3)service层到底层拿一个唯一seq,来确定接收方展示时序;
(4)service拿到msg2的seq是20,msg1的seq是30;
(5)通过投递服务将消息给多个群友,群友即使接收到msg1和msg2的时间不同,但可以统一按照seq来展现;

这个方法能实现,所有群友的消息展示时序相同。

缺点是,生成全局递增序列号的服务很容易成为系统瓶颈。

还有没有进一步的优化方法呢?
群消息其实也不用保证全局消息序列有序,而只要保证一个群内的消息有序即可,这样的话,“id串行化”就成了一个很好的思路。

在这里插入图片描述
这个方案中,service层不再需要去一个统一的后端拿全局seq,而是在service连接池层面做细小的改造,保证一个群的消息落在同一个service上,这个service就可以用本地seq来序列化同一个群的所有消息,保证所有群友看到消息的时序是相同的。

此时利用本地时钟来生成seq就凑效了,是不是很巧妙?

总结

(1)要“有序”,先得有衡量“有序”的标尺,可以是客户端标尺,可以是服务端标尺;
(2)大部分业务能够接受大范围趋势有序,小范围误差;绝对有序的业务,可以借助服务器绝对时序的能力;
(3)单点序列化,是一种常见的保证多机时序统一的方法,典型场景有db主从一致,gfs多文件一致;
(4)单对单聊天,只需保证发出的时序与接收的时序一致,可以利用客户端seq;
(5)群聊,只需保证所有接收方消息时序一致,需要利用服务端seq,方法有两种,一种单点绝对时序,另一种id串行化;

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值