一、业务场景
二、解决方案
消费者组的某个消费者可能负责消费一个topic的多个分区。每个分区都维护了偏移量(都是从0开始的),在消息存储时按照一定的策略来找到不同的分区进行存储,消费同样如此,并不能保证消息的顺序性。要想保证顺序性,可以只提供一个分区,或者相同的业务只在一个分区下进行存储和消费,因为同一个分区的偏移量是由顺序的。这样,就能保证消息的顺序性。
- topic分区中消息只能由消费者组中的唯一一个消费者处理,所以消息肯定是按照先后顺序进行处理的,但是它也仅仅是保证topic的一个分区顺序处理,不能保证跨分区的消息先后处理顺序。
- 如果想要顺序的处理topic的所有消息,那就只提供一个分区,或者相同的业务只在一个分区下进行存储和消费。
- 指定分区:设置分区参数,把有顺序要求的消息放在同一个分区即可。
- 相同的业务key:key决定消息存储在哪个分区,默认情况下,Kafka会计算key的hashcode值,根据hash值找到不同分区进行存储。如果要求有顺序性,可以设置同一个key,同一个key的hash值是一样的,最终会存储到同一个分区中。
三、总结
四、模拟面试
版权归原作者 TAIKEMAN 所有, 如有侵权,请联系我们删除。