08 技术选型：Kafka、RabbitMQ以及RocketMQ

àì夳堔傛蜴生んèń 2022-10-06 15:53 191阅读 0赞

### 1.技术选型的考量条件 ###

*  业内常用的MQ有哪些？
 *  每一种MQ各自的表现如何？
 *  这些MQ在同等机器条件下，能抗多少QPS（每秒抗几千QPS还是几万QPS）？
 *  性能有多高（发送一条消息给他要2ms还是20ms）？
 *  可用性能不能得到保证（要是MQ部署的机器挂了怎么办）？

### 2.深层次的考量 ###

*  他们会不会丢数据？
 *  如果需要的话能否让他们进行线性的集群扩容（就是多加机台机器）？
 *  消息中间件经常需要使用的一些功能他们都有吗（比如说延迟消息、事务消息、消息堆积、消息回溯、死信队列，等待）？

### 3.Kafka、RabbitMQ以及RocketMQ的调研对比 ###

（1）Kafka

优点：常规的单机配置下，可以达到每秒十几万的QPS，适合大数据场景下使用。

缺点：

1.  容易丢失数据——kafka收到消息不是直接落盘，而是放内存了，宕机后会导致丢失数据；
2.  功能单一——只能进行发送消息，然后kafka消费消息，然后……没了

（2）RabbitMQ

优点：可以保证数据不丢失，能保证高可用性，也就是集群部署的时候部分集群宕机可以继续运行；然后支持部分高级功能，比如：死信队列、消息重试之类的。

缺点：吞吐量低，相较于Kafka只有每秒几万的级别，高并发场景下容易达到瓶颈；底层源码问题，他的开发语言是erlang，难以读懂和修改。

提一嘴：笔者之前想过去学一下RabbitMQ，但是在DEBUG看源码时被劝退了，┭┮﹏┭┮。

（3）RocketMQ

优点：吞吐量高，单机可达到10万QPS以上；可以保证高可用性，性能很高；而且支持通过配置保证数据绝对不丢失，可以部署大规模的集群；支持各种高级的功能，比如延迟消息、事务消息、消息回溯、死信队里、消息积压等；底层代码基于Java开发，便于阅读和修改。

缺点：暂无明显缺陷。

（4）活跃的社区和广泛的应用

基本上Kafka、RabbitMQ和RocketMQ的社区都还算活跃，更新效率都还可以，而且基本运用都非常的广泛。

目前Kafka几乎是国内大数据领域日志采集传输的标准，RabbitMQ在各种中小公司里运用极为广泛；RocketMQ在一些大公司和其他公司已经广泛使用，并且RocketMQ已经成为了apache的顶级项目。

（5）关于高可用集群

RabbitMQ是伪分布式的，只能部署镜像集群，集群中国内每台集群存储的数据是一样的，只能垂直的扩展，没能水平扩展。

而Kafka和RocketMQ都是将message拆分后存储到不同的partition上，然后每个partition对应一个主节点，其他机器存储副本。

发表评论取消回复

表情：

评论列表（有 0 条评论，191人围观）

还没有评论，来说两句吧...

相关阅读

相关【技术选型】ActiveMQ、RocketMQ、RabbitMQ、Kafka对比

文章目录概述几种MQ的对比综合以上对比后，有如下建议：概述 MQ(Message Queue)，即消息队列。早已成为企业IT系统内部通信

「爱情、让人受尽委屈。」/ 2023年10月12日 17:10/ 0 赞/ 34 阅读

相关【技术选型】时序数据库选型

文章目录 1、前言 2、概述 2.1 时序数据库的定义 2.2 时序数据库的概念 2.3 时序数据库的趋势 3、

悠悠/ 2023年10月12日 11:17/ 0 赞/ 81 阅读

相关 RabbitMQ，RocketMQ，Kafka--区别/对比/选型

原文网址：[RabbitMQ，RocketMQ，Kafka--区别/对比/选型\_IT利刃出鞘的博客-CSDN博客][RabbitMQ_RocketMQ_Kafka--_IT_

蔚落/ 2023年10月02日 15:13/ 0 赞/ 44 阅读

相关技术选型系列之-springcloud与dubbo技术选型

spring Cloud与dubbo都为微服务框架，那么我们在进行技术选型时应该怎么考虑。一.技术对比 1. 架构完整度: 与spring cloud相

约定不等于承诺〃/ 2023年03月02日 07:40/ 0 赞/ 49 阅读

相关 08 技术选型：Kafka、RabbitMQ以及RocketMQ

1.技术选型的考量条件业内常用的MQ有哪些？每一种MQ各自的表现如何？这些MQ在同等机器条件下，能抗多少QPS（每秒抗几千QPS还是几万QPS）？

àì夳堔傛蜴生んèń/ 2022年10月06日 15:53/ 0 赞/ 192 阅读

相关技术选型方法论

技术选型，本质上是项目决策的一种，也符合项目决策的一些特点。技术选型的选择要受制于范围、时间和成本的约束，要分析可行性和风险，要考虑利益相关人。还有一些坑要小心避开，比如要避免

た入场券/ 2022年09月11日 05:12/ 0 赞/ 270 阅读

相关技术选型

一、前端部分文件上传：Dropzone、jQuery File Upload、WebUploader 表格：easyUI、jqGrid 图表：HighCh

系统管理员/ 2022年06月10日 20:18/ 0 赞/ 323 阅读

相关 JAVA技术选型

微服务（Microservice） Dubbo Spring Cloud 负载均衡【Load Balance】 [nginx服务器负载均衡，配置一个公

太过爱你忘了你带给我的痛/ 2022年03月17日 08:22/ 0 赞/ 379 阅读

相关 KKing技术选型

KKing是一个Springboot+Ant-Design-Pro-Vue实现的前后端分离Admin权限管理系统，源码在[Github][]，欢迎star 前

怼烎@/ 2022年03月16日 06:16/ 0 赞/ 381 阅读

相关前后端分离方案以及技术选型

一.什么是前后端分离？理解前后端分离大概可以从3个方面理解： 1. 交互形式 2. 代码组织形式 3. 开发模式与流程 1.1 交互形式前后端不分离

r囧r小猫/ 2021年07月04日 20:11/ 0 赞/ 628 阅读