RocketMQ入门指南：从零开始学习分布式消息队列技术

柔情只为你懂 2024-04-17 06:45 90阅读 0赞

#### RocketMQ ####

*  1. MQ介绍
 *   *  1.1 为什么要用MQ
     *  1.2 MQ的优点和缺点
     *  1.3 各种MQ产品的比较
 *  2. RocketMQ快速入门
 *   *  2.1 准备工作
     *   *  2.1.1 下载RocketMQ
         *  2.2.2 环境要求
     *  2.2 安装RocketMQ
     *   *  2.2.1 安装步骤
         *  2.2.2 目录介绍
     *  2.3 启动RocketMQ
     *  2.4 测试RocketMQ
     *   *  2.4.1 发送消息
         *  2.4.2 接收消息
     *  2.5 关闭RocketMQ

## 1. MQ介绍 ##

### 1.1 为什么要用MQ ###

消息队列是一种“先进先出”的数据结构  
![在这里插入图片描述][f2ae89e005ad4959b726373b84f49cf8.png]  
其应用场景主要包含以下3个方面

*  应用解耦

系统的耦合性越高，容错性就越低。以电商应用为例，用户创建订单后，如果耦合调用库存系统、物流系统、支付系统，任何一个子系统出了故障或者因为升级等原因暂时不可用，都会造成下单操作异常，影响用户使用体验。  
![在这里插入图片描述][5b2ef73e669f4898b99dae6f2533d33c.png]  
使用消息队列解耦合，系统的耦合性就会提高了。比如物流系统发生故障，需要几分钟才能来修复，在这段时间内，物流系统要处理的数据被缓存到消息队列中，用户的下单操作正常完成。当物流系统回复后，补充处理存在消息队列中的订单消息即可，终端系统感知不到物流系统发生过几分钟故障。  
![在这里插入图片描述][59fc45a39e9e43669552a7a09391abb2.png]

*  流量削峰  
    ![在这里插入图片描述][b3a70774bb1b4450a1bd048232609f32.png]

应用系统如果遇到系统请求流量的瞬间猛增，有可能会将系统压垮。有了消息队列可以将大量请求缓存起来，分散到很长一段时间处理，这样可以大大提到系统的稳定性和用户体验。  
![在这里插入图片描述][251af2ad64de4782b1e432eeac632413.png]  
一般情况，为了保证系统的稳定性，如果系统负载超过阈值，就会阻止用户请求，这会影响用户体验，而如果使用消息队列将请求缓存起来，等待系统处理完毕后通知用户下单完毕，这样总不能下单体验要好。

处于经济考量目的：

业务系统正常时段的QPS如果是1000，流量最高峰是10000，为了应对流量高峰配置高性能的服务器显然不划算，这时可以使用消息队列对峰值流量削峰。

*  数据分发  
    ![在这里插入图片描述][943c80f399bd4721a3f804cbfbda8fc0.png]

通过消息队列可以让数据在多个系统更加之间进行流通。数据的产生方不需要关心谁来使用数据，只需要将数据发送到消息队列，数据使用方直接在消息队列中直接获取数据即可  
![在这里插入图片描述][38c2803f21664f8db74d0af91420c84a.png]

### 1.2 MQ的优点和缺点 ###

优点：解耦、削峰、数据分发

缺点包含以下几点：

*  系统可用性降低
    
    系统引入的外部依赖越多，系统稳定性越差。一旦MQ宕机，就会对业务造成影响。
    
    如何保证MQ的高可用？
 *  系统复杂度提高
    
    MQ的加入大大增加了系统的复杂度，以前系统间是同步的远程调用，现在是通过MQ进行异步调用。
    
    如何保证消息没有被重复消费？怎么处理消息丢失情况？那么保证消息传递的顺序性？
 *  一致性问题
    
    A系统处理完业务，通过MQ给B、C、D三个系统发消息数据，如果B系统、C系统处理成功，D系统处理失败。
    
    如何保证消息数据处理的一致性？

### 1.3 各种MQ产品的比较 ###

常见的MQ产品包括Kafka、ActiveMQ、RabbitMQ、RocketMQ。  
![在这里插入图片描述][82571397643a4ac49e557c30b726545d.png]

## 2. RocketMQ快速入门 ##

RocketMQ是阿里巴巴2016年MQ中间件，使用Java语言开发，在阿里内部，RocketMQ承接了例如“双11”等高并发场景的消息流转，能够处理万亿级别的消息。

### 2.1 准备工作 ###

#### 2.1.1 下载RocketMQ ####

RocketMQ最新版本：4.5.1

[下载地址][Link 1]

#### 2.2.2 环境要求 ####

*  Linux64位系统
 *  JDK1.8(64位)
 *  源码安装需要安装Maven 3.2.x

### 2.2 安装RocketMQ ###

#### 2.2.1 安装步骤 ####

1.  解压安装包
2.  进入安装目录

#### 2.2.2 目录介绍 ####

*  bin：启动脚本，包括shell脚本和CMD脚本
 *  conf：实例配置文件 ，包括broker配置文件、logback配置文件等
 *  lib：依赖jar包，包括Netty、commons-lang、FastJSON等

### 2.3 启动RocketMQ ###

1.  启动NameServer

# 1.启动NameServer
    nohup sh bin/mqnamesrv &
    # 2.查看启动日志
    tail -f ~/logs/rocketmqlogs/namesrv.log

1.  启动Broker

# 1.启动Broker
    nohup sh bin/mqbroker -n localhost:9876 &
    # 2.查看启动日志
    tail -f ~/logs/rocketmqlogs/broker.log

*  问题描述：
    
    RocketMQ默认的虚拟机内存较大，启动Broker如果因为内存不足失败，需要编辑如下两个配置文件，修改JVM内存大小

# 编辑runbroker.sh和runserver.sh修改默认JVM大小
    vi runbroker.sh
    vi runserver.sh

*  参考设置：

`JAVA_OPT="${JAVA_OPT} -server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"`

### 2.4 测试RocketMQ ###

#### 2.4.1 发送消息 ####

# 1.设置环境变量
    export NAMESRV_ADDR=localhost:9876
    # 2.使用安装包的Demo发送消息
    sh bin/tools.sh org.apache.rocketmq.example.quickstart.Producer

#### 2.4.2 接收消息 ####

# 1.设置环境变量
    export NAMESRV_ADDR=localhost:9876
    # 2.接收消息
    sh bin/tools.sh org.apache.rocketmq.example.quickstart.Consumer

### 2.5 关闭RocketMQ ###

# 1.关闭NameServer
    sh bin/mqshutdown namesrv
    # 2.关闭Broker
    sh bin/mqshutdown broker

**后记  
????美好的一天，到此结束，下次继续努力！欲知后续，请看下回分解，写作不易，感谢大家的支持！！ ???**

[f2ae89e005ad4959b726373b84f49cf8.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/ee9038ae795f4e92bdaee103194cc1d0.png
[5b2ef73e669f4898b99dae6f2533d33c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/439c08ebf9d04a0cbd547bf4b28a6f30.png
[59fc45a39e9e43669552a7a09391abb2.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/dcd451968036438b8108e1bf36a5fd19.png
[b3a70774bb1b4450a1bd048232609f32.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/e25ddc5586214483bdaf58c738a0f2d1.png
[251af2ad64de4782b1e432eeac632413.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/458bc3ebe1ca4c21810e116fd6ca42f1.png
[943c80f399bd4721a3f804cbfbda8fc0.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/681e17ff50b74d68a8e89d51a8e480e0.png
[38c2803f21664f8db74d0af91420c84a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/92f42b61a64f42d78ed1daff6237e4dc.png
[82571397643a4ac49e557c30b726545d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/15/22b039e0a70445c6864606166db92348.png
[Link 1]: https://www.apache.org/dyn/closer.cgi?path=rocketmq/4.5.1/rocketmq-all-4.5.1-bin-release.zip