消息队列 MQ 入门
2023年11月21日
105
MQ 的概念MQ 全称 Message Queue(消息队列),是在消息的传输过程中保存消息的容器。用于分布式系统之间进行通信。MQ 的优势解耦系统的耦合性越高,容错性就越低,可维护性就越低。使用 MQ 使得应用间解耦,提升容错性和可维护性。具体而言在一个复杂的系统中,不同的模块或服务之间可能需要相互依赖,如果是直接使用函数调用或者 API 调用的方式会造成模块之间的耦合。

MQ 的概念

MQ 全称 Message Queue(消息队列),是在消息的传输过程中保存消息的容器。用于分布式系统之间进行通信。

image.png

MQ 的优势

解耦

系统的耦合性越高,容错性就越低,可维护性就越低。使用 MQ 使得应用间解耦,提升容错性和可维护性。

具体而言

在一个复杂的系统中,不同的模块或服务之间可能需要相互依赖,如果是直接使用函数调用或者 API 调用的方式会造成模块之间的耦合。当一个模块发生改变时,调用方和被调用方的代码要同时修改。而使用消息队列作为中间件,不同的模块就可以将消息发送到消息队列中, 也不需要知道具体的接收方是谁。接收方可以独立的消费消息,实现了模块之间的解耦。

异步

一次请求可能会涉及多个系统的多次服务调用,服务与服务之间响应时间不断叠加,如果使用同步的方式处理,会阻塞主线程或者进程,导致系统性能下降。而使用 MQ 可以将这些操作封装成消息,放入消息队列中,异步地处理这些操作,不影响主流程的执行,提高了系统的性能和响应速度。

削峰填谷

削峰填谷是一种在高并发场景下平衡系统压力的技术,通常用于平衡系统在高峰期和低谷期的资源利用率提高系统的吞吐量和响应速度在削峰填谷的过程中,通常使用消息队列作为缓冲区,将请求放入消息队列中,然后在系统负载低的时候进行处理这种方式可以将系统的峰值压力分散到较长的时间段内减少瞬时压力对系统的影响,从而提高系统的稳定性和可靠性。

MQ 的劣势

使用 MQ 中间件将面临以下两个问题:

  • 系统可用性降低系统引入的外部依赖越多,系统稳定性越差。一旦 MQ 宕机,就会对业务造成影响。如何保证 MQ 的高可用成为了新的挑战。

  • 系统复杂度提高。MQ 的加入大大增加了系统的复杂度,以前系统间是同步的远程调用,现在是通过 MQ 进行异步调用。如何保证消息不被丢失等情况?

RabbitMQ官网:www.rabbitmq.com/

安装RabbitMQ

首先安装了Homebrew,并且确保是最新:

brew update


使用一下命令安装 RabbitMQ 服务器:

brew rabbitmq


安装路径:

Intel Mac,应该在:/usr/local/opt/rabbitmq/sbin

Apple Mac ,应该在:/opt/homebrew/Cellar/rabbitmq

也可以使用 brew info rabbitmq 命令来查找:

image.png

RabbitMQ 服务器脚本和CLI工具

Intel Mac 位于:/usr/local/Cellar/rabbitmq/{version}/sbin

Apple Mac 位于:/opt/homebrew/Cellar/rabbitmq/{version}/

登录管理端(需先启动):默认账户是(guest/guest)

http://localhost:15672

image.png

启动 RabbitMQ Server

前台启动:

CONF_ENV_FILE="/opt/homebrew/etc/rabbitmq/rabbitmq-env.conf" /opt/homebrew/opt/rabbitmq/sbin/rabbitmq-server


后台启动:

brew services start rabbitmq


停止服务:

brew services stop rabbitmq


或者直接使用 CLI 工具:

/opt/homebrew/sbin/rabbitmqctl shutdown



配置环境变量:

# for macOS Intel export 
PATH=$PATH:/usr/local/sbin 
# for Apple Silicon export 
PATH=$PATH:/opt/homebrew/sbin


社区插件下载安装

www.rabbitmq.com/community-p…

安装rabbitmq_delayed_message_exchange

image.png


找到对应的版本 下载:

image.png


放到rabbitmq安装路径下的plugins目录下:

image.png

使用以下命令启用插件:

../sbin/rabbitmq-plugins enable rabbitmq_delayed_message_exchange


enable后面加插件名,复制前缀即可。若rabbitmq未启动,则不会生效,需要在命令后面再加上 --offline。

在 Spring 项目中使用 RabbitMQ

大体分为以下步骤:

  1. 添加RabbitMQ依赖:在pom.xml文件中添加以下Maven依赖项,以引入RabbitMQ的相关库:

<dependency>     
    <groupId>org.springframework.boot</groupId>     
    <artifactId>spring-boot-starter-amqp</artifactId> 
</dependency>


  1. 配置RabbitMQ连接:在application.properties(或application.yml)文件中添加RabbitMQ的连接配置,包括URL、端口、用户名和密码等信息。例如:

spring.rabbitmq.host=localhost 
spring.rabbitmq.port=5672 
spring.rabbitmq.username=username 
spring.rabbitmq.password=password


  1. 创建消息发送者和接收者:在Spring项目中,可以通过注解来定义消息发送者和接收者。

  • 消息发送者:使用RabbitTemplate类来发送消息。创建一个类,并使用@Component注解标记为组件,然后使用@Autowired注解将RabbitTemplate实例注入到该类中。你可以调用convertAndSend()方法来发送消息,指定交换机名称、路由键和消息内容。例如:

image.png

  • 消息接收者:使用@RabbitListener注解来标记一个方法,该方法将用于处理接收到的消息。创建一个类,并使用@Component注解标记为组件,然后定义一个带有@RabbitListener注解的方法,指定监听的队列名称。例如:

image.png

  1. 配置交换机和队列:可以使用RabbitAdmin类来在Spring项目中自动声明交换机和队列。在你的配置类中,使用@Bean注解创建一个RabbitAdmin实例,并为交换机和队列设置属性。例如:

image.png

这些是在Spring项目中使用RabbitMQ的基本步骤。实际还应根据实际需求进行进一步的配置和扩展,例如使用交换机和绑定、设置消息确认等功能。

RabbitMQ 的工作模式

RabbitMQ 一共有六种(工作模式消息分发方式)。

image.png


官网对应介绍:www.rabbitmq.com/getstarted.…

  1. 简单模式(HelloWorld)一个生产者、一个消费者,不需要设置交换机(使用默认的交换机)。

  2. 工作队列模式(Work Queue)一个生产者、多个消费者(竞争关系),不需要设置交换机(使用默认的交换机)。

  3. 发布订阅模式(Publish/Subscribe) 需要设置类型为 fanout 的交换机,并且交换机和队列进行绑定,当发送消息到交换机后,交换机会将消息发送到绑定的队列。

  4. 路由模式(Routing) 需要设置类型为 fanout 的交换机,并且交换机和队列进行绑定,当发送消息到交换机后,交换机会将消息发送到绑定的队列。

  5. 主题模式(Topics) 需要设置类型为 fanout 的交换机,并且交换机和队列进行绑定,当发送消息到交换机后,交换机会将消息发送到绑定的队列。

  6. RPC模式(不太算MQ)