0


RabbitMQ

同步调用:一次只能干一件事

同步调用的优点:
时效性高,可以立即得到结果

同步调用的问题:

  • 耦合度高
  • 性能下降
  • 有额外的资源消耗
  • 有级联失败的问题

异步通信:一次可以同时做很多事

优点:

  • 耦合度低
  • 性能提升
  • 故障隔离
  • 流量削峰

缺点:

  • 依赖于Broker(事件代理者)的可靠性,安全性,性能提升能力
  • 架构变得更加复杂

MQ(MessageQueue)

MQ就是消息队列,就是事件驱动架构中的Broker

常用的MQ:RabbitMQ,ActiveMQ,RocketMQ,Kafka

docker安装RabbitMq

第一步:拉取镜像

  1. docker pull rabbitmq:3.8-management

第二步:启动rabbitmq

方式一:直接启动
  1. docker run \
  2. -e RABBITMQ_DEFAULT_USER=hhh \
  3. -e RABBITMQ_DEFAULT_PASS=1234 \
  4. -v mq-plugins:/plugins \
  5. --name mq \
  6. --hostname mq \
  7. -p 15672:15672 \
  8. -p 5672:5672 \
  9. -d \
  10. rabbitmq:3.8-management
  1. # 设置环境变量 用户名是 hhh
  2. -e RABBITMQ_DEFAULT_USER=hhh \
  3. # 设置环境变量 密码是 1234
  4. -e RABBITMQ_DEFAULT_PASS=1234 \
  5. # 挂载数据卷,如果没有该数据卷会自己创建
  6. -v mq-plugins:/plugins \
  7. # mq的名字
  8. --name mq \
  9. # 主机名 这里不配置也可以
  10. --hostname mq \
  11. # web可视化终端监控端口;mq的ui界面管理平台端口
  12. -p 15672:15672 \
  13. # 程序与mq交互的访问端口;发消息和收消息的端口
  14. -p 5672:5672 \
  15. # 后端运行
  16. -d \
  17. # 镜像名称
  18. rabbitmq:3.8-management
  1. [root@localhost docker-compose]# docker ps -a
  2. CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
  3. ea34ab693409 rabbitmq:3.8-management "docker-entrypoint.s…" 45 seconds ago Up 44 seconds 4369/tcp, 5671/tcp, 0.0.0.0:5672->5672/tcp, :::5672->5672/tcp, 15671/tcp, 15691-15692/tcp, 25672/tcp, 0.0.0.0:15672->15672/tcp, :::15672->15672/tcp mq

启动成功

方式二:使用docker-compose创建并运行容器

我们先把之前创建的容器删除

  1. docker rm -f mq

yml文件内容

  1. version: "3.2"
  2. services:
  3. mysql:
  4. image: mysql:5.7.25 #使用的镜像
  5. container_name: mysql_container #容器名字
  6. environment:
  7. MYSQL_ROOT_PASSWORD: 1234
  8. volumes: #数据卷,绑定容器内的文件和宿主机文件
  9. - "/tmp/mysql/data:/var/lib/mysql"
  10. - "/tmp/mysql/conf/my.cnf:/etc/mysql/conf.d/my.cnf"
  11. ports:
  12. - "3306:3306"
  13. radditmq:
  14. image: rabbitmq:3.8-management
  15. container_name: mq
  16. environment:
  17. RABBITMQ_DEFAULT_USER: hhh
  18. RABBITMQ_DEFAULT_PASS: 1234
  19. volumes:
  20. - "mq-plugins:/plugins"
  21. ports:
  22. - "15672:15672"
  23. - "5672:5672"
  24. volumes:
  25. mq-plugins: {} #要创建的数据卷

在yml文件所在目录使用命令

docker-compose up -d

  1. [root@localhost docker-compose]# ll
  2. 总用量 4
  3. -rw-r--r--. 1 root root 653 8 19 12:06 docker-compose.yml
  4. drwxr-xr-x. 2 root root 39 8 18 21:35 myweb-service
  5. [root@localhost docker-compose]# docker up -d

运行成功

[root@localhost docker-compose]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
1faf568f83de mysql:5.7.25 "docker-entrypoint.s…" 45 seconds ago Up 44 seconds 0.0.0.0:3306->3306/tcp, :::3306->3306/tcp, 33060/tcp mysql_container
ea34ab693409 rabbitmq:3.8-management "docker-entrypoint.s…" 45 seconds ago Up 44 seconds 4369/tcp, 5671/tcp, 0.0.0.0:5672->5672/tcp, :::5672->5672/tcp, 15671/tcp, 15691-15692/tcp, 25672/tcp, 0.0.0.0:15672->15672/tcp, :::15672->15672/tcp mq

RabbitMQ消息模型

一.基本消息队列(BasicQueue)

生产者将消息发送到队列,消费者从队列中获取消息,队列是存储消息的缓冲区。

二. 工作消息队列(WorkQueue)

工作消息队列是基本消息队列的增强版,具有多个消费者消费队列的消息。假设消息队列中积压了多个消息,那么此时可以使用多个消费者来消费队列中的消息。效率要比基本消息队列模型高。

三.发布订阅(Publish、Subscribe)

1.Fanout Exchange:广播

将消息交给所有绑定到交换机的队列,生产者发送的消息,只能发送到交换机,交换机来决定要发给哪个队列,生产者无法决定。交换机把消息发送给绑定过的****所有队列.队列的消费者都能拿到消息。实现一条消息被多个消费者消费.

2.Direct Exchange:路由

在广播模式中,生产者发布消息,所有消费者都可以获取所有消息.

使用路由模式时,生产者向Exchange发送消息,发送消息时,会指定一个routing key

Exchange(交换机)接收生产者的消息后,就会把把消息递交给 与routing key完全匹配的队列

3.topic Exchange:主题

1.Topic类型的Exchange与Direct相比,都是可以根据RoutingKey把消息路由到不同的队列。只不过Topic类型Exchange可以让队列在绑定Routing key 的时候使用通配符!

2.Routingkey 一般都是有一个或多个单词组成,多个单词之间以”.”分割,例如: item.insert

3.通配符规则:

  1. #

:匹配一个或多个词

  1. *

:匹配恰好1个词

SpringAMQP

第一步:先创建一个SpringBoot项目,然后在当前项目创建出两个新的模块,分别命名为publisher,consumer。

第二步:修改主项目的打包方式为pom,java版本为1.8,springboot版本为2.3.10.RELEASE,并导入amqp的依赖

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  3. xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
  4. <modelVersion>4.0.0</modelVersion>
  5. <parent>
  6. <groupId>org.springframework.boot</groupId>
  7. <artifactId>spring-boot-starter-parent</artifactId>
  8. <version>2.3.10.RELEASE</version>
  9. <relativePath/> <!-- lookup parent from repository -->
  10. </parent>
  11. <groupId>com.hhh</groupId>
  12. <artifactId>spring_day10_mq</artifactId>
  13. <version>0.0.1-SNAPSHOT</version>
  14. <name>spring_day10_mq</name>
  15. <description>spring_day10_mq</description>
  16. <packaging>pom</packaging>
  17. <properties>
  18. <java.version>1.8</java.version>
  19. </properties>
  20. <dependencies>
  21. <!--AMQP依赖,包含RabbitMQ-->
  22. <dependency>
  23. <groupId>org.springframework.boot</groupId>
  24. <artifactId>spring-boot-starter-amqp</artifactId>
  25. </dependency>
  26. <dependency>
  27. <groupId>org.springframework.boot</groupId>
  28. <artifactId>spring-boot-starter-test</artifactId>
  29. <scope>test</scope>
  30. </dependency>
  31. </dependencies>
  32. <build>
  33. <plugins>
  34. <plugin>
  35. <groupId>org.springframework.boot</groupId>
  36. <artifactId>spring-boot-maven-plugin</artifactId>
  37. </plugin>
  38. </plugins>
  39. </build>
  40. </project>

第三步:让两个模块继承这个主项目的依赖,使用<parent>标签

注意:模块的<artifactId>publisher</artifactId>不能少

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  3. xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
  4. <modelVersion>4.0.0</modelVersion>
  5. <parent>
  6. <groupId>com.hhh</groupId>
  7. <artifactId>spring_day10_mq</artifactId>
  8. <version>0.0.1-SNAPSHOT</version>
  9. </parent>
  10. <artifactId>publisher</artifactId>
  11. </project>
  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  3. xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
  4. <modelVersion>4.0.0</modelVersion>
  5. <parent>
  6. <groupId>com.hhh</groupId>
  7. <artifactId>spring_day10_mq</artifactId>
  8. <version>0.0.1-SNAPSHOT</version>
  9. </parent>
  10. <artifactId>consumer</artifactId>
  11. </project>

第四步:在两个子模块下的applicaton.yml文件下配置连接RabbitMQ的信息

  1. logging:
  2. pattern:
  3. dateformat: MM-dd HH:mm:ss:SSS #日志文件的格式
  4. spring:
  5. rabbitmq:
  6. host: 192.168.230.100 # 主机名
  7. port: 5672 # 发送消息和接收消息的端口号
  8. virtual-host: / # 虚拟主机
  9. username: hhh # 用户名
  10. password: 1234 # 密码

使用SpringAMQP处理基本消息队列

第一步:在publisher模块中书写发送消息队列的类

  1. @RunWith(SpringRunner.class)//TODO:是一个测试启动器,可以加载SpringBoot测试注解,让测试方法在Spring容器环境下执行
  2. @SpringBootTest
  3. public class BaseMessage {
  4. @Autowired
  5. RabbitTemplate rabbitTemplate;
  6. @Test
  7. public void simpleMessage(){
  8. //1.定义队列名字
  9. String queue="simple.queue";
  10. //2.定义消息内容
  11. String msg="你好,这是hhh发送的消息";
  12. //3.发送消息
  13. rabbitTemplate.convertAndSend(queue,msg);
  14. }
  15. }

点击发送之后,可以发现消息队列的总数变成1

第二步: 在consumer模块书写接收消息队列的类

  1. //TODO:把这个交给Spring容器管理
  2. @Component
  3. public class BaseMessageListener {
  4. @RabbitListener(queues = "simple.queue")//只接受simple.queue队列的消息
  5. public void getBaseMassage(String msg){//定义参数来接收消息
  6. System.out.println(msg);
  7. }
  8. }

启动SpringBoot引导类

接收成功,消息队列总数变成0

使用SpringAMQP处理工作消息队列

思路就是使用多个监听类,来接收同一个消息队列的消息

publisher模块中发送消息的类

  1. @Test
  2. public void workMessage(){
  3. //1.定义队列名字
  4. String queue="simple.queue";
  5. //2.定义消息
  6. String msg="这是工作消息";
  7. //3.发送消息
  8. for(int i=0;i<50;i++){
  9. rabbitTemplate.convertAndSend(queue,msg+i);
  10. }
  11. }

consumer模块中接收消息的类

  1. public class BaseMessageListener {
  2. @RabbitListener(queues = "simple.queue")
  3. public void getWorkMessage1(String msg) throws InterruptedException {
  4. System.out.println("这是消费者1:"+msg);
  5. Thread.sleep(20);//休息20毫秒
  6. }
  7. @RabbitListener(queues = "simple.queue")
  8. public void getWorkMessage2(String msg) throws InterruptedException {
  9. System.out.println("这是消费者2:"+msg);
  10. Thread.sleep(50);//休息50毫秒
  11. }
  12. }

启动后发现这两个消费者类是平分了这些消息

是因为消息队列会把消息分配平均交给负责监听此消息队列的类,这样做的弊端就是,有的消费者类很快就能执行完,而有可能会很满,导致效率底下,所以我们可以进行修改

在consumer模块中的application.yml文件中添加prefetch

  1. spring:
  2. rabbitmq:
  3. host: 192.168.230.100 #主机名
  4. port: 5672 #用于发送信息和接收信息的端口号
  5. virtual-host: / #虚拟主机
  6. username: hhh #用户名
  7. password: 1234 #密码
  8. listener:
  9. simple:
  10. prefetch: 1
  1. prefetch:
  2. 预取:**每次将队列中的消息发送给消费者一个消息,等消费者处理完后再继续给一个消息**
  3. 这样一来,处理消息快的消费者就会处理更多的消息
  4. 不修改之前,是把消息队列里的消息进行平分

可以发现处理快的消费者就可以处理更多的消息

使用SpringAMQP处理发布订阅之广播

在广播模式下,消息发送流程是这样的:

  • 1) 可以有多个队列
  • 2) 每个队列都要绑定到Exchange(交换机)
  • 3) 生产者发送的消息,只能发送到交换机,交换机来决定要发给哪个队列,生产者无法决定
  • 4) 交换机把消息发送给绑定过的所有队列
  • 5) 订阅队列的消费者都能拿到消息

因此我们要

  • 创建一个交换机 itcast.fanout,类型是Fanout
  • 创建两个队列fanout.queue1和fanout.queue2,绑定到交换机itcast.fanout

publisher模块中发送消息的类

  1. @RunWith(SpringRunner.class)
  2. @SpringBootTest
  3. public class FanoutMessage {
  4. @Autowired
  5. private RabbitTemplate rabbitTemplate;
  6. @Test
  7. public void test(){
  8. //定义交换机名字
  9. String exchangeName="hhh.fanout";
  10. //定义消息
  11. String msg="你好呀,fanout";
  12. //发送消息
  13. //第二个参数是RoutingKey,因为这里使用的广播类型(让于其绑定的消息队列都收到消息),所以设置为空
  14. rabbitTemplate.convertAndSend(exchangeName,"",msg);
  15. }
  16. }

consumer模块中接收消息的类

  1. @Component
  2. public class FanoutListener {
  3. //这里创建了一个消息队列fanout.queue1,和一个fanout类型的交换机(如果本来存在就不会重新创建),并且绑定
  4. //绑定的同时也指定了这个类监听消息队列fanout.queue1
  5. @RabbitListener(bindings = @QueueBinding(value = @Queue("fanout.queue1"),
  6. exchange = @Exchange(name="hhh.fanout",type = ExchangeTypes.FANOUT)
  7. ))
  8. public void getFanoutMessage1(String msg){
  9. System.out.println("这是消费者1:"+msg);
  10. }
  11. @RabbitListener(bindings = @QueueBinding(value = @Queue("fanout.queue2"),
  12. exchange =@Exchange(name="hhh.fanout",type = ExchangeTypes.FANOUT)
  13. ))
  14. public void getFanoutMessage2(String msg){
  15. System.out.println("这是消费者2:"+msg);
  16. }
  17. }

结果:两个消费者(都与交换机进行绑定)都可以接收到消息

我们也可以使用配置类来创建交换机和队列,并绑定

  1. @Configuration
  2. public class FanoutConfig {
  3. //创建fanoutExchange交换机,并交给IoC容器,bean id 为getFanoutExchange
  4. @Bean
  5. public FanoutExchange getFanoutExchange(){
  6. return new FanoutExchange("hhh.fanout");
  7. }
  8. //创建消息队列1,并交给IoC容器,bean id 为getQueue1
  9. @Bean
  10. public Queue getQueue1(){
  11. return new Queue("fanout.queue1");
  12. }
  13. //创建消息队列2,并交给IoC容器,bean id 为getQueue2
  14. @Bean
  15. public Queue getQueue2(){
  16. return new Queue("fanout.queue2");
  17. }
  18. //TODO:将消息队列绑定到交换机上
  19. //TODO:注意:由于SpringBoot会帮我们创建交换器类型,和Queue类型的bean,而我们又自己创建了相同类型的bean
  20. //我们这里要指定bean的名字,不然Spring自动装配就会报错,不知道要装配哪个bean
  21. //TODO:因此我们要让Spring根据bean的id来进行注入
  22. @Bean
  23. public Binding bindingQueue1ToExchange(FanoutExchange getFanoutExchange,Queue getQueue1){
  24. return BindingBuilder.bind(getQueue1).to(getFanoutExchange);
  25. }
  26. @Bean
  27. public Binding bindingQueue2ToExchange(FanoutExchange getFanoutExchange,Queue getQueue2){
  28. return BindingBuilder.bind(getQueue2).to(getFanoutExchange);
  29. }
  30. }
  1. @Component
  2. public class FanoutListener {
  3. //这里创建了一个消息队列fanout.queue1,和一个fanout类型的交换机(如果本来存在就不会重新创建),并且绑定
  4. //绑定的同时也指定了这个类监听消息队列fanout.queue1
  5. /* @RabbitListener(bindings = @QueueBinding(value = @Queue("fanout.queue1"),
  6. exchange = @Exchange(name="hhh.fanout",type = ExchangeTypes.FANOUT)
  7. ))*/
  8. @RabbitListener(queues = "fanout.queue1")
  9. public void getFanoutMessage1(String msg){
  10. System.out.println("这是消费者1:"+msg);
  11. }
  12. /*@RabbitListener(bindings = @QueueBinding(value = @Queue("fanout.queue2"),
  13. exchange =@Exchange(name="hhh.fanout",type = ExchangeTypes.FANOUT)
  14. ))*/
  15. @RabbitListener(queues = "fanout.queue2")
  16. public void getFanoutMessage2(String msg){
  17. System.out.println("这是消费者2:"+msg);
  18. }
  19. }

使用SpringAMQP处理发布订阅之路由

在Direct模型下:

  • 队列与交换机的绑定,不能是任意绑定了,而是要指定一个RoutingKey(路由key)
  • 消息的发送方在 向 Exchange发送消息时,也必须指定消息的 RoutingKey
  • Exchange不再把消息交给每一个绑定的队列,而是根据消息的Routing Key进行判断,只有队列的Routingkey与消息的 Routing key完全一致,才会接收到消息

consumer模块中接收消息的类

  1. @Configuration
  2. public class DirectMessageListener {
  3. @RabbitListener(bindings = @QueueBinding(value = @Queue("direct.queue1"),
  4. exchange = @Exchange(name="hhh.direct",type= ExchangeTypes.DIRECT),
  5. key = {"yellow","red"} //指定这个消息队列绑定的RouterKey
  6. ))
  7. public void getDirectMessage1(String msg){
  8. System.out.println("这是消费者1:"+msg);
  9. }
  10. @RabbitListener(bindings = @QueueBinding(value = @Queue("direct.queue"),
  11. exchange = @Exchange(name="hhh.direct",type=ExchangeTypes.DIRECT),
  12. key={"yellow","blue"} //指定这个消息队列绑定的RouterKey
  13. ))
  14. public void getDirectMessage2(String msg){
  15. System.out.println("这是消费者2:"+msg);
  16. }
  17. }

publisher模块中发送消息的类

  1. @RunWith(SpringRunner.class)
  2. @SpringBootTest
  3. public class DirectMessage {
  4. @Autowired
  5. private RabbitTemplate rabbitTemplate;
  6. @Test
  7. public void test(){
  8. //定义交换机名字
  9. String exchangeName="hhh.direct";
  10. //定义消息
  11. String msg="你好,direct";
  12. //发送消息,指定发送给RouterKey为yellow的消息队列
  13. rabbitTemplate.convertAndSend(exchangeName,"yellow",msg);
  14. }
  15. }

结果:两个消费者都收到了消息队列,因为他们都有yellow这个RouterKey

使用SpringAMQP处理发布订阅之主题

  1. Topic

类型的

  1. Exchange

  1. Direct

相比,都是可以根据

  1. RoutingKey

把消息路由到不同的队列。只不过

  1. Topic

类型

  1. Exchange

可以让队列在绑定

  1. Routing key

的时候使用通配符!

  1. Routingkey

一般都是有一个或多个单词组成,多个单词之间以”.”分割,例如:

  1. item.insert

通配符规则:

  1. #

:匹配一个或多个词

  1. *

:匹配不多不少恰好1个词

举例:

  1. item.#

:能够匹配

  1. item.spu.insert

或者

  1. item.spu
  1. item.*

:只能匹配

  1. item.spu

consumer模块中接收消息的类

  1. @RabbitListener(bindings = @QueueBinding(
  2. value = @Queue(name = "topic.queue1"),
  3. exchange = @Exchange(name = "hhh.topic", type = ExchangeTypes.TOPIC),
  4. key = "china.#" //key = "china.#" 表示路由key只要以china开始都会接收
  5. ))
  6. public void listenTopicQueue1(String msg) {
  7. System.out.println("消费者接收到topic.queue1的消息:【" + msg + "】");
  8. }
  9. @RabbitListener(bindings = @QueueBinding(
  10. value = @Queue(name = "topic.queue2"),
  11. exchange = @Exchange(name = "hhh.topic", type = ExchangeTypes.TOPIC),
  12. key = "#.news" //表示路由key只要以news结尾都会接收
  13. ))
  14. public void listenTopicQueue2(String msg) {
  15. System.out.println("消费者接收到topic.queue2的消息:【" + msg + "】");
  16. }

publisher模块中发送消息的类

  1. @Test
  2. public void testSendTopicExchange() {
  3. // 交换机名称
  4. String exchangeName = "itcast.topic";
  5. // 消息
  6. String message = "你好,topic";
  7. // 发送消息
  8. rabbitTemplate.convertAndSend(exchangeName, "china.news", message);
  9. }

配置JSON转换器

默认情况下Spring采用的序列化方式是JDK序列化,JDK序列化存在下列问题:

  • 数据体积过大
  • 有安全漏洞
  • 可读性差

我们希望消息体的体积更小、可读性更高,因此可以使用JSON方式来做序列化和反序列化。

在主项目的pom.xml文件中导入依赖

  1. <dependency>
  2. <groupId>com.fasterxml.jackson.dataformat</groupId>
  3. <artifactId>jackson-dataformat-xml</artifactId>
  4. <version>2.9.10</version>
  5. </dependency>

在两个子模块中书写配置类,将MessageConverter交给IoC容器

  1. /*
  2. 消息转换器
  3. */
  4. @Configuration
  5. public class MessageConverterConfig {
  6. @Bean//将json转换器对象放到IoC容器
  7. public MessageConverter jsonMessageConverter(){
  8. return new Jackson2JsonMessageConverter();
  9. }
  10. }

本文转载自: https://blog.csdn.net/luosuss/article/details/141320598
版权归原作者 落落落sss 所有, 如有侵权,请联系我们删除。

“RabbitMQ”的评论:

还没有评论