0


RabbitMQ的安装和使用

RabbitMQ

MQ基本概念

1.MQ概述

MQ全称 Message Queue([kjuː])(消息队列),是在消息的传输过程中保存消息的容器。多用于分布式系统之间进行通信。

(队列是一种容器,用于存放数据的都是容器,存放消息的就是消息队列)

分布式系统的调用:

方式一:直接调用

order

product

account

方式二:间接调用

A将数据存放到中间一个系统,通过中间的系统发送到B

中间系统可以成为中间件MQ

生产者-》中间件《--消费者

MQ是用于存放消息的中间件

被调用者叫生产者 调用者是消费者(微服务中说过)

2.MQ的优势和劣势

2.1 优势

应用解耦:提高系统容错性和可维护性。

异步提速:提升用户体验和系统吞吐量。

削峰填谷:提高系统稳定性。

应用解耦

系统的耦合性越高,容错性就越低,可维护性就越低。

例:订单系统 的时候 依赖于库存系统 支付系统 物流系统 当库存系统发生异常,就有可能导致订单系统发生异常 下单失败

追加系统 x 就只能修改订单系统更改代码 导致维护性比较低

使用 MQ 使得应用间解耦,提升容错性和可维护性

库存系统宕机订单系统影响不大,因为消息已经发送到mq了当库存系统恢复的时候就可以正常使用了。

追加系统的时候跟订单系统无关

已将数据发送到MQ了,直接从MQ中拿就行了,无需更改订单中的代码,可维护性提高

异步提速

一个下单操作耗时:20 + 300 + 300 + 300 = 920ms

用户点击完下单按钮后,需要等待920ms才能得到下单响应,太慢!

用户点击完下单按钮后,只需等待25ms就能得到下单响应 (20 + 5 = 25ms)。

提升用户体验和系统吞吐量(单位时间内处理请求的数目)。

以前920ms处理一个请求,现在25ms处理一个请求,系统的吞吐量(单位时间内访问量)增加

削峰

使用了 MQ 之后,限制消费消息的速度为1000,这样一来,高峰期产生的数据势必会被积压在 MQ 中,高峰就被“削”掉了,但是因为消息积压,在高峰期过后的一段时间内,消费消息的速度还是会维持在1000,直到消费完积压的消息,这就叫做“填谷”。

使用MQ后,可以提高系统稳定性。

2.2 劣势

系统可用性降低

系统引入的外部依赖越多,系统稳定性越差。一旦 MQ 宕机,就会对业务造成影响。如何保证MQ的高可用?

系统复杂度提高

MQ 的加入大大增加了系统的复杂度,以前系统间是同步的远程调用,现在是通过 MQ 进行异步调用。如何保证消息没有被重复消费?怎么处理消息丢失情况?那么保证消息传递的顺序性?

一致性问题

A 系统处理完业务,通过 MQ 给B、C、D三个系统发消息数据,如果 B 系统、C 系统处理成功,D 系统处理失败。如何保证消息数据处理的一致性?

2.3 既然 MQ 有优势也有劣势,那么使用 MQ 需要满足什么条件呢?
  1. 生产者不需要从消费者处获得反馈。引入消息队列之前的直接调用,其接口的返回值应该为空,这才让明明下层的动作还没做,上层却当成动作做完了继续往后走,即所谓异步成为了可能。

订单->库存

  1. 容许短暂的不一致性。
  2. 确实是用了有效果。即解耦、提速、削峰这些方面的收益,超过加入MQ,管理MQ这些成本。

3. 常见的MQ产品

目前业界有很多的 MQ 产品,例如 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMq等,也有直接使用 Redis 充当消息队列的案例,而这些消息队列产品,各有侧重,在实际选型时,需要结合自身需求及 MQ 产品特征,综合考虑。

RabbitMQ基本介绍

AMQP,即 Advanced Message Queuing Protocol(英[ˈprəʊtəkɒl])(高级消息队列协议),是一个网络协议,是应用层协议的一个开放标准,为面向消息的中间件设计。基于此协议的客户端与消息中间件可传递消息,并不受客户端/中间件不同产品,不同的开发语言等条件的限制。2006年,AMQP 规范发布。类比HTTP。

消息队列中间件

exchange 交换机 分发消息 分发到不同的容器 queue 通过路由来处理

queue 容器

routes 路由

生产者 发布消息到exchange exchange 通过不同的路由规则发布/路由 给不同的queue 进行存储 cunsumer通过队列去监听拿到消息进行消费

2007年,Rabbit 技术公司基于 AMQP 标准开发的 RabbitMQ 1.0 发布。RabbitMQ 采用 Erlang 语言开发。

Erlang 语言由 Ericson 设计,专门为开发高并发和分布式系统的一种语言,在电信领域使用广泛。

1. RabbitMQ 基础架构

Broker 中间者 服务

procedure 和consumer都是客户端

客户端通过链接和服务端进行通信 所以需要建立起来连接 然后进行通信a

使用channel(管道)节省资源

一个rabbitmq里面有很多的虚拟机 相当于mysql里面有很多数据库,数据库里面有很多表,都是独立的。

每个虚拟机里面有很多的exchange和queue 独立分区的作用

2. RabbitMQ 中的相关概念

Broker:接收和分发消息的应用,RabbitMQ Server就是 Message Broker。

Virtual host:出于多租户和安全因素设计的,把 AMQP 的基本组件划分到一个虚拟的分组中,类似于网络中的 namespace 概念。当多个不同的用户使用同一个 RabbitMQ server 提供的服务时,可以划分出多个vhost,每个用户在自己的 vhost 创建 exchange/queue 等。

Connection:publisher/consumer 和 broker 之间的 TCP 连接。

Channel:如果每一次访问 RabbitMQ 都建立一个 Connection,在消息量大的时候建立 TCP Connection的开销将是巨大的,效率也较低。Channel 是在 connection 内部建立的逻辑连接,如果应用程序支持多线程,通常每个thread创建单独的 channel 进行通讯,AMQP method 包含了channel id 帮助客户端和message broker 识别 channel,所以 channel 之间是完全隔离的。Channel 作为轻量级的 Connection 极大减少了操作系统建立 TCP connection 的开销。

Exchange:message 到达 broker 的第一站,根据分发规则,匹配查询表中的 routing key,分发消息到queue 中去。常用的类型有:

direct (point-to-point)

topic (publish-subscribe)

fanout (multicast)

Queue:消息最终被送到这里等待 consumer 取走

Binding:exchange 和 queue 之间的虚拟连接,binding 中可以包含 routing key。Binding 信息被保存到 exchange 中的查询表中,用于 message 的分发依据

3. RabbitMQ的6 种工作模式

RabbitMQ 提供了 6 种工作模式:

简单模式、work queues、Publish/Subscribe 发布与订阅模式、Routing 路由模式、Topics 主题模式、RPC 远程调用模式(远程调用,不太算 MQ;暂不作介绍)。==

官网对应模式介绍:https://www.rabbitmq.com/getstarted.html

4. AMQP 和 JMS

MQ是消息通信的模型;

实现MQ的大致有两种主流方式:AMQP、JMS。
4.1 AMQP

AMQP是一种协议,更准确的说是一种binary wire-level protocol(链接协议)。这是其和JMS的本质差别,AMQP不从API层进行限定,而是直接定义网络交换的数据格式。

4.2 JMS
JMS即Java消息服务(Java Message Service)应用程序接口,

是一个Java平台中关于面向消息中间件(MOM)的API,用于在两个应用程序之间,或分布式系统中发送消息,进行异步通信。

(规定了消息客户端的一套api的东西,rabbitmq没有遵循规则)

JMS 是 JavaEE 规范中的一种,类比JDBC。

4.3 AMQP与 JMS 区别

JMS是定义了统一的接口,来对消息操作进行统一;AMQP是通过规定协议来统一数据交互的格式。

JMS限定了必须使用Java语言;AMQP只是协议,不规定实现方式,因此是跨语言的。

JMS规定了两种消息模式;而AMQP的消息模式更加丰富

4.4 再谈市场上常见的消息队列

ActiveMQ:基于JMS

ZeroMQ:基于C语言开发

RabbitMQ:基于AMQP协议,erlang语言开发,稳定性好

RocketMQ:基于JMS,阿里巴巴产品

Kafka:类似MQ的产品;分布式消息系统,高吞吐量。

安装rabbitmq

安装erlang

yum install -y erlang
​

验证是否安装成功

 erl -version
​

安装rabbitmq

yum install -y rabbitmq-server

安装成功后启用web管理插件

rabbitmq-plugins enable rabbitmq_management
​

启动mq

systemctl enable rabbitmq-server.service # 设置开机自启动
systemctl start rabbitmq-server.service # 启动
​
​

访问rabbitmq的页面

rabbitmq-server的端口号是5672 对应的web管理端是15672

访问的页面是ip地址:页面端口号

http://192.168.174.66:15672/

默认的用户是 guest/guest

添加用户以及对应的角色

Spring Boot整合RabbitMQ

1. 简介

在Spring项目中,可以使用Spring-Rabbit去操作RabbitMQ

尤其是在spring boot项目中只需要引入对应的amqp启动器依赖即可,方便的使用RabbitTemplate发送消息,使用注解接收消息。

一般在开发过程中:

生产者工程:
  1. application.yml文件配置相关信息;
  2. 在生产者工程中编写配置类,用于创建交换机和队列,并进行绑定
  3. 注入RabbitTemplate对象,通过RabbitTemplate对象发送消息到交换机
消费者工程:
  1. application.yml文件配置相关信息
  2. 创建消息处理类,用于接收队列中的消息并进行处理

2.搭建生产者工程

2.1 创建工程

创建生产者工程 springboot-rabbitmq-producer

2.2 添加依赖

修改pom.xml文件内容为如下:

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
​
    <groupId>com.yyl</groupId>
    <artifactId>producer-springboot</artifactId>
    <version>1.0-SNAPSHOT</version>
​
    <!--1. 父工程依赖 -->
    <parent>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-parent</artifactId>
        <version>2.17.4</version>
    </parent>
​
    <dependencies>
        <!--2. rabbitmq-->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-amqp</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
        </dependency>
    </dependencies>
​
</project>

2.3 启动类

package com.yyl;

import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;

@SpringBootApplication
public class ProducerApplication {

    public static void main(String[] args) {
        SpringApplication.run(ProducerApplication.class);
    }
}

2.4 配置RabbitMQ

配置文件

创建application.yml,内容如下:

# 配置RabbitMQ的基本信息  ip 端口 username  password..
spring:
  rabbitmq:
    host: 192.168.159.35 # ip
    port: 5672
    username: yuyongli
    password: yuyongli
    virtual-host: /yyl
绑定交换机和队列

创建RabbitMQ队列与交换机绑定的配置类com.yyl.rabbitmq.config.RabbitMQConfig

package yyl.config;
import org.springframework.amqp.core.*;
import org.springframework.beans.factory.annotation.Qualifier;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

@Configuration
public class RabbitMqConfig {
    //设置交换机的名字  和 队列的名字
    public static  final String EXCHANGE_NAME="exchange_topic_name";
    public static  final String QUEUE_NAME="queue_topic_name1";
    public static  final String QUEUE_NAME_2="queue_topic_name2";
    //将交换机这只成为一个bean注入到Springboot里面
    @Bean("topicExchange")
    public Exchange topicExchange(){
        //可以持久化的一个交换机
        return ExchangeBuilder.topicExchange(EXCHANGE_NAME).durable(true).build();
    }
    /**
     * 队列
     */
    @Bean("topicQueue")
    public Queue topicQueue(){
        return QueueBuilder.durable(QUEUE_NAME).build();
    }
    @Bean("topicQueue2")
    public Queue topicQueue2(){
        return QueueBuilder.durable(QUEUE_NAME_2).build();
    }
    /**
     * 将队列和交换机绑定到一起
     */
    @Bean
    public Binding exchangeWithQueue(@Qualifier("topicExchange") Exchange exchage, @Qualifier("topicQueue") Queue queue){
        //保存到数据库中
        //将交换机和队列绑定在一起
        return BindingBuilder.bind(queue).to(exchage).with("*.error").noargs();
    }
    @Bean
    public Binding exchangeWithQueue2(@Qualifier("topicExchange") Exchange exchage, @Qualifier("topicQueue2") Queue queue){
        //输出到控制台中
        //将交换机和队列绑定在一起
        return BindingBuilder.bind(queue).to(exchage).with("*.*").noargs();
    }
}

3. 搭建消费者工程

3.1 创建工程

创建消费者工程springboot-rabbitmq-consumer

修改pom.xml文件内容为如下:

 <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-amqp</artifactId>
        </dependency>
    </dependencies>

3.3 启动类

package com.yyl.rabbitmq;

import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;

@SpringBootApplication
public class ConsumerApplication {
    public static void main(String[] args) {
        SpringApplication.run(ConsumerApplication.class);
    }
}

3.4 配置RabbitMQ

创建application.yml,内容如下:

# 配置RabbitMQ的基本信息  ip 端口 username  password..
spring:
  rabbitmq:
    host 192.168.159.35# ip
    port: 5672
    username: yuyongli
    password: yuyongli
    virtual-host: /yyl

3.5 消息监听处理类

编写消息监听器com.yyl.rabbitmq.listener.RabbimtMQListener

package com.yyl.listen;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.annotation.RabbitListener;
import org.springframework.stereotype.Component;

@Component
public class RabbitMqListener {
    //监听队列的消息
    @RabbitListener(queues = "queue_topic_name1")
    public void listenQueue(Message message){
        System.out.println("监听的error级别的日志,需要保存到数据库中======="+new String(message.getBody()));//message.getBody()
    }
}

4.搭建消费者工程2

启动类,配置文件跟消费者1是一样的,仅需要配置监听类即可

4.1 消息监听处理类

package yyl.listen;

import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.annotation.RabbitListener;
import org.springframework.stereotype.Component;

/**
 * @author yuyongli
 */
@Component
public class RabbitMqListener {

    //监听队列的xiaoxi
    @RabbitListener(queues = "queue_topic_name2")
    public void listenQueue(Message message){
        System.out.println("监听的是所有模块的日志,需要输出到控制台上面,日子的信息是======="+new String(message.getBody()));//message.getBody()
    }
}

5. 测试

在生产者工程springboot-rabbitmq-producer中创建测试类,发送消息:

package test;

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.boot.test.context.SpringBootTest;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringRunner;
import yyl.ProducerApplication;
import yyl.config.RabbitMqConfig;

import javax.annotation.Resource;

@SpringBootTest
@RunWith(SpringRunner.class)
@ContextConfiguration(classes = ProducerApplication.class)
public class ProcedureTest {

    @Resource
    private RabbitTemplate rabbitTemplate;

    @Test
    public void  testSendMesssage(){
        //将消息发送到队列里面
        rabbitTemplate.convertAndSend(RabbitMqConfig.EXCHANGE_NAME,"test.error","我是test模块中,日志级别为error的信息");
    }

}
 
测试:

先运行上述测试程序(交换机和队列才能先被声明和绑定),然后启动消费者;在消费者工程springboot-rabbitmq-consumer中控制台查看是否接收到对应消息。

附:

docker安装rabbitmq

使用docker 安装 RabbitMq

1.拉取镜像

搜索rabbitmq 镜像

docker search rabbitmq 

拉取rabbitmq

docker pull rabbitmq:3.9-management
2.创建挂载目录

2.创建挂载目录

mkdir -p /data/rabbitmq/
3.创建容器
docker run -d --name rabbitmq --restart=always -p 5672:5672 -p 15672:15672 -v /data/rabbitmq/:/var/lib/rabbitmq rabbitmq:3.9-management 

-name 镜像名 -d 后台运行 –rm 停止服务就删除文件(根据自己情况选择) -v /宿主机目录:/容器目录 –restart=always 自动重启

4.遇到的问题

无法web访问RabbitMq管理页面 我这边在centos系统中运行容器后是可以通过web访问的,但是有时候有些版本的系统出现了无法通过web访问,我去查看了端口是否开放和防火墙是否开放端口,结果是都开放的,最后检查到的问题是启用web管理插件,下面介绍一下如何在容器内启用web管理插件:

方法一 直接通过docker命令启用

docker exec -it rabbitmq rabbitmq-plugins enable rabbitmq_management

查看插件是否启用
docker exec -it rabbitmq rabbitmq-plugins list

有 E* 或* e 标志的则为启用的插件 E 显式启用 e 隐式启用

方法二 进入Rabbitmq容器内

docker exec -it rabbitmq  /bin/bash

进入容器后需要执行命令启用web管理插件。

5. 启用web管理插件
rabbitmq-plugins enable rabbitmq_management
6. 查看插件是否启用成功
rabbitmq-plugins list

卸载:

卸载erlang

查看erlang安装的相关列表

yum list|grep erlang

卸载erlang所有内容

yum -y remove erlang-*

删除erlang目录

rm -rf /usr/lib64/erlang
​
卸载rabbitmq

查看rabbitmq安装的相关列表

yum list|grep rabbitmq

卸载rabbitmq所有内容

yum -y remove rabbitmq-server.noarch

查找并删除rabbitmq相关目录

find / -name rabbit*

依次删除对应目录:rm -rf 路径 例如:

rm -rf /var/lib/rabbitmq
rm -rf /usr/lib/rabbitmq
标签: rabbitmq 分布式

本文转载自: https://blog.csdn.net/weixin_49930219/article/details/142315527
版权归原作者 于永利 所有, 如有侵权,请联系我们删除。

“RabbitMQ的安装和使用”的评论:

还没有评论