ToB企服应用市场:ToB评测及商务社交产业平台

标题: RabbitMq整合Springboot超全实战案例+图文演示+源码自取 [打印本页]
作者: 梦见你的名字    时间: 2024-8-26 02:50
标题: RabbitMq整合Springboot超全实战案例+图文演示+源码自取
目录

介绍
简单整合
简单模式
界说
代码示例
 work模式
界说
代码示例
pubsub模式
界说
代码示例
routing模式 
界说
代码示例
 top模式
界说
代码
下单付款加积分示例
介绍
代码
 可靠性投递示例
介绍
代码
交换机投递确认回调 
队列投递确认回调 
​耽误消息场景示例
介绍
代码示例
图形化创建绑定交换机队列
纯代码创建
消息过期
队列过期
单个消息过期
消息时间过期
消息溢出
​编辑
消息被拒
死信队列踩坑
 源码

介绍

RabbitMQ是一种开源的消息队列软件，它实现了高级消息队列协议（AMQP），提供了可靠的消息通报机制以及支持分布式应用程序之间的通信。RabbitMQ支持多种编程语言，如Java、Python、Ruby、PHP等等，并且可以在不同的操作系统上运行，如Windows、Linux、Mac OS等。
RabbitMQ的焦点理念是分离应用程序之间的通信，允许开辟人员将其应用程序解耦，从而使它们更加容易明确、扩展和维护。在使用RabbitMQ时，开辟人员可以将消息发布到队列中，当斲丧者毗连到队列时，RabbitMQ会自动将消息通报给斲丧者。别的，RabbitMQ还提供了一些高级功能，如重试机制、消息优先级、发布/订阅模式等等，使得开辟人员可以更加灵活地控制消息队列的活动。
rabbitmq的初始安装步骤可以查看博主之前的文章举行安装
rabbitmq安装图文保姆级教程
简单整合

简单模式

界说

简单模式（Simple mode）：也称为点对点模式，是最简单的模式。生产者将消息发送到队列中，斲丧者从队列中读取消息并处置惩罚。这种模式只有一个生产者和一个斲丧者，消息被通报一次并且只被一个斲丧者吸收，生产者和斲丧者之间的关系是一对一的
代码示例

新建父级项目,再在父级项目中新建consumer和producter两个子模块
两个子级添加必须依赖
  1. <dependency>
  2.             <groupId>org.springframework.boot</groupId>
  3.             <artifactId>spring-boot-starter-amqp</artifactId>
  4.             <version>2.6.13</version>
  5.         </dependency>
  6.         <dependency>
  7.             <groupId>org.springframework.boot</groupId>
  8.             <artifactId>spring-boot-starter-web</artifactId>
  9.         </dependency>
  11.         <dependency>
  12.             <groupId>org.springframework.boot</groupId>
  13.             <artifactId>spring-boot-starter-test</artifactId>
  14.             <scope>test</scope>
  15.         </dependency>
复制代码
添加mq设置

 添加生产者生产消息接口

添加斲丧者监听斲丧消息
 

启动生产者和斲丧者举行测试
 

可以看到生产者每生产一条消息,斲丧者都可以监听到消息并且举行斲丧
 work模式

界说

工作模式（Work mode）：也称为竞争斲丧者模式，多个斲丧者同时订阅同一个队列中的消息，但是只有一个斲丧者可以斲丧每个消息。这种模式用于负载平衡，其中每个斲丧者处置惩罚的消息数量相等（或者最靠近相等），并且每个消息只被处置惩罚一次。
代码示例

我们这里用生产者发送20条消息,创建两个斲丧者来举行消息的监听,且斲丧者1每次斲丧消息前设置就寝1秒,斲丧者2每次设置就寝2秒,然后观察斲丧者的斲丧情况
work生产者:

work斲丧者

 启动测试观察斲丧者斲丧情况

 

可以看到斲丧者1和斲丧者2都是斲丧了10条消息,也就是说无论斲丧者1和斲丧者2谁斲丧消息的速度快慢,mq默认都是均匀分配的,这样很显着不太符合能者多劳的情况
要想实现能者多劳的分配可以举行一些设置
 添加斲丧者设置

  1. #配置mq消息签收模式为手动签收
  2. spring.rabbitmq.listener.simple.acknowledge-mode=manual
  3. #设置预取数量为1  每次取一个
  4. spring.rabbitmq.listener.simple.prefetch=1
复制代码
 调整两个斲丧者设置,此处两个斲丧者设置调整都一样

 重启测试:

 

 此时可以显着看到速度更快的斲丧者1斲丧了13条,斲丧者2只斲丧了7条,已经达到了能者多劳的预期
pubsub模式

界说

发布/订阅模式（Publish/Subscribe mode）：一个生产者将消息发送到交换机（Exchange）中，该交换机将消息通报给多个队列，全部与这些队列绑定的斲丧者都会吸收到该消息。这种模式用于广播消息。
代码示例

生产者接口

斲丧者1
 斲丧者2

启动测试:
 

可以看到斲丧者1和斲丧者2同时斲丧了生产者生产的消息
routing模式 

界说

路由模式（Routing mode）：生产者将消息发送到交换机中，并将消息标志为一个特定的路由键（Routing Key）。交换机将消息通报给绑定到该交换机的与该路由键匹配的队列。这种模式用于将消息路由到特定的队列中。
代码示例

生产者

斲丧者1
 斲丧者2

启动测试
 

 top模式

界说

主题模式（Topic mode）：也称为通配符模式，它是路由模式的升级版。生产者将消息发送到交换机中，并将消息标志为一个主题（Topic），交换机将消息通报给绑定到该交换机的与该主题匹配的队列。这种模式与路由模式雷同，但是主题模式的主题可以使用通配符，允许复杂的路由规则。
代码

生产者

斲丧者1

斲丧者2

启动测试:
 

下单付款加积分示例

介绍

下面以用户在下单付款后系统为用户添加积分的案例为例来对mq举行场景使用
代码

先建两张数据库表,一张订单表,一张用户积分表

用户积分表
 

业务场景:
通过orderNo举行订单付款,生产者天生付款消息,付款后用户订单状态调整为已付款状态,斲丧者斲丧该消息并且为用户积分表添加在原有积分基础上添加该订单所奖励的积分,积分值这里直接取订单表中的productPrice字段数据 
初始化数据库表

 付款订单号为1336557511364313088订单,status付款状态初始化为0(未付款),1是付款状态
该订单目前积分为

生产者接口:

斲丧者监听斲丧
 

启动测试:
 

查看数据库
 积分新增成功,由原先的1000,新增了订单的productPrice的1399变为了2399

斲丧成功
留意在启动测试这个案例前先把之前测试时设置的手动签收和预取关掉,否则斲丧者不会自动及时斲丧生产者生产的消息

 可靠性投递示例

介绍

可靠性投递是指在消息队列中确保消息得到正确且可靠地通报，纵然在出现网络故障或服务器宕机等非常情况下，消息也不会丢失。在RabbitMQ中，可靠性投递通常接纳以下两个概念：
代码

生产者服务中开启设置

   #开开导布确认机制
spring.rabbitmq.publisher-confirm-type=correlated
  当消息经生产者投递到交换机后，为避免消息丢失，必要回调RabbitTemplate.ConfirmCallback接口，回调接口后，尤其是要对投递失败的消息举行处置惩罚或者记载下来保证消息不丢失。该接口不管消息投递到交换机成功或者失败都会举行回调，未避免消息丢失，可以选择在回调接口中只处置惩罚或者登记投递失败的消息，达到消息不丢失的目的。

交换机投递确认回调 

 添加发布确认组件

 先在mq图像化管理中找到一个真实存在的交换机举行成功投递,查看成功投递后的回调

 测试投递

成功调用消息成功回调
再誊写一个不存在的交换机模拟失败投递

 失败回调成功实行,后续可以在这里手写失败的回调业务逻辑
队列投递确认回调 

上面成功投递的示例中还存在肯定问题,那就是交换机投递成功是后面的队列是否投递成功没有检测到,之前测试的队列是rtt,但是图型化中是没有这个队列的
消息经交换机路由到队列后回调接口ReturnCallback ，保证消息在发送队列处不丢失
消息由交换机和消息队列中非常，导致消息丢失问题，办理办法就是在添加消息从交换机路由到队列中失败后回调的接口，在回调接口中把失败的消息保存下来就可以避免消息丢失了。

所以还必要添加队列是否投递成功的监听回调 
添加发布确认返回

   spring.rabbitmq.publisher-returns=true 
   追加实现returnCallback

测试:
 耽误消息场景示例

介绍

创建一个具有延时消息处置惩罚能力的队列，并将队列绑定到延时消息交换机上。此时，必要指定交换机的 delayed_routing_key 属性，表示延时发送的时间。
向延时消息交换机发送消息时，必要在消息的 headers 中添加一个 x-delay 属性，值为延时发送的时间，即 delayed_routing_key 中的值。
这样，当消息到达延时消息交换机时，会根据 headers 中的 x-delay 属性值，自动举行耽误发送。当耽误时间到达后，消息会被投递到绑定的队列中举行处置惩罚。
延时消息的实现可以确保消息在指定时间后被投递，从而提高了消息系统的可靠性和稳固性。
原理图

代码示例

图形化创建绑定交换机队列

创建死信交换机

 创建死信队列

创建监听的斲丧队列
 绑定死信交换机和两个队列

生产者接口
 

斲丧者监听
 

留意这里斲丧者监听的是delay_queue2,这是一个正常的斲丧队列,不是死信队列,死信队列可以明确为没有斲丧者监听的队列,且消息有过期时间 前面在图形化中新建死信队列时已经设置过过期时间为10000ms(10s)
启动测试:


可以看到生产者生产了几条消息后,在图形化中的delay_queue1中有消息堆叠,10秒内不会被斲丧掉,10秒后斲丧者日记才陆续举行斲丧打印,图形化中的消息也被斲丧掉不再堆叠
如果这里看的清晰,可以先将斲丧者停掉,直接启动生产者,看看10秒过期后消息会不会从delay_queue1自动转发到delay_queue2
停掉斲丧者,单启动生产者举行消息生产,观察现象


 可以看到消息过期后自动转发到delay_queue2了,而delay_queue2之前斲丧者是正常监听的,所以由delay_queue1的消息过期时间间接就实现了耽误消息的结果
纯代码创建

死信队列中也区分一个队列过期时间和每个消息的过期时间
死信队列是一个特别的队列，用于存储无法被斲丧的消息，这些消息通常被界说为无法被路由或者由于一些原因被拒绝。死信队列通常会在原始消息被拒绝、超时、过期或达到最大重试次数等情况下被触发。
队列过期时间指的是队列本身的过期时间，在该队列中的全部消息的过期时间都是同等的,在该时间到达时，队列会自动删除。而消息过期时间指的是消息本身的过期时间，在该时间到达时，消息会被标志为过期，然后会被发送到死信队列。两者的作用不同，队列过期时间控制整个队列的生命周期，而消息过期时间只控制单个消息的生命周期。
当消息过期时间设置到队列中时，当消息在队列中等候时，如果消息已经达到过期时间，那么这个消息将会被视为死信消息并被发送到死信队列中。如果队列本身已经到达过期时间，则这个队列将会被删除，而其中全部的消息也会成为死信消息并被发送到死信队列中。因此，两者的区别在于，队列过期时间会影响全部消息，而消息过期时间只影响每个消息的生命周期。
消息过期

队列过期

下面先演示代码中创建队列过期时间的例子
新建设置类创建交换机和队列并举行绑定

  1. import org.springframework.amqp.core.Binding;
  2. import org.springframework.amqp.core.BindingBuilder;
  3. import org.springframework.amqp.core.DirectExchange;
  4. import org.springframework.amqp.core.Queue;
  5. import org.springframework.context.annotation.Bean;
  6. import org.springframework.context.annotation.Configuration;
  8. import java.util.HashMap;
  9. import java.util.Map;
  11. @Configuration
  12. public class RabbitMqConfig {
  13.    
  14.     @Bean
  15.     public DirectExchange ttlQueueExchange(){
  16.         /**
  17.          * 参数一 : 交换机名称
  18.          * 参数二: 当前交换机是否持久化 true表示进行持久化
  19.          * 参数三: 是否自动删除 false: 不会自动删除
  20.          */
  21.         return new DirectExchange("ttl_queue_exchange",true, false);
  22.     }
  24.     @Bean
  25.     public Queue ttlQueue(){
  26.         /**
  27.          * 参数一 : 队列名称
  28.          * 参数二: 队列是否持久化 true表示进行持久化
  29.          * 参数三: 是否唯一绑定某一个交换机
  30.          * 参数四: 表示当前队列是否删除
  31.          * 参数五: 配置队列初始化参数 过期时间,队列容纳消息数等
  32.          */
  33.         Map<String,Object> map = new HashMap<>();
  34.         //x-message-ttl 固定属性 表示当前队列过期时间 单位毫秒
  35.         map.put("x-message-ttl",15000);
  36.         //x-max-length 固定属性 表示当前队列中最多可以存放的消息条数
  37.         map.put("x-max-length",5);
  38.         return new Queue("ttl_queue",true, false,false,map);
  39.     }
  40.     //消息队列和交换机进行绑定
  41.     @Bean
  42.     public Binding bindingTtlQueue(){
  43.         return BindingBuilder.bind(ttlQueue()).to(ttlQueueExchange()).with("ttl_key");
  44.     }
  45. }
复制代码
 图形化界面中现在还有没有ttl_queue_exchange交换机和ttl_queue队列


生产者接口,之前设置队列时设置队列最多存储5条消息,过期时间15秒,这里直接生产10条消息举行测试

启动生产者举行测试:
 

可以看到生产者固然生产了10条消息,但是队列中始终只存了5条消息,且15秒后队列中的全部消息自动过期,此时没有斲丧者服务启动,说明死信队列已见效 
单个消息过期

创建消息过期交换机和队列以及绑定设置

 生产者接口

 启动测试

可以看到该消息30秒后过期拿不到消息体了,单个消息过期设置成功
消息时间过期

当生产者的消息投递到队列后,由于消息设置的有过期时间.在指定时间内没有被斲丧者斲丧,此时队列中的消息就会成为死信队列
创建一个正常监听队列的交换机,一个没有斲丧者监听的过期时间队列,再创建一个监听的死信交换机和死信队列

生产者接口
 

启动测试,留意此时不启动斲丧者服务,只观察消息会不会由ttl_time_queue队列转投到dead_queue队列:

可以看到生产者在ttl_time_queue中投递一条消息后,由于没有斲丧者斲丧,该队列的消息在设置的过期时间20秒后自动转投给了dead_exchange交换机,交换机又投给了dead_letter_queue队列,由于此时没有斲丧者所以消息也在dead_letter_queue中没有斲丧,这里为了方便观察没有开启斲丧者,下面再启动一次有斲丧者版的直接观察最后死信队列的延时斲丧结果
 监听dead_letter_queue的斲丧者:

启动测试 

可以看到这次ttl_time_queue过期的消息直接被监听dead_letter_queue的斲丧者斲丧了,从而间接实现了延时斲丧 
消息溢出

当生产者投递到队列的消息数量超出队列容量时,超出的队列也会被投入到死信队列中
创建一个有规定消息数量的队列

转投的死信交换机和死信队列按照前面消息过期的誊写即可
 生产者接口,模拟生产10条消息

启动测试 观察现象,留意此时也不启动斲丧者服务,只观察消息会不会由max_queue队列转投到dead_queue队列


可以看到生产者投递了10条消息,有3条是进入到了max_queue中,剩下溢出的7条都转投到了dead_queue队列
此时再启动斲丧者重新投递10条消息,由于此时max_queue中已经有了3条消息,此时再投递的消息就都是溢出消息查看多出的溢出死信消息是否直接被斲丧掉


可以看到溢出的消息变成死信消息直接被斲丧掉了,从而也实现了死信队列 
消息被拒

当生产者的消息投递到队列后被斲丧者拒绝,此时队列中的消息也会成为死信
创建reject_queue队列并设置消息拒绝后转投的交换机和路由

设置监听reject_queue队列的拒绝斲丧者
 

拒绝吸收消息
 

生产者接口:
 

启动测试,先观察reject_queue队列被先斲丧者拒绝斲丧后消息是否自动转投到死信队列dead_letter_queue中:
 

可以看到监听reject_queue的斲丧者拒绝了该队列的消息后自动将消息转投到dead_letter_queue中了
下面将监听 dead_letter_queue的斲丧者放开,直接测试消息拒绝的死信队列,观察其现象

启动测试:
 

可以看到监听reject_queue的斲丧者拒绝了该队列的消息后自动将消息转投到dead_letter_queue中后直接被监听dead_letter_queue的斲丧者斲丧掉了,从而也实现了死信队列

下面直接将生产者创建的交换机,队列和绑定情况贴在下面
  2. import org.springframework.amqp.core.Binding;
  3. import org.springframework.amqp.core.BindingBuilder;
  4. import org.springframework.amqp.core.DirectExchange;
  5. import org.springframework.amqp.core.Queue;
  6. import org.springframework.context.annotation.Bean;
  7. import org.springframework.context.annotation.Configuration;
  9. import java.util.HashMap;
  10. import java.util.Map;
  12. @Configuration
  13. public class RabbitMqConfig {
  15.     //队列消息过期 交换机,队列,绑定配置
  16.     @Bean
  17.     public DirectExchange ttlQueueExchange(){
  18.         /**
  19.          * 参数一 : 交换机名称
  20.          * 参数二: 当前交换机是否持久化 true表示进行持久化
  21.          * 参数三: 是否自动删除 false: 不会自动删除
  22.          */
  23.         return new DirectExchange("ttl_queue_exchange",true, false);
  24.     }
  26.     @Bean
  27.     public Queue ttlQueue(){
  28.         /**
  29.          * 参数一 : 队列名称
  30.          * 参数二: 队列是否持久化 true表示进行持久化
  31.          * 参数三: 是否唯一绑定某一个交换机
  32.          * 参数四: 表示当前队列是否删除
  33.          * 参数五: 配置队列初始化参数 过期时间,队列容纳消息数等
  34.          */
  35.         Map<String,Object> map = new HashMap<>();
  36.         //x-message-ttl 固定属性 表示当前队列过期时间 单位毫秒
  37.         map.put("x-message-ttl",15000);
  38.         //x-max-length 固定属性 表示当前队列中最多可以存放的消息条数
  39.         map.put("x-max-length",5);
  40.         return new Queue("ttl_queue",true, false,false,map);
  41.     }
  42.     //消息队列和交换机进行绑定
  43.     @Bean
  44.     public Binding bindingTtlQueue(){
  45.         return BindingBuilder.bind(ttlQueue()).to(ttlQueueExchange()).with("ttl_key");
  46.     }
  50.     // 单个消息过期交换机,队列,绑定配置
  51.     @Bean
  52.     public DirectExchange ttlMsgExchange(){
  53.         return new DirectExchange("ttl_msg_exchange",true, false);
  54.     }
  56.     @Bean
  57.     public Queue ttlMsgQueue(){
  58.         return new Queue("ttl_msg",true, false,false,null);
  59.     }
  60.     @Bean
  61.     public Binding bindingTtlMsg(){
  62.         return BindingBuilder.bind(ttlMsgQueue()).to(ttlMsgExchange()).with("ttl_msg_key");
  63.     }
  68.     //监听消息的交换机
  69.     @Bean
  70.     public DirectExchange listenExchange(){
  72.         return new DirectExchange("listen_exchange",true, false);
  73.     }
  75.     //监听消息的死信交换机
  76.     @Bean
  77.     public DirectExchange deadExchange(){
  79.         return new DirectExchange("dead_exchange",true, false);
  80.     }
  81.     //监听消息的死信队列
  82.     @Bean
  83.     public Queue deadLetterQueue(){
  84.         return new Queue("dead_letter_queue",true, false,false,null);
  85.     }
  86.     @Bean
  87.     public Binding bindingDeadExchange(){
  88.         return BindingBuilder.bind(deadLetterQueue()).to(deadExchange()).with("dead_key");
  89.     }
  90.     //时间过期队列
  91.     @Bean
  92.     public Queue ttlTimeQueue(){
  93.         Map<String,Object> map = new HashMap<>();
  94.         //指定给当前被拒绝消费的队列配置拒绝后消息转发的死信交换机
  95.         //x-dead-letter-exchange  固定属性 表示指定的死信交换机
  96.         map.put("x-dead-letter-exchange", "dead_exchange");
  97.         // 设置死信交换机绑定的队列之间的路由键
  98.         map.put("x-dead-letter-routing-key", "dead_key");
  99.         map.put("x-message-ttl",20000);// 设置队列过期时间
  100.         return new Queue("ttl_time_queue",true, false,false,map);
  101.     }
  102.     @Bean
  103.     public Binding bindingTtlExchange(){
  104.         return BindingBuilder.bind(ttlTimeQueue()).to(listenExchange()).with("ttl_key");
  105.     }
  107.     //规定数量队列
  108.     @Bean
  109.     public Queue maxQueue(){
  110.         Map<String,Object> map = new HashMap<>();
  111.         //指定给当前被拒绝消费的队列配置拒绝后消息转发的死信交换机
  112.         //x-dead-letter-exchange  固定属性 表示指定的死信交换机
  113.         map.put("x-dead-letter-exchange", "dead_exchange");
  114.         // 设置死信交换机绑定的队列之间的路由键
  115.         map.put("x-dead-letter-routing-key", "dead_key");
  116.         map.put("x-max-length",3);// 设置队列最大容量数
  117.         return new Queue("max_queue",true, false,false,map);
  118.     }
  119.     @Bean
  120.     public Binding bindingMaxExchange(){
  121.         return BindingBuilder.bind(maxQueue()).to(listenExchange()).with("max_key");
  122.     }
  127.     //消息拒绝 队列,绑定配置
  128.     @Bean
  129.     public Queue rejectQueue(){
  130.         Map<String,Object> map = new HashMap<>();
  131.         //指定给当前被拒绝消费的队列配置拒绝后消息转发的死信交换机
  132.         //x-dead-letter-exchange  固定属性 表示指定的死信交换机
  133.         map.put("x-dead-letter-exchange", "dead_exchange");
  134.         // 设置死信交换机绑定的队列之间的路由键
  135.         map.put("x-dead-letter-routing-key", "dead_key");
  136.         return new Queue("reject_queue",true, false,false,map);
  137.     }
  139.     @Bean
  140.     public Binding bindingRejectExchange(){
  141.         return BindingBuilder.bind(rejectQueue()).to(listenExchange()).with("reject_key");
  142.     }
  144. }
复制代码
死信队列踩坑

在现实操作中博主也碰到了一些比力容易出现问题的坑,也在这里记载下
前面我们使用死信队列成功实现了耽误消息,但是在正常斲丧者里是必要填写监听的正常斲丧队列的

如果这里不填写队列,会造成消息不停堆叠在delay_queue2中,原先博主以为这里交换机和路由都已经绑定过了,可以不填写就行,但是事实还是狠狠打了一巴掌,把错误地方也复现下
我们把这里的队列名称去掉,其他的生产者等都不动,再启动测试看看会有什么现象

启动测试:

可以看到斲丧者固然正常打印了斲丧日记,但是在图形化队列中队列还是不停在堆叠,博主以为只是图像化出了问题,但是把队列名重新加上后再重启斲丧者,斲丧者又重新打印斲丧了刚才的几条消息,而此时图像化界面队列中也不再堆叠消息了,真是大坑一个 
此处如果填了队列名,代码中不再填写路由key也是可以正常斲丧的,看示例

删除路由key,重新测试
 

可以看到路由key在图形化界面中已经绑定了,这里不用再指定也可以正常斲丧
 源码

必要以上练习源码demo的小同伴请自取
rabbitmq实战场景源码

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。



欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/) Powered by Discuz! X3.4