RabbitMQ實現延時訊息的兩種方法

JavaLank發表於2021-05-10

RabbitMQ實現延時訊息的兩種方法
- 1、死信佇列
- 2 、延時外掛
  - 2.1如何實現

RabbitMQ實現延時訊息的兩種方法

1、死信佇列

1.1訊息什麼時候變為死信(dead-letter)

訊息被否定接收，消費者使用basic.reject 或者 basic.nack並且requeue 重回佇列屬性設為false。
訊息在佇列裡得時間超過了該訊息設定的過期時間（TTL）。
訊息佇列到達了它的最大長度，之後再收到的訊息。

1.2死信佇列的原理

當一個訊息再佇列裡變為死信時，它會被重新publish到另一個exchange交換機上，這個exchange就為DLX。因此我們只需要在宣告正常的業務佇列時新增一個可選的"x-dead-letter-exchange"引數，值為死信交換機，死信就會被rabbitmq重新publish到配置的這個交換機上，我們接著監聽這個交換機就可以了。

1.3 程式碼實現

引入amqp依賴
宣告交換機，佇列

package com.lank.demo.config;

import org.springframework.amqp.core.*;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import java.util.HashMap;
import java.util.Map;

/**
 * @author lank
 * @since 2020/12/14 10:44
 */
@Configuration
public class RabbitmqConfig {

    //死信交換機，佇列，路由相關配置
    public static final String DLK_EXCHANGE = "dlk.exchange";
    public static final String DLK_ROUTEKEY = "dlk.routeKey";
    public static final String DLK_QUEUE = "dlk.queue";

    //業務交換機，佇列，路由相關配置
    public static final String DEMO_EXCHANGE = "demo.exchange";
    public static final String DEMO_QUEUE = "demo.queue";
    public static final String DEMO_ROUTEKEY = "demo.routeKey";

    //延時外掛DelayedMessagePlugin的交換機，佇列，路由相關配置
    public static final String DMP_EXCHANGE = "dmp.exchange";
    public static final String DMP_ROUTEKEY = "dmp.routeKey";
    public static final String DMP_QUEUE = "dmp.queue";

    @Bean
    public DirectExchange demoExchange(){
        return new DirectExchange(DEMO_EXCHANGE,true,false);
    }

    @Bean
    public Queue demoQueue(){
        //只需要在宣告業務佇列時新增x-dead-letter-exchange，值為死信交換機
        Map<String,Object> map = new HashMap<>(1);
        map.put("x-dead-letter-exchange",DLK_EXCHANGE);
        //該引數x-dead-letter-routing-key可以修改該死信的路由key，不設定則使用原訊息的路由key
        map.put("x-dead-letter-routing-key",DLK_ROUTEKEY);
        return new Queue(DEMO_QUEUE,true,false,false,map);
    }

    @Bean
    public Binding demoBind(){
        return BindingBuilder.bind(demoQueue()).to(demoExchange()).with(DEMO_ROUTEKEY);
    }

    @Bean
    public DirectExchange dlkExchange(){
        return new DirectExchange(DLK_EXCHANGE,true,false);
    }

    @Bean
    public Queue dlkQueue(){
        return new Queue(DLK_QUEUE,true,false,false);
    }

    @Bean
    public Binding dlkBind(){
        return BindingBuilder.bind(dlkQueue()).to(dlkExchange()).with(DLK_ROUTEKEY);
    }


    //延遲外掛使用
    //1、宣告一個型別為x-delayed-message的交換機
    //2、引數新增一個x-delayed-type值為交換機的型別用於路由key的對映
    @Bean
    public CustomExchange dmpExchange(){
        Map<String, Object> arguments = new HashMap<>(1);
        arguments.put("x-delayed-type", "direct");
        return new CustomExchange(DMP_EXCHANGE,"x-delayed-message",true,false,arguments);
    }

    @Bean
    public Queue dmpQueue(){
        return new Queue(DMP_QUEUE,true,false,false);
    }

    @Bean
    public Binding dmpBind(){
        return BindingBuilder.bind(dmpQueue()).to(dmpExchange()).with(DMP_ROUTEKEY).noargs();
    }
    

}

宣告一個類用於傳送帶過期時間的訊息

package com.lank.demo.rabbitmq;

import com.lank.demo.config.RabbitmqConfig;
import lombok.extern.slf4j.Slf4j;
import org.springframework.amqp.AmqpException;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.core.MessagePostProcessor;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Component;

/**
 * @author lank
 * @since 2020/12/14 10:33
 */
@Component
@Slf4j
public class MessageSender {

    @Autowired
    private RabbitTemplate rabbitTemplate;

    //使用死信佇列傳送訊息方法封裝
    public void send(String message,Integer time){
        String ttl = String.valueOf(time*1000);
        //exchange和routingKey都為業務的就可以，只需要設定訊息的過期時間
        rabbitTemplate.convertAndSend(RabbitmqConfig.DEMO_EXCHANGE, RabbitmqConfig.DEMO_ROUTEKEY,message, new MessagePostProcessor() {
            @Override
            public Message postProcessMessage(Message message) throws AmqpException {
                //設定訊息的過期時間，是以毫秒為單位的
                message.getMessageProperties().setExpiration(ttl);
                return message;
            }
        });
        log.info("使用死信佇列訊息:{}傳送成功,過期時間:{}秒。",message,time);
    }

    //使用延遲外掛傳送訊息方法封裝
    public void send2(String message,Integer time){
        rabbitTemplate.convertAndSend(RabbitmqConfig.DMP_EXCHANGE, RabbitmqConfig.DMP_ROUTEKEY,message, new MessagePostProcessor() {
            @Override
            public Message postProcessMessage(Message message) throws AmqpException {
            //使用延遲外掛只需要在訊息的header中新增x-delay屬性，值為過期時間，單位毫秒
                message.getMessageProperties().setHeader("x-delay",time*1000);
                return message;
            }
        });
        log.info("使用延遲外掛傳送訊息:{}傳送成功,過期時間:{}秒。",message,time);
    }
}

編寫一個類用於消費訊息

package com.lank.demo.rabbitmq;

import com.lank.demo.config.RabbitmqConfig;
import lombok.extern.slf4j.Slf4j;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.annotation.RabbitHandler;
import org.springframework.amqp.rabbit.annotation.RabbitListener;
import org.springframework.stereotype.Component;

/**
 * @author lank
 * @since 2020/12/15 15:57
 */

@Component
@Slf4j
public class MessageReceiver {

    @RabbitHandler
    @RabbitListener(queues = RabbitmqConfig.DLK_QUEUE)
    public void onMessage(Message message){
        log.info("使用死信佇列，收到訊息:{}",new String(message.getBody()));
    }

    @RabbitHandler
    @RabbitListener(queues = RabbitmqConfig.DMP_QUEUE)
    public void onMessage2(Message message){
        log.info("使用延遲外掛，收到訊息:{}",new String(message.getBody()));
    }
}

編寫Controller呼叫傳送訊息方法測試結果

package com.lank.demo.controller;
import com.lank.demo.rabbitmq.MessageSender;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

/**
 * @author lank
 * @since 2020/12/14 17:05
 */
@RestController
public class MessageController {

    @Autowired
    public MessageSender messageSender;

    //死信佇列controller
    @GetMapping("/send")
    public String send(@RequestParam String msg,Integer time){
        messageSender.send(msg,time);
        return "ok";
    }

    //延遲外掛controller
    @GetMapping("/send2")
    public String sendByPlugin(@RequestParam String msg,Integer time){
        messageSender.send2(msg,time);
        return "ok";
    }

}

配置檔案application.properties

server.port=4399
#virtual-host使用預設的/就好，如果需要/demo需自己在控制檯新增
spring.rabbitmq.virtual-host=/demo
spring.rabbitmq.host=localhost
spring.rabbitmq.port=5672
spring.rabbitmq.username=guest
spring.rabbitmq.password=guest

啟動專案，開啟rabbitmq控制檯，可以看到交換機和佇列已經建立好。
在瀏覽器中請求http://localhost:4399/send?msg=hello&time=5，從控制檯的輸出來看，剛好5s後接收到訊息。

2020-12-16 22:47:28.071  INFO 13304 --- [nio-4399-exec-1] c.l.rabbitmqdlk.rabbitmq.MessageSender   : 使用死信佇列訊息:hello傳送成功,過期時間:5秒。
2020-12-16 22:47:33.145  INFO 13304 --- [ntContainer#0-1] c.l.r.rabbitmq.MessageReceiver           : 使用死信佇列，收到訊息:hello

1.4死信佇列的一個小坑

當我往死信佇列中傳送兩條不同過期時間的訊息時，如果先傳送的訊息A的過期時間大於後傳送的訊息B的過期時間時，由於訊息的順序消費，訊息B過期後並不會立即重新publish到死信交換機，而是會等到訊息A過期後一起被消費。

依次傳送兩個請求http://localhost:4399/send?msg=訊息A&time=30和http://localhost:4399/send?msg=訊息B&time=10,訊息A先傳送，過期時間30S，訊息B後傳送，過期時間10S,我們想要的結果應該是10S收到訊息B，30S後收到訊息A，但結果並不是,控制檯輸出如下：

2020-12-16 22:54:47.339  INFO 13304 --- [nio-4399-exec-5] c.l.rabbitmqdlk.rabbitmq.MessageSender   : 使用死信佇列訊息:訊息A傳送成功,過期時間:30秒。
2020-12-16 22:54:54.278  INFO 13304 --- [nio-4399-exec-6] c.l.rabbitmqdlk.rabbitmq.MessageSender   : 使用死信佇列訊息:訊息B傳送成功,過期時間:10秒。
2020-12-16 22:55:17.356  INFO 13304 --- [ntContainer#0-1] c.l.r.rabbitmq.MessageReceiver           : 使用死信佇列，收到訊息:訊息A
2020-12-16 22:55:17.357  INFO 13304 --- [ntContainer#0-1] c.l.r.rabbitmq.MessageReceiver           : 使用死信佇列，收到訊息:訊息B

訊息A30S後被成功消費，緊接著訊息B被消費。因此當我們使用死信佇列時應該注意是否訊息的過期時間都是一樣的，比如訂單超過10分鐘未支付修改其狀態。如果當一個佇列各個訊息的過期時間不一致時，使用死信佇列就可能達不到延時的作用。這時候我們可以使用延時外掛來實現這需求。

2 、延時外掛

RabbitMQ Delayed Message Plugin是一個rabbitmq的外掛，所以使用前需要安裝它，可以參考的GitHub地址：https://github.com/rabbitmq/rabbitmq-delayed-message-exchange

2.1如何實現

安裝好外掛後只需要宣告一個型別type為"x-delayed-message"的exchange，並且在其可選引數下配置一個key為"x-delayed-typ"，值為交換機型別(topic/direct/fanout)的屬性。
宣告一個佇列繫結到該交換機
在傳送訊息的時候訊息的header裡新增一個key為"x-delay",值為過期時間的屬性,單位毫秒。
程式碼就在上面，配置類為DMP開頭的，傳送訊息的方法為send2()。
啟動後在rabbitmq控制檯可以看到一個型別為x-delayed-message的交換機。
繼續在瀏覽器中傳送兩個請求http://localhost:4399/send2?msg=訊息A&time=30和http://localhost:4399/send2?msg=訊息B&time=10,控制檯輸出如下，不會出現死信佇列出現的問題:

2020-12-16 23:31:19.819  INFO 13304 --- [nio-4399-exec-9] c.l.rabbitmqdlk.rabbitmq.MessageSender   : 使用延遲外掛傳送訊息:訊息A傳送成功,過期時間:30秒。
2020-12-16 23:31:27.673  INFO 13304 --- [io-4399-exec-10] c.l.rabbitmqdlk.rabbitmq.MessageSender   : 使用延遲外掛傳送訊息:訊息B傳送成功,過期時間:10秒。
2020-12-16 23:31:37.833  INFO 13304 --- [ntContainer#1-1] c.l.r.rabbitmq.MessageReceiver           : 使用延遲外掛，收到訊息:訊息B
2020-12-16 23:31:49.917  INFO 13304 --- [ntContainer#1-1] c.l.r.rabbitmq.MessageReceiver           : 使用延遲外掛，收到訊息:訊息A

死信交換機官網介紹:https://www.rabbitmq.com/dlx.html
延時外掛GitHub:https://github.com/rabbitmq/rabbitmq-delayed-message-exchange

SpringBoot整合rabbitMq實現訊息延時傳送
2020-11-15
Spring BootMQ
延遲訊息的五種實現方案
2021-01-12
延時訊息常見實現方案
2022-01-14
基於訊息佇列（RabbitMQ）實現延遲任務
2022-03-08
佇列MQ
RabbitMQ高階之訊息限流與延時佇列
2020-09-03
MQ佇列
RabbitMQ延遲訊息的延遲極限是多少？
2019-07-23
MQ
簡單延時訊息替代改造JOB實現
2019-03-03
使用 Kotlin+RocketMQ 實現延時訊息
2021-09-09
KotlinMQ
使用 RabbitMQ 實現延時佇列
2020-07-17
MQ佇列
golang 封裝 rabbitmq，正常訊息，延時訊息，非炫技，僅記錄（golang新人）
2022-03-07
Golang封裝MQ
實現rabbitmq訊息重新投遞方案
2024-04-21
MQ
基於 Hyperf 實現 RabbitMQ + WebSocket 訊息推送
2019-10-31
MQWeb
直播電商原始碼，利用Kotlin+RocketMQ 實現延時訊息
2021-10-19
原始碼KotlinMQ
RabbitMQ實戰：理解訊息通訊
2018-04-01
MQ
《RabbitMQ》| 解決訊息延遲和堆積問題
2021-11-08
MQ
RabbitMQ實現延遲佇列
2022-04-22
MQ佇列
RabbitMQ 實現延遲佇列
2021-12-31
MQ佇列
未讀訊息（小紅點），前端與 RabbitMQ實時訊息推送實踐，賊簡單~
2020-09-08
前端MQ
Golang 實現 RabbitMQ 的延遲佇列
2022-02-08
GolangMQ佇列
RabbitMQ訊息模式
2021-01-04
MQ模式
SpringBoot 整合 RabbitMQ 實現訊息可靠傳輸
2022-05-25
Spring BootMQ
幾種實現延時任務的方式（一）
2019-03-04
C#通過rabbitmq實現定時任務(延時佇列)
2021-04-26
C#MQ佇列
RabbitMQ，RocketMQ，Kafka 幾種訊息佇列的對比
2021-12-10
MQKafka佇列
RabbitMQ延時佇列的使用
2020-11-05
MQ佇列
PHP基於Redis訊息佇列實現的訊息推送的方法
2018-12-16
PHPRedis佇列
在如何實現兩個JBoss之間的訊息通訊？
2004-02-13
RabbitMQ釋出訂閱實戰-實現延時重試佇列
2018-05-14
MQ佇列
RabbitMQ實戰：訊息通訊模式和最佳實踐
2018-04-07
MQ模式
java B2B2C 仿淘寶電子商城系統-基於Rabbitmq實現延遲訊息
2019-02-14
JavaMQ
RabbitMQ訊息佇列
2021-07-29
MQ佇列
快速掌握RabbitMQ(四)——兩種種消費模式和QOS的C#實現
2019-05-25
MQ模式C#
RabbitMQ：偽延時佇列
2018-08-24
MQ佇列
如何用RabbitMQ實現延遲佇列
2021-02-03
MQ佇列
RabbitMQ、RocketMQ、Kafka延遲佇列實現
2022-12-22
MQKafka佇列
RabbitMQ 訊息的可靠投遞
2020-10-28
MQ
關於VC++中，兩種自定義訊息的傳送與接收的方法實現進行說明。 (轉)
2007-10-17
C++
RabbitMQ多消費者順序性消費訊息實現
2021-11-03
MQ

RabbitMQ實現延時訊息的兩種方法

RabbitMQ實現延時訊息的兩種方法

1、死信佇列

1.1訊息什麼時候變為死信(dead-letter)

1.2死信佇列的原理

1.3 程式碼實現

1.4死信佇列的一個小坑

2 、延時外掛

2.1如何實現

相關文章