RocketMQ客户端消息确认机制

发布于:2025-03-04 ⋅ 阅读:(18) ⋅ 点赞:(0)

RocketMQ 的消息确认机制(ACK)是保障消息可靠性的核心机制,分为生产者发送确认和消费者消费确认两部分。以下是详细解析及关键源码分析:
在这里插入图片描述


一、生产者消息发送确认机制

1. 机制说明
  • 同步发送:生产者发送消息后阻塞等待 Broker 返回 SendResult,包含消息状态(SEND_OKFLUSH_DISK_TIMEOUT 等)。
  • 异步发送:通过回调函数 SendCallback 处理成功或异常。
  • 单向发送:不关心发送结果,无确认机制。
  • 重试机制:默认同步发送重试 2 次(可配置 retryTimesWhenSendFailed)。
2. 源码解析
  • 核心类DefaultMQProducerImpl
  • 关键方法sendDefaultImpl()
    private SendResult sendDefaultImpl(Message msg, final CommunicationMode communicationMode, ...) {
        // 选择消息队列(负载均衡)
        MessageQueue mq = this.selectOneMessageQueue(topicPublishInfo, lastBrokerName);
        // 实际发送逻辑
        sendResult = this.sendKernelImpl(msg, mq, communicationMode, ...);
        // 处理结果或异常,触发重试
    }
    
    • 发送结果处理:根据 communicationMode 处理同步/异步逻辑。
    • 异常处理:网络异常或 Broker 不可用时触发重试。

二、消费者消息消费确认机制

1. 机制说明
  • PushConsumer:客户端监听消息,消费完成后返回状态:
    • ConsumeConcurrentlyStatus.CONSUME_SUCCESS:确认消费成功。
    • ConsumeConcurrentlyStatus.RECONSUME_LATER:消费失败,触发重试。
consumer.registerMessageListener((MessageListenerConcurrently) (msg, context) -> {
   System.out.printf("%s Receive New Messages: %s %n", Thread.currentThread().getName(), msg);
   return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
});
  • 重试策略:消息失败后进入重试队列(%RETRY%),默认最多重试 16 次,之后进入死信队列(%DLQ%)。
  • 顺序消费:需实现 MessageListenerOrderly,消费失败时暂停当前队列消费。
public enum ConsumeOrderlyStatus {
    /**
     * Success consumption
     */
    SUCCESS,
    /**
     * Rollback consumption(only for binlog consumption)
     */
    @Deprecated
    ROLLBACK,
    /**
     * Commit offset(only for binlog consumption)
     */
    @Deprecated
    COMMIT,
    /**
     * Suspend current queue a moment
     */
    SUSPEND_CURRENT_QUEUE_A_MOMENT;
}
2. 源码解析
  • 核心类ConsumeMessageConcurrentlyService
  • 关键方法processConsumeResult()
 public void processConsumeResult(ConsumeConcurrentlyStatus status, ...) {
     if (status == CONSUME_SUCCESS) {
         // 更新消费进度
         this.defaultMQPushConsumerImpl.getOffsetStore().updateOffset(...);
     } else {
         // 发送重试消息到 Broker
         sendMessageBack(msg, delayLevel);
     }
 }
  • ACK 提交:消费成功后更新本地消费进度(RemoteBrokerOffsetStore)。
  • 重试处理:调用 sendMessageBack() 将消息发回 Broker 并延迟重试。

三、Broker 端的确认处理

  • 消息存储:Broker 将消息持久化到 CommitLog 后返回 ACK。
  • 消费进度管理:通过 ConsumerOffsetManager 记录消费进度。
  • 重试队列:Broker 维护 SCHEDULE_TOPIC 处理延迟重试消息。

四、示例代码

生产者同步发送确认
SendResult sendResult = producer.send(msg);
System.out.println("Send Status: " + sendResult.getSendStatus());
生产者异步发送确认
 producer.send(msg, new SendCallback() {
    @Override
    public void onSuccess(SendResult sendResult) {
       // do something
    }

    @Override
    public void onException(Throwable e) {
       // do something
    }
 });
 System.out.printf("%s%n", sendResult);
消费者消费确认
consumer.registerMessageListener((MessageListenerConcurrently) (msgs, context) -> {
    try {
        // 处理消息
        return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
    } catch (Exception e) {
        return ConsumeConcurrentlyStatus.RECONSUME_LATER;
    }
});

五、总结

  • 生产者确认:通过同步/异步回调确保消息发送到 Broker。
  • 消费者确认:通过返回状态或手动 ACK 控制消息重试逻辑。
  • 可靠性保障:结合重试队列、消费进度持久化和死信队列实现端到端可靠性。

源码中的关键逻辑集中在 DefaultMQProducerImpl(发送)和 ConsumeMessageConcurrentlyService(消费),通过状态机管理消息生命周期。


网站公告

今日签到

点亮在社区的每一天
去签到