JMS - 从一个消费者到多个消费者

Question

我有一个 JMS 客户端，它生成消息并通过 JMS 队列发送给其唯一的使用者。

我想要的是不止一个消费者收到这些消息。我想到的第一件事是将队列转换为主题，以便当前和新的消费者可以订阅并获取传递给所有人的相同消息。

这显然涉及修改生产者和消费者方面的当前客户端代码。

我还想看看其他选项，例如创建第二个队列，这样我就不必修改现有的消费者。我相信这种方法有一些优点，例如（如果我错了，请纠正我）平衡两个不同队列之间的负载，而不是一个，这可能会对性能产生积极影响。

我想获得有关这些选项以及您可能会看到的缺点/优点的建议。任何反馈都将受到高度赞赏。

Answer 1

正如您所说，您有几个选择。

如果将其转换为主题以获得相同的效果，则需要使消费者成为持久消费者。如果您的消费者不存在，队列提供的一件事是持久性。这将取决于您使用的 MQ 系统。

如果您想坚持使用队列，您将为每个消费者创建一个队列，并创建一个侦听原始队列的调度程序。

Producer -> Queue_Original <- Dispatcher -> Queue_Consumer_1 <- Consumer_1
                                         -> Queue_Consumer_2 <- Consumer_2
                                         -> Queue_Consumer_3 <- Consumer_3

主题的优点

• 更容易动态添加新消费者。所有消费者无需任何工作即可收到新消息。
• 您可以创建循环主题，以便 Consumer_1 将获取消息，然后是 Consumer_2，然后 Consumer_3
• 可以向消费者推送新消息，而不必查询队列，使它们成为反应性的。

主题的缺点

• 除非您的代理支持此配置，否则消息不会持久。如果消费者离线并返回，则可能会丢失消息，除非设置了持久消费者。
• 很难让Consumer_1和Consumer_2收到消息，但Consumer_3却收不到消息。使用调度程序和队列，调度程序无法将消息放入 Consumer_3 的队列中。

队列的优点

• 消息是持久的，直到消费者删除它们。
• 调度程序可以通过不将消息放入相应的消费者队列来过滤哪些消费者获取哪些消息。不过，这可以通过过滤器对主题来完成。

队列的缺点

• 需要创建额外的队列来支持多个消费者。在动态环境中，这不会有效。

在开发消息系统时，我更喜欢主题，因为它给了我最大的力量，但是由于您已经在使用队列，因此需要您更改系统的工作方式来实现主题。

具有多个消费者的队列系统的设计和实现

Producer -> Queue_Original <- Dispatcher -> Queue_Consumer_1 <- Consumer_1
                                         -> Queue_Consumer_2 <- Consumer_2
                                         -> Queue_Consumer_3 <- Consumer_3

来源

请记住，您还需要注意其他事项，例如问题异常处理、重新连接到连接以及如果您失去连接，则会排队等。这只是为了让您了解如何完成我所描述的内容。

在真实的系统中，我可能不会在第一次异常时退出。我会让系统继续尽可能地运行并记录错误。正如这段代码所示，如​​果将消息放入单个消费者队列失败，整个调度程序将停止。

Dispatcher.java

/*
 * To change this template, choose Tools | Templates
 * and open the template in the editor.
 */
package stackoverflow_4615895;

import javax.jms.JMSException;
import javax.jms.Message;
import javax.jms.MessageConsumer;
import javax.jms.MessageProducer;
import javax.jms.Queue;
import javax.jms.QueueConnection;
import javax.jms.QueueConnectionFactory;
import javax.jms.QueueSession;
import javax.jms.Session;

public class Dispatcher {

    private static long QUEUE_WAIT_TIME = 1000;
    private boolean mStop = false;
    private QueueConnectionFactory mFactory;
    private String mSourceQueueName;
    private String[] mConsumerQueueNames;

    /**
     * Create a dispatcher
     * @param factory
     *      The QueueConnectionFactory in which new connections, session, and consumers
     *      will be created. This is needed to ensure the connection is associated
     *      with the correct thread.
     * @param source
     *
     * @param consumerQueues
     */
    public Dispatcher(
        QueueConnectionFactory factory, 
        String sourceQueue, 
        String[] consumerQueues) {

        mFactory = factory;
        mSourceQueueName = sourceQueue;
        mConsumerQueueNames = consumerQueues;
    }

    public void start() {
        Thread thread = new Thread(new Runnable() {

            public void run() {
                Dispatcher.this.run();
            }
        });
        thread.setName("Queue Dispatcher");
        thread.start();
    }

    public void stop() {
        mStop = true;
    }

    private void run() {

        QueueConnection connection = null;
        MessageProducer producer = null;
        MessageConsumer consumer = null;
        QueueSession session = null;
        try {
            // Setup connection and queues for receiving the messages
            connection = mFactory.createQueueConnection();
            session = connection.createQueueSession(false, Session.DUPS_OK_ACKNOWLEDGE);
            Queue sourceQueue = session.createQueue(mSourceQueueName);
            consumer = session.createConsumer(sourceQueue);

            // Create a null producer allowing us to send messages
            // to any queue.
            producer = session.createProducer(null);

            // Create the destination queues based on the consumer names we
            // were given.
            Queue[] destinationQueues = new Queue[mConsumerQueueNames.length];
            for (int index = 0; index < mConsumerQueueNames.length; ++index) {
                destinationQueues[index] = session.createQueue(mConsumerQueueNames[index]);
            }

            connection.start();

            while (!mStop) {

                // Only wait QUEUE_WAIT_TIME in order to give
                // the dispatcher a chance to see if it should
                // quit
                Message m = consumer.receive(QUEUE_WAIT_TIME);
                if (m == null) {
                    continue;
                }

                // Take the message we received and put
                // it in each of the consumers destination
                // queues for them to process
                for (Queue q : destinationQueues) {
                    producer.send(q, m);
                }
            }

        } catch (JMSException ex) {
            // Do wonderful things here 
        } finally {
            if (producer != null) {
                try {
                    producer.close();
                } catch (JMSException ex) {
                }
            }
            if (consumer != null) {
                try {
                    consumer.close();
                } catch (JMSException ex) {
                }
            }
            if (session != null) {
                try {
                    session.close();
                } catch (JMSException ex) {
                }
            }
            if (connection != null) {
                try {
                    connection.close();
                } catch (JMSException ex) {
                }
            }
        }
    }
}

Main.java

    QueueConnectionFactory factory = ...;

    Dispatcher dispatcher =
            new Dispatcher(
            factory,
            "Queue_Original",
            new String[]{
                "Consumer_Queue_1",
                "Consumer_Queue_2",
                "Consumer_Queue_3"});
    dispatcher.start();

Answer 2

您可能不必修改代码；这取决于你怎么写。

例如，如果您的代码使用 MessageProducer 而不是 QueueSender 发送消息，那么它将适用于主题和队列。同样，如果您使用 MessageConsumer 而不是 QueueReceiver。

本质上，在 JMS 应用程序中使用非特定接口与 JMS 系统交互是一种很好的做法，例如 MessageProducer、MessageConsumer、Destination等等。如果是这种情况，那么这只是一个配置问题。