RocketMQ 事务实例
什么是事务性消息?
它可以被认为是两阶段提交消息实现,以确保分布式系统中的最终一致性。事务性消息确保本地事务的执行和消息的发送可以原子地执行。
使用限制
(1)事务性消息没有时间表和批处理支持。
(2)为了避免单个消息被检查太多次并导致半队列消息累积,默认情况下,我们将单个消息的检查次数限制为15次,但是用户可以通过更改代理配置中的transactionCheckMax参数来更改此限制,如果一个消息被检查了transactionCheckMax次,代理将丢弃此消息并在默认情况下同时打印错误日志。用户可以通过重写AbstractTransactionCheckListener类来改变这种行为。
(3)在由代理配置中的参数transactionTimeout确定的特定时间段之后,将检查事务性消息。用户也可以通过在发送事务消息时设置用户属性CHECK_IMMUNITY_TIME_IN_SECONDS来更改此限制,此参数优先于transactionMsgTimeout参数。
(4)事务性消息可能被检查或消费多次。
(5)提交给用户目标主题的消息可能会失败。目前,这取决于日志记录。RocketMQ本身的高可用性机制确保了高可用性。如果您想确保事务性消息不会丢失,并且事务完整性得到保证,建议使用同步双写机制。
(6)事务性消息的生产者标识不能与其他类型消息的生产者标识共享。与其他类型的消息不同,事务性消息允许向后查询。MQ服务器通过客户端的生产者标识来查询客户端。
应用实例
1、事务消息状态
事务性消息有三种状态:
(1)TransactionStatus.CommitTransaction:提交事务,这意味着允许消费者使用此消息。
(2)TransactionStatus.RollbackTransaction:回滚事务,这意味着消息将被删除,不允许消费。
(3)TransactionStatus.Unknown:中间状态,这意味着MQ需要检查以确定状态。
2、发送事务性消息
(1)创建事务生产者
使用TransactionMQproducer类创建Producer客户端,并指定唯一的Producer组,您可以设置自定义线程池来处理检查请求。执行本地事务后,您需要根据执行结果回复MQ,回复状态在上面的章节中有所描述。
import org.apache.rocketmq.client.consumer.DefaultMQPushConsumer; import org.apache.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext; import org.apache.rocketmq.client.consumer.listener.ConsumeConcurrentlyStatus; import org.apache.rocketmq.client.consumer.listener.MessageListenerConcurrently; import org.apache.rocketmq.common.message.MessageExt; import java.util.List; public class TransactionProducer { public static void main(String[] args) throws MQClientException, InterruptedException { TransactionListener transactionListener = new TransactionListenerImpl(); TransactionMQProducer producer = new TransactionMQProducer("please_rename_unique_group_name"); ExecutorService executorService = new ThreadPoolExecutor(2, 5, 100, TimeUnit.SECONDS, new ArrayBlockingQueue<Runnable>(2000), new ThreadFactory() { @Override public Thread newThread(Runnable r) { Thread thread = new Thread(r); thread.setName("client-transaction-msg-check-thread"); return thread; } }); producer.setExecutorService(executorService); producer.setTransactionListener(transactionListener); producer.start(); String[] tags = new String[] {"TagA", "TagB", "TagC", "TagD", "TagE"}; for (int i = 0; i < 10; i++) { try { Message msg = new Message("TopicTest1234", tags[i % tags.length], "KEY" + i, ("Hello RocketMQ " + i).getBytes(RemotingHelper.DEFAULT_CHARSET)); SendResult sendResult = producer.sendMessageInTransaction(msg, null); System.out.printf("%s%n", sendResult); Thread.sleep(10); } catch (MQClientException | UnsupportedEncodingException e) { e.printStackTrace(); } } for (int i = 0; i < 100000; i++) { Thread.sleep(1000); } producer.shutdown(); } }
(2)实现TransactionOnListener接口
当一半发送消息成功时,executeLocalTransaction方法用于执行本地事务。它返回上一节提到的三种事务状态之一。
checkLocalTransaction方法用于检查本地事务状态并响应MQ检查请求。它同样返回上一节提到的三种事务状态之一。
import ... public class TransactionListenerImpl implements TransactionListener { private AtomicInteger transactionIndex = new AtomicInteger(0); private ConcurrentHashMap<String, Integer> localTrans = new ConcurrentHashMap<>(); @Override public LocalTransactionState executeLocalTransaction(Message msg, Object arg) { int value = transactionIndex.getAndIncrement(); int status = value % 3; localTrans.put(msg.getTransactionId(), status); return LocalTransactionState.UNKNOW; } @Override public LocalTransactionState checkLocalTransaction(MessageExt msg) { Integer status = localTrans.get(msg.getTransactionId()); if (null != status) { switch (status) { case 0: return LocalTransactionState.UNKNOW; case 1: return LocalTransactionState.COMMIT_MESSAGE; case 2: return LocalTransactionState.ROLLBACK_MESSAGE; } } return LocalTransactionState.COMMIT_MESSAGE; } }