Oracle Tuxedo Message Queue(OTMQ)--企业级消息中间件

Oracle Tuxedo Message Queue (OTMQ) -- 企业级消息中间件ORACLEPRODUCTLOGO日程•Tuxedo Message Queue：背景介绍•Tuxedo Message Queue：功能概览•Tuxedo Message Queue：与其他产品的集成•小结Oracle Tuxedo Message Queue 背景介绍•消息中间件产品：从80年代开始•解决分布式系统中异构平台，不同编程语言，不同网络协议的模块之间的交互技术•松耦合•通常是异步模式•将丰富的消息处理功能与Tuxedo的高可用性、高性能、可扩展性等相结合•利用Tuxedo-Exalogic技术，提高吞吐量降低延迟•与其它消息产品的紧密集成•第一个版本为12c (12.1.1.0)•两种选择：•安装在已有的Tuxedo之上•独立安装为什么要了解Oracle Tuxedo Message Queue•现有的Tuxedo用户需要消息中间件：–TMQ与Tuxedo无缝集成–配置管理容易上手–从/Q升级非常容易•现有的OMQ客户–功能升级–TMQ与OMQ双向互通，可以分阶段迁移•还不是Tuxedo或OMQ用户–丰富的功能–基于Tuxedo的，经过实践检验的平台技术Oracle Tuxedo Message Queue 功能概览全景图功能TMQ 通信方式点对点✓发布/订阅✓消息传递模式同步✓异步✓存储方式内存✓硬盘✓消息转发方式直接发送到目标队列✓存储转发✓消息交付的可靠性语义可靠✓不保证可靠✓XA交易✓消息过滤与排序✓触发Tuxedo服务✓同步模式和异步模式•同步模式：发送者阻塞在等待确认消息•异步模式：发送者无阻塞式发送消息•异步确认模式：异步显式调用tpdeqplus()获取确认消息•异步无确认模式：不关心发送的状态，没有ACK。

这种模式可以应用在对性能敏感的应用场景下消息传递方式•DIP(Delivery Interest Point)：用户关心的消息传递过程中的传递检查点•对于可靠传输模式(SAF/DQF/CONF)，在某些条件下可能出现重复送达情况，OTMQ 会标志出这种消息，供应用逻辑决定处理方式。

DIP 消息存储位置发送方返回（阻塞方式）接收者显式发送确认消息保证可靠递交存储转发(SAF) 源节点(SAF 队列) 存储成功是源节点目标队列(DQF) 目标节点(DQF队列) 存储成功是目标节点目标节点接收者确认是目标节点接收确认(CONF)QUE NA 消息成功保存到了目标队列否NADEQ NA 消息从目标队列中取出来否NAACK NA 接收者确认是NA使用DIP的例子•假设程序使用同步（WF）方式，并设置DIP为SAF来发送消息，则大致流程如下：clienttpenqplus() OTMQ ServerSAF1.call tpenqplus()2.send request to server3.store msg in SAF4.returns success5.tpenqplus() returns successtarget queue 6.store msg in target queue and get success response 7.remove msg in SAF client queue8.store ACK in client queue9.dequeue ACK message to check the success status–Client 调用tpenqplus()来enqueue 消息 –tpenqplus()向OTMQ server 发起请求–OTMQ server 收到请求后先将用户消息入SAF 存储 –OTMQ server 通知tpenqplus()可以成功返回–Client 继续tpenqplus()之后的操作–OTMQ server 进行真正的enqueue 操作，将用户消息入目标队列 –消息入目标队列操作成功后，OTMQ server 将用户消息从SAF 中移除，并返回成功ACK 到用户队列–Client 从自己的用户队列中读取ACK 消息以确认最终消息送达队列读权限：独占式和共享式•独占方式读访问消息队列–一个TMQ进程可以同时最多独占两个Queue：主队列(primary queue)，从属队列(secondary queue)–在发送/接收消息前，必须成功调用tpqattach()，才能独占消息队列的读访问权限。

–仅有一个应用可以独立访问主队列(primary queue)，或其从属队列(secondary queue)，并从中读取数据。

•支持共享资源队列(multi-resource queue)，允许多个应用读取MRQ 中的消息UMA:消息递达失败处理•UMA(Undelivered Message Action):在指定DIP消息发送失败（超时，或地址错误等）的时候需要执行的操作。

•UMA包含：–DISC：失败的消息直接丢弃–RTS：将消息返回到发送者–SAF：将消息转发到SAF队列里–DLQ：将消息转发到死信队列（DLQ）里，死信队列是个基于内存的队列，如果机器重启，该队列里的消息并不会保留。

–DLJ：将消息转发到死信日志队列（DLJ）里，死信日志队列是个基于磁盘的队列，如果机器重启，该队列里的消息会一直存在。

消息过滤–简单条件过滤•OTMQ支持应用选择消息过滤类型来读取消息。

•简单过滤–每次调用tpdeqplus()时, 在TPQCTL中指定过滤条件–支持以下过滤条件✓Priority✓MSG_TYPE✓MSG_CLASS✓CORRID✓SEQ NUMBER消息过滤-复杂过滤–两个API✓tpqsetselect()，tpqcancelselect() –一次设置多次使用–支持多个过滤条件✓MSGID✓CORRID✓Priority✓Msg sender queue✓Msg type✓Msg class✓Seq Number✓User data–具有关系运算功能✓<, <=, >, >=, ==, !=–具有逻辑运算功能✓多个过滤条件之间“与”✓多个过滤条件之间“或”–具有排序功能✓先入先出✓取最大值✓取最小值•例如：sender queue 是“management” 且Priority最高的发布/订阅•发布者发布消息（ tpqpublish() ）–此时发布者是不需要知道接收者在哪里或有多少接收者。

–用异步方式发送已经订阅的消息。

–指定Topic•订阅者订阅感兴趣的消息，在服务端注册该订阅的消息。

–tpqsubscribe()订阅消息，支持正则表达式，例如topic=A*–tpqunsubscribe()取消订阅•TMQ将消息发送到所有订阅该消息的订阅者指定的队列中。

队列别名•可以指定消息队列的别名•使应用程序内部模块之间的接口更灵活:–无需改动应用代码，仅仅改动消息队列的配置就可以实现不同的应用逻辑。

•应用可以在运行时绑定消息队列的别名。

•命名服务–利用进程内存缓存提高效率–命名服务的高可用性：配置两个全局命名服务（主name服务和备份name 服务）。

当主name服务意外停止服务后，允许备份name服务接管全局的命名服务。

OTMQ的高可用性•OTMQ的server group自动迁移•用户可以配置OTMQ服务所在的主节点和备份节点。

•主节点失败导致OTMQ服务不可用，则主节点上的OTMQ server group会自动迁移到备份节点上。

•快速的迁移过程对应用的影响被减小到最小。

•利用集群环境可以达到99.999%以上的高可用性。

消息触发Tuxedo服务调用•系统进程TMQFORWARDPLUS：接收消息，并把该消息转发到与应用定义的队列同名的Tuxedo服务处理，并将结果返回到应用指定的队列中。

Client:tpenqplus(“TOUPPER”, msg…) tpdeqplus(“reply_que”, …)TuxedoOTMQTuxMsgQTMQFORWARDPLUSTOUPPEROTMQ QspaceTOUPPERreply_que1 tpenqplus2 enqueue3 dequeue4 tpcall5 tpreturn6 enqueue7 tpdeqplus8 dequeue9 return msg•事务处理：由TMS服务提供事务处理功能•把对消息的操作包含在全局事务中•保证事务范围中所有操作的原子性•事务中可以包含Tuxedo其它操作TRAN1将消息放到队列中CLIENT:tpbegin() tpenqplus() tpcommit()TRAN2取得一个消息Tuxedo服务调用将返回结果放到结果队列中TMQFORWARDPLUS: tpbegin()tpdeqplus()tpcall()tpenqplus()tpcommit()Oracle Tuxedo Message Queue 与其他产品的集成OTMQ与其它产品的互联与集成•能够与Oracle Tuxedo Message Queue互联与集成的产品包括：–WLS JMS–OMQ–MQ SeriesOTMQ与WLS JMS的集成•WLS JMS是一个企业级的，与Weblogic服务器紧密整合的消息系统。

•WLS JMS 完全遵从JMS规范.•OTMQ与WLS JMS的整合方式：–通过WTC tBridge来定义OTMQ queue与WLS JMS queue之间的双向映射，使得WLS的JMS client和OTMQ client之间能够互动。

–受限于WTC tBridge对原有Oracle Tuxedo /Q的支持TuxedoWLSJMS ClientJMS queuetBridgeDGWOTMQserverOTMQ queueOTMQClient send recv tpenqueuetpdeqplustpenqplustpdequeuesendrecvOTMQ与OMQ的集成•Oracle Message Queue（OMQ）是一个具有悠久历史的消息中间件。

•OMQ在许多企业级分布式应用中都被广泛应用。

•OTMQ与OMQ的整合方案–OTMQ通过自身的TuxMsgQLD Server与OMQ的Link Driver互联，以达到消息级别的整合。

TuxedoOMQOMQ Client Pams_put_msg OTMQserverOTMQ queuetpenqplustpdeqplusOTMQClienttpdeqplustpenqplusLinkDriverPams_get_msgOMQ queueTuxMsgQLDServerGCP/QETuxedo /Q 到OTMQ 的升级•/Q 的Qspace 升级为OTMQ 版本的Qspace （使用OTMQ 提供的升级工具）。