文档章节

IBM MQ介绍

sckgeneral
 sckgeneral
发布于 2016/09/18 07:31
字数 9534
阅读 134
收藏 3

【编者按】关于MQ,我以前只是有个大概概念。譬如之前,就是根据前端送过来的消息,format成后端所需要的消息格式,并将format后的消息放入一个Queue文件中,如果消息发送成功(收到该request成功或者失败的response),该消息将从Queue文件中删除;如果与后端的链路断掉了,该消息会一直重发,直到链路连通,后者重试N次后放弃(N次:配置在文件中,譬如9999)。

以下都是转载内容,包含的主题如下:

初识 IBM MB与MQ ==> good
消息中间件介绍
IBM WebSphere MQ 编程 ==> good
IBM MQSeries的使用指南 ==> good
IBM WebSphere MQ 简介和概述 ==> good

 

 


 

 

初识 IBM MB与MQ

 

转自:http://hi.baidu.com/һҹʮһ��/blog/item/adc02753211c3c2943a75b6c.html

MQ和MB的特性,以及他们的区别与联系

首先从概念上来说,MQ是消息中间件(号称:一旦发出保证送达),MB是ESB产品。

MQ负责在两个系统之间传递消息,这两个系统可以是异构的,处于不同硬件、不同操作系统、用不同语言编写,只需要简单的调用几个MQ的API,就可以互相通讯,你不必考虑底层系统和网络的复杂性。MQ作为IBM的一个拳头产品,虽然功能看上去很简单,就是个消息队列,但他却是IBM中间件的核心,也是相比其他厂商(比如BEA)的一个优势。MQ不仅有很高的性能,而且对各种平台的支持非常好,几乎你能想到的硬件和操作系统平台以及编程语言,MQ都有专门的API支持。

但MQ的功能仅限于消息队列,至于应用A发给应用B的消息格式是怎样的、能不能被应用B解析,MQ管不了,他只是尽力将消息发到目的地(MQ能够应付多种异常情况,例如网络阻塞、临时中断等等)。此外,如果应用的数目多了,那互相之间都要建立MQ连接,网络拓扑就成了蜘蛛网了(就好像是最初的电话系统)

因此,我们将网络的星型拓扑引入系统架构中,把一对一的MQ换成一个中心节点,即ESB,MB即是IBM的ESB产品。

MB处于系统的中心,起到一个总线的作用,所有应用都直接连接到MB(一般是通过MB主动调用),而不是应用之间直接互联,这样的好处不言而喻,可以极大的降低应用之间的耦合性。由此引出MB的两大核心功能:消息路由和数据转换。
因为各个应用都插入到MB上,所以应用A只管把消息丢给MB,MB自动根据消息字段、以及业务逻辑,判断要把消息交给谁,这就像路由器一样,根据数据包的头把包路由到相应地址。MB内部的业务逻辑由开发人员设定,当然利用MB的Toolkit,编写业务逻辑也非常简单:拖一些节点,用箭头把它们连起来,就像是画流程图一样,非常形象简单。再用MB的脚本语言(类似sql的脚本)实现逻辑判断,通俗地说就是判断要走哪个逻辑分支(if...else.....)。

不过各个应用是怎样与MB连接的呢?MB提供了三种方式:MQ、文件和web service(好像不单三种http、tcp/ip)

MQ方式即是利用MQ将MB与应用互联;文件方式则是指定某个目录,MB会自动监视那个文件目录,一旦文件有改变则认为是新的消息到来,MB自动读取指定文件的内容;而web service就不用解释了,直接利用web service进行通讯。MB支持这些互联方式也是为了最大化兼容性,特别是对于那些遗留系统或是不支持主流通讯方式的系统。

最后说说一个比较偏门的ESB产品:websphere ESB。听过的人可能不多,因为IBM在中国推广的比较少,这个WESB很像是MB的精简版,只支持JMS、WS等少数几种J2EE的通讯方式,所以是为J2EE专门准备的。不像MB,支持数十种平台和通讯方式,例如FTP,甚至很多你根本没听说过的很古老的通信协议。这两者的性能相差不少,价格也有三四倍的差距。更要命的是,原先在WESB上开发的东西,是不能迁移到MB使用的,IBM似乎铁了心要狠狠宰我们,唯一的方法是再买一个MB,然后用MQ把WESB和MB连接起来,各跑各的。

漏了一个DataPower,这东西我只是略有了解,它的卖点在于硬件支持XML,所以性能比较好,此外还支持一下web service安全方面的东东。因此,WESB是最小功能集,而MB与datapower功能上有一定重叠,如XML,可对数据进行格式转换(貌似还可以提供JAVA接口做更复杂的个性化的格式转换)。

消息中间件介绍

转自:http://hi.baidu.com/��Ű���/blog/item/6519d04febba3b3fafc3abb7.html

消息中间件概述

消息队列技术是分布式应用间交换信息的一种技术。消息队列可驻留在内存或磁盘上,队列存储消息直到它们被应用程序读走。通过消息队列,应用程序可独立地执行--它们不需要知道彼此的位置、或在继续执行前不需要等待接收程序接收此消息。

在分布式计算环境中,为了集成分布式应用,开发者需要对异构网络环境下的分布式应用提供有效的通信手段。为了管理需要共享的信息,对应用提供公共的信息交换机制是重要的。

设计分布式应用的方法主要有:远程过程调用(PRC)--分布式计算环境(DCE)的基础标准成分之一;对象事务监控(OTM)--基于CORBA的面向对象工业标准与事务处理(TP)监控技术的组合;消息队列(MessageQueue)--构造分布式应用的松耦合方法。


(a) 分布计算环境/远程过程调用 (DCE/RPC)

RPC是DCE的成分,是一个由开放软件基金会(OSF)发布的应用集成的软件标准。RPC模仿一个程序用函数引用来引用另一程序的传统程序设计方法,此引用是过程调用的形式,一旦被调用,程序的控制则转向被调用程序。

在RPC实现时,被调用过程可在本地或远地的另一系统中驻留并在执行。当被调用程序完成处理输入数据,结果放在过程调用的返回变量中返回到调用程序。RPC完成后程序控制则立即返回到调用程序。因此RPC模仿子程序的调用/返回结构,它仅提供了Client(调用程序)和Server(被调用过程)间的同步数据交换。


(b) 对象事务监控 (OTM)

基于CORBA的面向对象工业标准与事务处理(TP)监控技术的组合,在CORBA规范中定义了:使用面向对象技术和方法的体系结构;公共的Client/Server程序设计接口;多平台间传输和翻译数据的指导方针;开发分布式应用接口的语言(IDL)等,并为构造分布的Client/Server应用提供了广泛及一致的模式。


(c) 消息队列 (Message Queue)

消息队列为构造以同步或异步方式实现的分布式应用提供了松耦合方法。消息队列的API调用被嵌入到新的或现存的应用中,通过消息发送到内存或基于磁盘的队列或从它读出而提供信息交换。消息队列可用在应用中以执行多种功能,比如要求服务、交换信息或异步处理等。

中间件是一种独立的系统软件或服务程序,分布式应用系统借助这种软件在不同的技术之间共享资源,管理计算资源和网络通讯。它在计算机系统中是一个关键软件,它能实现应用的互连和互操作性,能保证系统的安全、可靠、高效的运行。中间件位于用户应用和操作系统及网络软件之间,它为应用提供了公用的通信手段,并且独立于网络和操作系统。中间件为开发者提供了公用于所有环境的应用程序接口,当应用程序中嵌入其函数调用,它便可利用其运行的特定操作系统和网络环境的功能,为应用执行通信功能。

如果没有消息中间件完成信息交换,应用开发者为了传输数据,必须要学会如何用网络和操作系统软件的功能,编写相应的应用程序来发送和接收信息,且交换信息没有标准方法,每个应用必须进行特定的编程从而和多平台、不同环境下的一个或多个应用通信。例如,为了实现网络上不同主机系统间的通信,将要求具备在网络上如何交换信息的知识(比如用TCP/IP的socket程序设计);为了实现同一主机内不同进程之间的通讯,将要求具备操作系统的消息队列或命名管道(Pipes)等知识。

目前中间件的种类很多,如交易管理中间件(如IBM的CICS)、面向Java应用的Web应用服务器中间件(如IBM的WebSphere Application Server)等,而消息传输中间件(MOM)是其中的一种。它简化了应用之间数据的传输,屏蔽底层异构操作系统和网络平台,提供一致的通讯标准和应用开发,确保分布式计算网络环境下可靠的、跨平台的信息传输和数据交换。它基于消息队列的存储-转发机制,并提供特有的异步传输机制,能够基于消息传输和异步事务处理实现应用整合与数据交换。

IBM 消息中间件MQ以其独特的安全机制、简便快速的编程风格、卓越不凡的稳定性、可扩展性和跨平台性,以及强大的事务处理能力和消息通讯能力,成为业界市场占有率最高的消息中间件产品。

MQ具有强大的跨平台性,它支持的平台数多达35种。它支持各种主流Unix操作系统平台,如:HP-UX、AIX、SUN Solaris、Digital UNIX、Open VMX、SUNOS、NCR UNIX;支持各种主机平台,如:OS/390、MVS/ESA、VSE/ESA;同样支持Windows NT服务器。在PC平台上支持Windows9X/Windows NT/Windows 2000和UNIX (UnixWare、Solaris)以及主要的Linux版本(Redhat、TurboLinux等)。此外,MQ还支持其他各种操作系统平台,如:OS/2、AS/400、Sequent DYNIX、SCO OpenServer、SCO UnixWare、Tandem等。


 

IBM WebSphere MQ 编程

转自http://hi.baidu.com/injava/blog/item/7e2fb6ec15cf493c269791b3.html

消息队列(MQ)是一种应用程序对应用程序的通信方法。应用程序通过写和检索出入列队的针对应用程序的数据(消息)来通信,而无需专用连接来链接它们。消息传递指的是程序之间通过在消息中发送数据进行通信,而不是通过直接调用彼此来通信,直接调用通常是用于诸如远程过程调用的技术。排队指的是应用程序通过队列来通信。队列的使用除去了接收和发送应用程序同时执行的要求。

IBM WebSphere MQ 产品支持应用程序通过不同组件如处理器、子系统、操作系统以及通信协议的网络彼此进行通信。例如,IBM WebSphere MQ 支持 35 种以上的不同操作系统。

IBM WebSphere MQ 支持两种不同的应用程序编程接口:Java 消息服务(JMS)和消息队列接口(MQI)。在 IBM WebSphere MQ 服务器上,JMS 绑定方式被映射到 MQI。如图 3 所示,应用程序直接与其本地队列管理器通过使用 MQI 进行对话,MQI 是一组要求队列管理器提供服务的调用。MQI 的引人之处是它只提供 13 次调用。这意味着对于应用程序编程员它是一种非常易于使用的接口,因为大部分艰苦工作都将透明完成的。

图形 2. IBM WebSphere MQ 编程


 

IBM MQ介绍1 - zdrone - zdrone的博客

 

图 2 显示了 IBM WebSphere MQ 编程的原理。第一步是让应用程序与队列管理器连接。它通过 MQConnect 调用来进行此连接。下一步使用 MQOpen 调用为输出打开一个队列。然后应用程序使用 MQPut 调用将其数据放到队列上。要接收数据,应用程序调用 MQOpen 调用打开输入队列。应用程序使用 MQGet 调用从队列上接收数据。

图中还显示了消息通道代理(MCA)、通道出口和对象权限管理器(OAM)。MCA 是 IBM WebSphere MQ 程序,它使用现有传输服务诸如 TCP/IP 与 SNA 将消息从本地传输队列移到目标队列管理器。这些传输服务即通道。通道出口是用户写入库,可以在通道运作期间,从已定义位置号之一进入这些库。OAM 是命令和对象管理的缺省授权服务(针对操作系统)。这三个组件对 IBM WebSphere MQ 的现有安全性解决方案非常重要。


 

 

 

 

 

 

介绍关于IBM MQSeries的使用指南

文章转载自网管之家:http://www.bitscn.com/pdb/java/200605/21739.html

  随着计算机网络和分布式应用的不断发展,远程消息传递越来越成为应用系统中不可缺少的组成部分。商业消息中间件的出现保证了消息传输的可靠性,高效率和安全性,同时也减少了系统的开发周期。目前应用最多的消息中间件产品为IBM MQSeries。本文就针对MQ的基本操作与配置进行详细的阐述,希望对读者有所帮助。
  
  一.MQ基本操作
  
  MQ中有几个很重要的组件:队列管理器(QueueManager)、队列(Queue)和通道(Channel)。其基本的操作方法如下:
  
  创建队列管理器
  crtmqm ?q QMgrName
  -q是指创建缺省的队列管理器
  
  删除队列管理器
  dltmqm QmgrName
  
  启动队列管理器
  strmqm QmgrName
  如果是启动默认的队列管理器,可以不带其名字
  
  停止队列管理器
  endmqm QmgrName 受控停止
  
  endmqm ?i QmgrName 立即停止
  
  endmqm ?p QmgrName 强制停止
  
  显示队列管理器
  dspmq ?m QmgrName
  
  运行MQSeries命令
  runmqsc QmgrName
  如果是默认队列管理器,可以不带其名字
  
  往队列中放消息
  amqsput QName QmgrName
  如果队列是默认队列管理器中的队列,可以不带其队列管理器的名字
  
  从队列中取出消息
  amqsget QName QmgrName
  如果队列是默认队列管理器中的队列,可以不带其队列管理器的名字
  
  启动通道
  runmqchl ?c ChlName ?m QmgrName
  
  启动侦听
  runmqlsr ?t TYPE ?p PORT ?m QMgrName
  
  停止侦听
  endmqlsr -m QmgrName
  
  MQSeries命令
  
  定义死信队列
  DEFINE QLOCAL(QNAME) DEFPSIST(YES) REPLACE
  
  设定队列管理器的死信队列
  ALTER QMGR DEADQ(QNAME)
  
  定义本地队列
  DEFINE QL(QNAME) REPLACE
  
  定义别名队列
  DEFINE QALIAS(QALIASNAME) TARGQ(QNAME)
  
  远程队列定义
  DEFINE QREMOTE(QRNAME) +
  RNAME(AAA) RQMNAME(QMGRNAME) +
  XMITQ(QTNAME)
  
  定义模型队列
  DEFINE QMODEL(QNAME) DEFTYPE(TEMPDYN)
  
  定义本地传输队列
  DEFINE QLOCAL(QTNAME) USAGE(XMITQ) DEFPSIST(YES) +
  INITQ(SYSTEM.CHANNEL.INITQ)+
  PROCESS(PROCESSNAME) REPLACE
  
  创建进程定义
  DEFINE PROCESS(PRONAME) +
  DESCR(‘STRING’)+
  APPLTYPE(WINDOWSNT)+
  APPLICID(’ runmqchl -c SDR_TEST -m QM_ TEST’)
  其中APPLTYPE的值可以是:CICS、UNIX、WINDOWS、WINDOWSNT等
  
  创建发送方通道
  DEFINE CHANNEL(SDRNAME) CHLTYPE(SDR)+
  CONNAME(‘100.100.100.215(1418)’) XMITQ(QTNAME) REPLACE
  其中CHLTYPE可以是:SDR、SVR、RCVR、RQSTR、CLNTCONN、SVRCONN、CLUSSDR和CLUSRCVR。
  
  创建接收方通道
  DEFINE CHANNEL(SDR_ TEST) CHLTYPE(RCVR) REPLACE
  
  创建服务器连接通道
  DEFINE CHANNEL(SVRCONNNAME) CHLTYPE(SVRCONN) REPLACE
  
  显示队列的所有属性
  DISPLAY QUEUE(QNAME) [ALL]
  
  显示队列的所选属性
  DISPLAY QUEUE(QNAME) DESCR GET PUT
  DISPLAY QUEUE(QNAME)MAXDEPTH CURDEPTH
  
  显示队列管理器的所有属性
  DISPLAY QMGR [ALL]
  
  显示进程定义
  DISPLAY PROCESS(PRONAME)
  
  更改属性
  ALTER QMGR DESCR(‘NEW DESCRIPTION’)
  ALTER QLOCAL(QNAME) PUT(DISABLED)
  ALTER QALIAS(QNAME) TARGQ(TARGQNAME)
  
  删除队列
  DELETE QLOCAL(QNAME)
  DELETE QREMOTE(QRNAME)
  
  清除队列中的所有消息
  CLEAR QLOCAL(QNAME)
  
  二.配置一个能够通信的远程连接
  
  以上讲述了MQ的基本命令操作,但只知道这些是没有实际意义的。MQ的最终目的是实现远程通信,所以下面就以一个具体的例子来说明如何实现远程连接。这个例子的目的是建立可以实现消息传递的一对MQ服务器,它们分别基于NT和UNIX平台。
  
  首先在NT端建一队列管理器
  crtmqm ?q QM_NT
  
  启动队列管理器
  strmqm QM_NT
  
  运行MQ控制台命令
  runmqsc QM_NT
  
  创建死信队列
  DEFINE QL(NT.DEADQ) DEFPSIST(YES) REPLACE
  
  更改队列管理器属性,设置其死信队列
  ALTER QMGR DEADQ(NT.DEADQ)
  
  创建进程定义
  DEFINE PROCESS(P_NT)+
  APPLTYPE(WINDOWSNT)+
  APPLICID(’ runmqchl -c SDR_NT -m QM_NT’)
  
  创建本地传输队列
  DEFINE QL(QT_NT) USAGE(XMITQ) DEFPSIST(YES) +
  INITQ(SYSTEM.CHANNEL.INITQ)+
  PROCESS(P_NT) REPLACE
  
  创建远程队列定义,对应于UNIX机器上的本地队列Q_UNIX,传输队列为QT_NT
  DEFINE QREMOTE(QR_NT)+
  RNAME(Q_UNIX) RQMNAME(QM_UNIX)+
  XMITQ(QT_NT)
  
  创建发送方通道,其传输队列为QT_NT,远程主机地址为10.10.10.2,侦听端口为1414
  DEFINE CHANNEL(SDR_NT) CHLTYPE(SDR)+
  CONNAME(‘10.10.10.2(1414)’) XMITQ(QT_NT) REPLACE
  
  创建服务器连接通道
  DEFINE CHANNEL(S_NT) CHLTYPE(SVRCONN) REPLACE
  
  在UNIX端创建队列管理器
  crtmqm ?q QM_UNIX
  
  启动队列管理器
  strmqm QM_UNIX
  
  添加侦听程序
  
  修改/etc/services文件,加入一行:
  MQSeries 1414/tcp #MQSeries channel listener
  
  修改/etc/inetd.conf文件,加入一行(启动侦听程序)
  MQSeries stream tcp nowait mqm /usr/lpp/mqm/bin/amqcrsta amqcrsta ?m QM_UNIX
  
  运行以下命令,以使修改起作用
  refresh ?s inetd
  
  运行MQ控制台命令
  runmqsc QM_UNIX
  
  创建死信队列
  DEFINE QL(UNIX.DEADQ) DEFPSIST(YES) REPLACE
  
  更改队列管理器属性,设置其死信队列
  ALTER QMGR DEADQ(UNIX.DEADQ)
  
  创建接收方通道,其名字必须与远程发送方相同
  DEFINE CHANNEL(SDR_NT) CHLTYPE(RCVR) REPLACE
  
  创建本地队列
  DEFINE QL(Q_UNIX) DEFPSIST(YES) REPLACE
  
  创建服务器连接通道
  DEFINE CHANNEL(S_UNIX) CHLTYPE(SVRCONN) REPLACE
  
  经过以上操作之后,远程连接的配置工作完成。接下来需要验证配置是否正确。
  
  在NT端启动发送方通道
  runmqchl ?c SDR_NT ?m QM_NT 或 start chl(SDR_NT)
  
  从NT端发送消息到UNIX端
  amqsput QR_NT QM_NT
  
  在UNIX端接收消息
  /usr/mqm/samp/bin/amqsget Q_UNIX QM_UNIX
  
  若能收到消息,说明配置成功。
  
  另,在NT下一般情况下在建立队列管理器时会自动建立侦听器,启动队列管理器时则会自动启动侦听程序。当然也可以手动配置侦听程序。
  
  修改\winnt\system32\drivers\etc\services文件,在文件中加入一行:
  
  MQSeries 1414/tcp #MQSeries channel listener
  
  启动侦听程序
  runmqlsr ?t tcp ?p 1414 ?m QM_NT
  
  以上说明了怎样建立简单的单向传输网络。消息从NT端传送到UNIX端。建立从UNIX端到NT端的远程连接和以上相仿,要建立双向的传输网络也是同样的道理。
  
  三.配置JNDI
  
  用JMS实现消息的发送和接收时,经常会用到JNDI。因为JNDI这种方式比较灵活,对于编程也比较简单。
  在安装了MQSeries Client for Java之后,在\java\bin目录下找到JMSAdmin.config文件。该文件主要用来说明Context的存储方式及存储地址,对应于文件中的两个参数INITIAL_CONTEXT_FACTORY和PROVIDER_URL。典型的JMSAdmin.config文件内容如下:
  
  #INITIAL_CONTEXT_FACTORY=com.sun.jndi.ldap.LdapCtxFactory
  INITIAL_CONTEXT_FACTORY=com.sun.jndi.fscontext.RefFSContextFactory
  #INITIAL_CONTEXT_FACTORY=com.ibm.ejs.ns.jndi.CNInitialContextFactory
  #
  #PROVIDER_URL=ldap://polaris/o=ibm,c=us
  PROVIDER_URL=file:/d:/temp
  #PROVIDER_URL=iiop://localhost/
  #
  SECURITY_AUTHENTICATION=none
  
  INITIAL_CONTEXT_FACTORY表示JMSAdmin Tool使用的服务提供商。当前有三种受支持的值。com.sun.jndi.ldap.LdapCtxFactory用于LDAP,如果使用它就必须安装一个LDAP服务器。com.sun.jndi.fscontext.RefFSContextFactory用于文件系统上下文,它只需要使用者提供存放上下文的文件路径。com.ibm.ejs.ns.jndi.CNInitialContextFactory是专门为websphere提供的,它需要和websphere的CosNaming资源库一起使用。
  PROVIDER_URL表示会话初始上下文的URL,由JMSAdmin tool实现的所有JNDI操作的根。它和INITIAL_CONTEXT_FACTORY一一对应。
  
  ldap://hostname/contextname 用于LDAP
  file:[drive:]/path

转自:http://dev.yesky.com/185/7728685.shtm

IBM WebSphere MQ 简介和概述

  在开始之前,让我们先来确定使用 WebSphere MQ 解决的业务问题的种类,并了解 WebSphere MQ 如何能够帮助您满足业务要求。

  问题:自动化孤岛

  在大多数业务中,业务的信息技术 (IT) 基础结构中存在许多不同的技术。系统由这些来自许多供应商的不同的技术组成,并且具有不同的硬件平台、编程语言、操作系统和通信链路。通常,连接不同的系统非常复杂并且可能代价高昂,所以许多系统之间都相互隔离。

  目前,越来越多的业务还需要以电子的方式与其客户和供应商进行通信,而这些客户和供应商可能比该业务本身使用了更多不同的技术。因此,需要某种简便的、廉价的和可靠的机制用来连接这些异类的系统(“自动化孤岛”),以便在内部和外部对业务的 IT 基础结构进行集成。

  解决方案:WebSphere MQ

  通过提供一种程序到程序的通信方式,WebSphere MQ 非常适合于上面所描述的环境。图 1 显示了这种通信方式的基本机制。

  图 1. 程序到程序的通信

  p1

  程序 A 准备好一条消息,并将其放入队列。然后,程序 B 从该队列中获取消息,并对其进行处理。这两个程序都使用一种应用程序编程接口 (API) 与该队列进行交互。WebSphere MQ API 称为消息队列接口 (MQI)。任何一个程序都无需了解对方的存在,并且这两个程序无需同时执行。如果程序 A 在程序 B 尚未执行的时候将一条消息放入队列,那么该队列将存储这条消息,直到程序 B 开始执行并准备处理这条消息。类似地,当程序 B 从队列中检索消息时,程序 A 可能已经不再处于执行状态。

  应用程序设计

  使用 WebSphere MQ 提供的基本通信机制,可以进行同步和异步的应用程序设计。

  在同步的应用程序设计中,如图 2 所示,假定同时执行这两个应用程序。程序 A 向队列 1 发送一条消息并等待应答。程序 B 检索得到该消息,并对它进行处理,然后将应答消息发送到队列 2 中,以便程序 A 进行检索。在使用 WebSphere MQ 设计应用程序时,通常每个程序使用不同的队列向其他程序发送消息。虽然这不是必需的,但这样可以提供更简单的应用程序设计和编程逻辑。另外请记住,这里假定两个程序同时执行。如果当程序 A 发送消息时,程序 B 没有执行,那么程序 A 将阻塞,直到程序 B 启动并对消息进行处理。这是同步应用程序通信中的设计问题。

  图 2. 同步应用程序设计

  p2

  在异步应用程序设计中,如图 3 所示,程序 A 再次将消息放到队列 1,以便程序 B 对其进行处理,但现在,程序 C 与程序 A 进行异步地操作,它检索消息并对其进行处理。通常,程序 A 和程序 C 是相同应用程序中的不同部分。

  图 3. 异步应用程序设计

  p3

  对于 WebSphere MQ 来说,异步设计是一种非常合适的模型。程序 A 将消息放到队列中,并继续执行,即使程序 B 并不对这些消息进行处理,也是如此。在这种情况下,队列将存储这些消息,直到程序 B 重新启动。这种模型有一种变种,即程序 A 将一条或多条消息放到队列中,并继续进行其他的处理,然后返回来检索和处理应答消息。

  程序之间的这种通信方式称为消息传递。它与其他通信方式(如对话式的通信或调用和返回通信)的不同之处在于,进行通信的程序之间具有时间独立性。程序接收消息作为输入,并输出其结果作为消息,而不需要同时运行发送或接收程序。

  队列管理器和 MQI

  WebSphere MQ 中的队列由队列管理器所拥有并进行管理。队列管理器还为应用程序提供了MQI API,允许它们访问队列以及其中包含的消息。MQI 在 WebSphere MQ 支持的所有平台中保持一致,并对应用程序隐藏了队列管理器的实现细节。

  MQI 中有 8 种主要的调用:

  MQCONN——连接到队列管理器

  MQCONNX——使用连接选项连接到队列管理器

  MQDISC——断开与队列管理器的连接

  MQOPEN——打开队列以便进行访问

  MQCLOSE——关闭访问的队列

  MQPUT——将一条消息放入队列

  MQGET——从队列中获取一条消息

  MQPUT1——打开队列,放入一条消息,然后关闭该队列

  MQI 中有 5 种次要的调用:

  MQBEGIN——开始一个工作单元

  MQCMIT——提交一个工作单元

  MQBACK——回滚一个工作单元

  MQINQ——查询 WebSphere MQ 对象(队列是一种 WebSphere MQ 对象,队列管理器是另一种对象)的属性

  MQSET——设置 WebSphere MQ 对象的属性

  消息

  WebSphere MQ 中的消息包含两个部分:WebSphere MQ 使用的 Header 和应用程序数据。图 4 显示了一条 WebSphere MQ 消息。

  图 4. WebSphere MQ 消息

  p4

  应用程序数据可以包含任何字节序列。它是使用 WebSphere MQ 与其他应用程序进行通信的应用程序所私有的,并且对 WebSphere MQ 没有什么意义。对于应用程序数据的内容没有任何限制,但不同的平台所允许的消息的最大长度有所不同。在大多数系统中,最大长度为 100MB,但有些系统的最大长度为 4MB。

  消息中可能包含各种各样的 Header,但所有的消息都包含一个称为消息描述符 (MQMD) 的 Header。其中包含了关于该消息的控制信息,队列管理器和接收应用程序将使用到这些控制信息。稍后将提供关于 MQMD 和其他 Header 的更详细的信息。

 本地和远程队列

  队列管理器可以位于相同或不同的计算机上,它们可以彼此通信,并在不同队列管理器的队列之间传递消息。队列管理器为消息提供了可靠的传递。例如,当应用程序将消息放入到队列中时,队列管理器将确保消息的存储是安全的、可恢复的,并向接收应用程序传递一次且仅传递一次,即使必须将消息传递到另一个队列管理器所拥有的队列,也是如此。

  当应用程序打开队列时,应用程序所连接的队列管理器将确定该队列是队列管理器所拥有的本地队列,还是由另一个队列管理器所拥有的远程队列。对于本地队列,直接将消息放入到该队列。如果队列是远程的,那么队列管理器将消息放到一个称为传输队列的特殊队列。

  然后,消息通道代理 (MCA) 从传输队列中获取消息,并将其通过网络发送到接收端的 MCA。接收 MCA 将该消息放到目标队列。在将消息放到目标队列中之后,便将其从传输队列中删除。消息流在队列管理器之间可以是双向的,如图 5 中所示。

  图 5. 发送消息

  p5

  如果接收MCA 不能将该消息放到目标队列中,那么将根据消息描述符中的选项对其进行处理。可能将其放到死信队列,也可能将其返回给发送者,甚至将其丢弃。

  通过这种在队列管理器之间传递消息的能力,WebSphere MQ 提供了两种重要的优点:

  应用程序开发人员不需要了解网络的详细信息。

  MCA 可以使用各种网络和通信协议与其他的 MCA 相互通信,并且甚至可以在一段时间之后更改所使用的协议。但是,应用程序开发人员仅需要了解与队列管理器通信所需的 MQI 调用。

  仅需要建立更少的通信链路。

  许多应用程序使用一个队列管理器,它们可以与使用另一个队列管理器的应用程序通信,但是在一对 MCA 之间只需要一条通信链路。

  设计可能性

  现在您已经比较清楚地了解了 WebSphere MQ 的工作方式,即使仅仅是在概略的层次上,下面让我们来看看在使用 WebSphere MQ 设计系统时,应用程序设计的可能性。

  并行处理

  要完成总体的业务事务,应用程序可能需要执行多项任务。例如,旅行社可能需要预定航班、预订酒店房间和预订出租车。使用 WebSphere MQ,可以将请求消息放到为航班预定系统、酒店预订系统和轿车出租应用程序提供服务的 3 个队列中。每个应用程序都可以与其他两个应用程序并行地执行自己的任务,然后将应答消息放到旅行社应用程序提供的队列中。在收到这 3 个应答之后,旅行社应用程序可以生成综合的旅行路线。这种并行处理的方式可以极大地提高整体性能。

  客户端/服务器处理

  另一种应用程序设计方案是客户端/服务器处理。在这种情况下,一台服务器仅使用一个队列接收来自多个客户端应用程序的消息。每个请求消息的消息描述符可以指定一个应答队列。在服务器完成对消息的处理之后,它将应答消息发送到消息描述符中指定的应答队列,这样可以使得每个客户端应用程序相对于其他客户端应用程序独立地接收到其应答消息。

  消息描述符中还有一个包含消息标识符的字段。应答消息的消息描述符可以包含对应的请求消息的标识符。这样做使得客户端应用程序可以在应答消息和以前发送的请求消息之间进行关联。

  要使用客户端/服务器处理来提高应用程序的性能和可靠性,可以使用多个服务器应用程序实例为同一个请求队列服务。

  触发

  WebSphere MQ 可以在消息放入到队列中以及某些条件满足时,启动一个应用程序。这称为触发。下面是触发的工作方式:

  程序将消息放入到支持触发的队列中。

  如果触发的条件满足,则发生触发事件。

  队列管理器检查应用程序队列所引用的进程对象。该进程对象指定了需要启动的应用程序。

  队列管理器创建包含关于进程对象和队列的信息的触发消息。

  将该触发消息放到启动队列。

  由一个称为触发监视器的程序负责检索消息,并启动合适的应用程序,将触发消息的信息传递给这个应用程序。

  当第一次将消息放到队列中时、当队列中包含的消息达到某个数目时、或者每次将消息放到队列中时,都可能发生触发事件,尽管最后这种情况通常不推荐使用。

  数据完整性

  有些应用程序使用会话式的程序到程序的通信方式,以使用两段式提交协议来支持分布式工作单元的实现,如图 6 中所示。

  图 6. 同步分布式工作单元

  p6

  这种功能仅在下面的情况下需要使用,业务要求在任何时刻都必须非常精确地维护两个分布式数据库之间的一致性。在实际中,这种类型的需求很少出现。当这种需求的确存在时,单个分布工作单元可能使用许多资源,并且变得非常复杂,尤其是当涉及到许多处理时。

  WebSphere MQ 提供了一种更简单的解决方案,使得多个工作单元可以异步执行,如图 7 中所示。

  图 7. 异步分布式工作单元

  p7

  第一个应用程序写入数据库,将包含对其他系统中的第二个数据库进行更新所需数据的消息放到队列中,然后提交对这两种资源的更改。因为该队列是远程的,所以消息仅进入第一个工作单元的传输队列。

  第二个工作单元包含发送 MCA 从传输队列中获取该消息,并将其发送给接收MCA,而后者负责将该消息放到目标队列。

  在第三个工作单元中,第二个应用程序从目标队列中获取该消息,并使用该消息中包含的数据对数据库进行更新。

  工作单元 1 和 3 的事务完整性,加上工作单元 2 中由 WebSphere MQ 提供的消息的一次且仅一次的可靠传递,从而确保了整个业务事务的完整性。

  安全性

  WebSphere MQ 中的安全特性包括:

  队列管理器可检查某个用户是否经过授权可以提交管理队列管理器的命令。

  队列管理器可检查某个用户或应用程序是否经过授权可以在指定的操作中访问 WebSphere MQ 资源,如队列。

  在允许 MCA 之间进行消息通信之前,MCA 可以对合作伙伴 MCA 进行身份验证。

  可以在 MCA 发送消息之前对其进行加密,然后在接收到该消息之后再对其进行解密。

  消息描述符可以包含用户 ID 和关于消息发出者的其他信息。这种信息称为消息上下文,它可以用来对消息进行身份验证,并检查该消息的发送者是否经过授权可以访问接收系统中的 WebSphere MQ 资源。

  WebSphere MQ 客户端

  WebSphere MQ 客户端可以安装在没有运行队列管理器的系统中。客户端可以将在同一系统中运行的应用程序作为WebSphere MQ 客户端,以连接到运行于另一个系统中的队列管理器,并向该队列管理器发出MQI 调用。这种应用程序称为 WebSphere MQ 客户端应用程序,而这种队列管理器称为服务器队列管理器。图 8 显示了这种配置。

  图 8. 客户端和服务器之间的链接

  p8

  WebSphere MQ 客户端应用程序和服务器队列管理器使用MQI 通道实现彼此之间的通信。当客户端应用程序发出 MQCONN 或 MQCONNX 调用时启动 MQI 通道,当客户端应用程序发出 MQDISC 调用时结束该通道。

  要使 WebSphere MQ 客户端进行有效地处理,需要快速的和可靠的同步通信连接。

  WebSphere MQ Framework

  用户和软件供应商可以使用已定义的接口来扩展或替换队列管理器功能。WebSphere MQ Framework 提供了这样的接口。

  WebSphere 允许对各种功能进行修改,以便:

  提供选择是否使用 WebSphere MQ 所提供的组件、或对其进行替换、或使用其他的组件对其进行扩充的灵活性。

  允许独立的软件供应商通过提供其他新技术所使用的组件,从而参与其中,无需对 WebSphere MQ 内部的内容进行更改。

  允许 WebSphere MQ 更快地利用各种新技术,从而更迅速地提供相关产品。

  WebSphere MQ Framework 中的组件包括:

  触发监视器接口 (TMI)

  消息通道接口 (MCI)

  名称服务接口 (NSI)

  安全支持接口 (SEI)

  数据转换接口 (DCI)

本文转载自:http://blog.sina.com.cn/s/blog_b2703d5701019bpz.html

共有 人打赏支持
sckgeneral
粉丝 1
博文 71
码字总数 21562
作品 0
丰台
私信 提问
Spring 系列,第 4 部分: Spring JMS 消息处理 1-2-3

在 Spring 系列 的第 4 期也是最后一期中,我将介绍 Spring JMS(Java 消息服务)框架的特性。JMS PG 定义了 Java 应用程序通过面向消息的中间件(MOM)创建和交换消息的标准途径。 就像在这...

蜡笔小小小新
2015/10/06
132
0
Hyperic HQ监控IBM WebSphere MQ

IBM公司的WebSphere MQ(MQSeries的前身)是一个信息服务器,使您可以轻松地在不同平台交流信息,整合新的和现有的商业应用。 Hyperic HQ对MQ的支持是作为其管理所有的WebSphere技术的全面解...

liuyifeng
2010/09/10
0
0
中间件技术入门教程

[TOC] 前言 本博客介绍Java中间件的一些知识,仅仅是一些知识储备。 中间件 中间件概念 中间件:中间件是一种介于操作系统和应用软件之间的一种软件,它使用系统软件所提供的基础服务(功能)...

Javahih
2017/04/24
0
0
一段同步接收和发送MQ消息的代码

JAVA代码: Java代码 package com.sdb.payment.core.mq; import org.apache.log4j.Logger; import com.ibm.mq.MQC; import com.ibm.mq.MQEnvironment; import com.ibm.mq.MQException; import......

引鸩怼孑
2015/10/13
473
0
skytools简单的介绍

skytools 是skype 团队利用Postgresql的强大的功能开发出的一个小工具集。 这个工具用于解决,多数据库之间的复制,异步传输等问题。 类似IBM的mq的产品。非常强壮,提供了对关键业务的高可靠...

宏哥
2011/11/05
405
0

没有更多内容

加载失败,请刷新页面

加载更多

一致性hash和虚拟节点

consistent hashing 算法的原理 consistent hashing 是一种 hash 算法,简单的说,在移除 / 添加一个 cache 时,它能够尽可能小的改变已存在key 映射关系,尽可能的满足单调性的要求。 下面就...

群星纪元
13分钟前
2
0
说一下Dubbo 的工作原理?注册中心挂了可以继续通信吗?

面试题 说一下的 dubbo 的工作原理?注册中心挂了可以继续通信吗?说说一次 rpc 请求的流程? 面试官心理分析 MQ、ES、Redis、Dubbo,上来先问你一些思考性的问题、原理,比如 kafka 高可用架...

李红欧巴
23分钟前
19
0
腾讯面试:一条SQL语句执行得很慢的原因有哪些?

说实话,这个问题可以涉及到 MySQL 的很多核心知识,可以扯出一大堆,就像要考你计算机网络的知识时,问你“输入URL回车之后,究竟发生了什么”一样,看看你能说出多少了。 之前腾讯面试的实...

java菜分享
41分钟前
11
0
Java 基本功 之 CAS

本文首发于个人公众号《andyqian》, 期待你的关注! 前言 在Java并发编程中,我们经常使用锁对竞争资源予以并发控制,以解决资源竞争的问题。但无论是使用 Lock 还是 Synchronized,随着锁机...

andyqian
45分钟前
4
0
信号量与条件变量的区别

注意信号量与条件变量的区别 信号量内容可见:http://www.cnblogs.com/charlesblc/p/6142868.html 信号量、共享内存,以及消息队列等System V IPC三剑客主要关注进程间通信; 而条件变量、互...

shzwork
56分钟前
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部