10多年的信息工作，随时记录心得和资料，希望能结识更多的朋友
分类： 架构设计与优化
2014-03-24 10:26:29
"一切都在流动，没有什么是持久的。一切都在融化，没有什么是固定不变的" - 赫拉克利特(Heracleitus)
大约在2003年中的时候，SOA的概念逐渐进入人们的视野，一时间众人乐此不疲的发表各自对SOA的见解。SOA已经成为IT业，尤其是软件开发及系统集成领域从业者的热门话题。很多的权威机构也纷纷预测SOA的美妙前景，例如，Gartner 预言，到了 2008 年，至少 60% 的企业将使用 SOA 作为其IT架构。抛开喧嚣躁动以及随声附和，对于软件开发者而言，经过了一年多的概念灌输，伴随着不断增长的困惑，更多的人希望能静下心来看一看：究竟怎样的系统架构是符合SOA设计的，而又有哪些技术可以用来实现SOA呢？特别是企业服务总线(Enterprise Service Bus, ESB)， 看起来更是SOA中一个玄虚的概念，本系列文章将通过实际的案例分析来详细讲解在SOA系统中是怎样实施ESB的。
本系列文章将直接面向广大的软件开发人员， 首先以直观的方式介绍什么是ESB， 然后引入一个实际案例，以此为基础，详细介绍怎样一步一步实现ESB。现在我们谈论SOA和ESB的时候都不再是空中楼阁，IBM作为SOA的倡导者，已经提供了很好的产品来实现我们的设想。我们会在本系列中的第二、第三部分中分别介绍基于WebSphere 6 和IBM EAI产品的两种实现方式， 然后在第四部分中介绍在复杂的企业应用场景中总线(Bus)怎样互联， 怎样扩展。希望通过本系列文章，能让广大读者朋友快速掌握ESB的实际开发技巧。
关于SOA的概念，你可以找到很多的文章从不同的角度来描述它，不同的软件提供商也有不同的定义方式。BEA有流体计算，微软有Indigo 和SOA-building， SAP有ESA。 每个人都可以从不同的视角来理解SOA，从程序员的角度，SOA是一种全新的开发技术，新的组件模型，比如说Web Service；从架构设计师的角度，SOA就是一种新的设计模式，方法学；从业务分析人员的角度，SOA就是基于标准的业务应用服务。从概念的角度，IBM对SOA的定义是最为全面的，既SOA是一种构造分布式系统的方法，它将业务应用功能以服务的形式提供给最终用户应用或其他服务。SOA包括如下要素:
本文针对的读者是软件开发人员，站在开发人员的角度，往往希望软件开发能够满足对于开发效率、可靠性、易维护性、易管理等多方面的更高要求。让我们通过回顾软件开发的演化过程来看一看SOA出现的必然性：
我们注意到，SOA同样也强调重用(Reuse)， 但是相对于传统的代码重用，对象重用，和部件重用，SOA的重用粒度更粗。SOA的重用在于业务级的应用，即服务的重用，这与软件的发展规律是相一致的。在软件发展的过程中，软件重用的对象越来越接近我们的现实生活。通过部件的重用，软件的开发更具效率，并且开始试图用组件表达业务模式。但是，IT人员仍很难对业务人员解释清楚IT结构怎样映射到业务模型上。然而，IT架构与业务模型的弥合是不可避免的方向。现代企业的业务环境所面临的最大挑战就是变化，规则在变，需求在变，而对变化做出最快的反应，尽快地适应变化，成为企业占得先机，成功运作的关键。很多企业的业务环境依赖于他们的IT架构，因此，IT部门往往直接承载了业务变化带来的压力。每一个具体的业务变化，都直接反应到对现有的IT平台的要求：要么企业IT架构本身对变化自适应，要么IT架构能够在短时间内根据新的业务规则做出调整。这就是SOA架构提出的根本原因，我们需要一种更加贴近业务的IT架构，能够直接描绘业务，对那些不懂IT技术的业务领域专家来说，业务服务却是他们最熟悉的，也就是说是SOA把软件重用的对象从IT人员上升到了业务人员。因此，我们可以说SOA与其它的模式相比，最大的进步在于它与业务的关联性，"服务"对应到实际业务。IT通过"服务"与业务发生了密切的关系，业务人员和IT人员都可以专注于业务逻辑的实现，而共同的语言就是"服务"。
但不是什么场合都适用SOA。通常来讲，SOA适用于较为复杂的IT架构，经常需要与外部复杂的IT环境交互，并且需要快速地应对频繁发生的业务变化。就像你不可能在控制洗衣机的芯片上使用EJB开发一样，如果你的IT环境规模很小，足以灵活地应对变化，不需要与其他的异构IT环境频繁交互，那么SOA带来的好处就不足以抵消它给你带来的系统复杂性。但是，即令如此，你也并没有被完全排除在SOA的大趋势之外。SOA是如此地倍受瞩目，我们可以预见到它的迅猛发展，因此即使你的内部IT架构本身并不是基于SOA的，你也还有机会参与到未来的SOA架构中去。例如，将你的某个业务以服务的形式发布到某个外部SOA平台上供别人使用，作为第三方SOA平台的一个服务提供者(Service Provider)存在。
在选择SOA的实施方案时，要记住，软件的具体实现技术诸如Web 服务与SOA是两回事，SOA是一个概念，方法学， 或者用一个更时髦的词：一种模型。而Web 服务呢？它是一种具体的实现技术，就像EJB一样。SOA ≠ Web服务。不过公平地讲，Web 服务倒确实是目前最适合实现SOA的技术之一，用Web 服务来封装业务服务是个不错的选择。因为Web服务是标准的，WS-I协议保证了来自不同厂商的Web服务即使运行在不同的平台上，底层的实现机理不同也可以顺利交互，这是以前的任何一种技术如CORBA，EJB，或DCOM都不能做到的。而且，Web服务的定义与实现是分开描述的，即松散耦合，因此，可以很方便地替换服务的内在实现而不会对现有的系统造成任何冲击，这也极大地促进了IT架构的灵活性。
对于SOA更进一步的了解，可以参考IBM developerWorks上其他SOA相关的文章(请参见参考资料)，我们的系列文章将主要讨论ESB，因此不再此过多地论述SOA了。为了使我们下面的论述更顺畅，请先牢记典型的SOA架构有哪些基本的要求：
让我们暂时回到网络技术不普及的时代，你怎样在两台机器之间传递文件？我还记得为了给实验室的每台机器安装Borland C++的环境，猜猜我动用了什么：一根"串口线"。不过，我仍然觉得庆幸，好在每台机器都运行同样的操作系统- DOS(很少有人还记得DOS中有Interlnk这样一个命令吧)， 用来通过串口线在两台机器间传递流文件。否则我将不得不用软盘来拷贝所有的安装文件。我那个时候的梦想就是，哪一天有这么一个叫做"网络"的东西能够把实验室里面所有机器都连接起来，而不用我在各机器之间跑来跑去。
让我们回归主题，你现在已经基本明白了什么是SOA。假定你已经按照SOA的思想提炼出了各种业务服务，公布出来，同样，你发现其他很多人也做了同样的事情。大家都很振奋，开始踊跃的尝试，我调用你的一个服务，你调我的一个服务。啊哈！大家都SOA了。且慢，那么这个SOA给你们带来了什么好处呢？Ok，现在我可以在J2EE环境里调用.Net的组件了，但是原来没有SOA的时候也可以做到的呀。只要两个节点之间互相认可对方的方式，即使不存在公开/统一的服务界面也可以实现点到点的互联。因此我们不得不承认，如果我们只有服务，而服务的请求者和服务的提供者之间仍然需要这种显式的点到点的调用，那么这就不是一个典型的SOA架构。请看图二，服务的参与双方都必须建立1对1 的联系。这样一个结构与我十几年前的那种互联的方式何其相似！但是，还记得我们上面提到的SOA三个基本要素吗？显然第三点没有做到。
因此，在SOA中，我们还需要这样一个中间层，能够帮助实现在SOA架构中不同服务之间的智能化管理。最容易想到的是这样一个HUB-Spoke结构，在SOA架构中的各服务之间设置一个类似于Hub的中间件，由它充当整个SOA架构的中央管理器的作用。请看图三，现在服务的请求者和提供者之间有了一个智能的中转站， 服务的请求者不再需要了解服务提供者的细节。不错！看上去是一个好的SOA结构。事实上，传统的EAI就是通过这样一种方式来试图解决企业内部的应用整合问题。
EAI的目标是支持对现有IT系统的重新利用，通过EAI技术能够将不同的软件和系统串联起来，延长这些应用系统的生命周期。传统的EAI，往往使用如CORBA和COM等的消息中间件进行分布式，跨平台的程序交互，修改企业资源规划以达到新的目标，使用中间件、XML等方法来进行数据分配。因此，实际上传统的EAI是部件级的重用。很不幸的是，基于部件的架构没有统一的标准，因此，各个厂商都有各自不同的EAI解决方案，你会看到各种各样的中间件平台。如果EAI碰到了异构的IT环境，就必须分别考虑怎样在各个不同的中间件之间周旋，来实现合理的互联方式，你不得不考虑各种复杂的可能性。因此，你所见过的大多数传统EAI解决方案都比较笨重。
再回顾一下我们上面介绍过的SOA的应用场景：复杂的企业级架构。如果我们选择Hub的模式来构建SOA基础架构，从纯粹逻辑的角度，可能会出现哪些问题呢？首先，整个SOA架构的性能，如果每个服务的请求都经过中央Hub的中转，那么Hub的负担会很重，速度会随着参与者的增多而愈来愈慢；其次，这样的系统会很脆弱，一旦Hub出错，整个SOA架构都会瘫痪；最后，这样的架构会破坏SOA的开放性原则，参与者运行在一个相对封闭的环境中，扩展起来十分麻烦。因此，这也不是理想的SOA架构。
好了，现在该ESB登场了，请看我们的正解：
它与前面的Hub结构有什么不同呢？首先，它比单一Hub的形式更开放，总线结构有无限扩展的可能；其次，真正体现了SOA的理念， 一切皆为服务，服务在总线(BUS)中处于平等的地位。即使我们需要一些Hub，那么它们也是以某种服务的形式部署在总线上，相比上面的结构要灵活的多。这就是ESB，我们需要给它一个明确的定义：ESB是一种在松散耦合的服务和应用之间标准的集成方式。它可以作用于：
很不幸，上面的定义看上去很拗口，我们暂且用一句较通俗的话来描述它：ESB就是在SOA架构中实现服务间智能化集成与管理的中介。而它与SOA的关系要相对好理解一些：ESB是逻辑上与SOA 所遵循的基本原则保持一致的服务集成基础架构，它提供了服务管理的方法和在分布式异构环境中进行服务交互的功能。可以这样说，ESB是特定环境下(SOA架构中)实施EAI的方式：首先，在ESB系统中，被集成的对象被明确定义为服务，而不是传统EAI中各种各样的中间件平台，这样就极大简化了在集成异构性上的考虑，因为不管有怎样的应用底层实现，只要是SOA架构中的服务，它就一定是基于标准的。
其次，ESB明确强调消息(Message)处理在集成过程中的作用，这里的消息指的是应用环境中被集成对象之间的沟通。以往传统的EAI实施中碰到的最大的问题就是被集成者都有自己的方言，即各自的消息格式。作为基础架构的EAI系统，必须能够对系统范畴内的任何一种消息进行解析。传统的EAI系统中的消息处理大多是被动的，消息的处理需要各自中间件的私有方式支持，例如API的方式。因此尽管消息处理本身很重要，但消息的直接处理不会是传统EAI系统的核心。ESB系统由于集成对象统一到服务，消息在应用服务之间传递时格式是标准的，直接面向消息的处理方式成为可能。如果ESB能够在底层支持现有的各种通讯协议，那么对消息的处理就完全不考虑底层的传输细节，而直接通过消息的标准格式定义来进行。这样，在ESB中，对消息的处理就会成为ESB的核心，因为通过消息处理来集成服务是最简单可行的方式。这也是ESB中总线(Bus)功能的体现。其实，总线的概念并不新鲜，传统的EAI系统中，也曾经提出过信息总线的概念，通过某种中间件平台，如CORBA来连接企业信息孤岛，但是，ESB的概念不仅仅是提供消息交互的通道，更重要的是提供服务的智能化集成基础架构。
最后，事件驱动成为ESB的重要特征。通常服务之间传递的消息有两种形式，一种是调用(Call)， 即请求/回应方式，这是常见的同步模式。还有一种我们称之为单路消息(One-way)，它的目的往往是触发异步的事件， 发送者不需要马上得到回复。考虑到有些应用服务是长时间运行的，因此，这种异步服务之间的消息交互也是ESB必须支持的。除此之外，ESB的很多功能都可以利用这种机制来实现，例如，SOA中服务的性能监控等基础架构功能，需要通过ESB来提供数据，当服务的请求通过ESB中转的时候，ESB很容易通过事件驱动机制向SOA的基础架构服务传递信息。
首先，我们来看一看ESB有哪些基本的功能。既然ESB会以中介的身份出现，它就必须有两方面的考虑，首先它必须了解被它中介的两个端点：1)服务的请求者以及请求者对服务的要求，2)服务的提供者和它所提供服务的描述；其次，它必须具有某种机制能够完成中介的任务。我们把这两类考虑归纳为ESB的两个基本功能：面向服务的原数据(MetaData)管理功能 和中介(Mediation)功能。 作为SOA的重要构成部分，ESB承担的重任还包括怎样将企业架构中已存在的业务服务连接到总线上来，我们称之为适配器(Adapter)功能。尽管服务本身已经用公开的接口来描述，但具体的实现还是运行在不同的环境中，因此，ESB还应该提供对服务底层协议的支持，譬如应用协议J2ee，.Net， 通讯协议如Http，JMS等等。除此之外，还需要对具体应用中涉及到的服务加以管理，如性能，可靠性，安全性等等。
ESB 提供了最基本的功能来保障SOA系统的运行，这些功能应该包含下列内容：
很多时候，很难界定哪些功能是应该由SOA的基础架构(infrastructure)提供的，而哪些应该放在ESB的范畴内来解决。笔者认为，放大或突出ESB在SOA架构中的地位并不很恰当。比较合理的解释是：ESB应该构筑在完善的SOA架构上，做它应该做的事-服务集成。至于怎样集成，应该根据你的上下文环境，考虑有哪些SOA的基础设施可供你使用，然后再基于SOA的基础架构来实现你的ESB设计。
在更高的层次，ESB还提供诸如服务代理，协议转换等等功能，我们称之为ESB的应用模式(ESB usage pattern)。作为SOA架构的服务集成功能提供者，我们可以总结出的一些比较常用的应用模式，例如：
1）协议转换模型，用于当服务的请求者与服务提供者基于不同协议时的消息转换情形
2）消息广播模式，用于事件驱动多个动作或者消息广播的情形
3）服务匹配模式，用于需要动态选择服务提供者的情形，例如可以根据消息的内容，或负载情况，或服务级别约定(SLA)，来为服务请求者选择合适的服务。
这里我们只列举了3个典型的模式，而这样的例子实在太多了，发挥你的创造性，你还会想出来更多的，这也是ESB的魅力所在。但是，在ESB的设计上，注意不能喧宾夺主，ESB的功能在于帮助服务的集成，而不是参与业务逻辑。业务逻辑应该封装在业务服务中，或通过业务编排服务(Process Service)来组织。
关于ESB，目前还没有被一致接受的标准。我们可以通过选择成熟的EAI 中间件来实现服务的集成与互操作性。这样做的好处是你的开发过程会很顺畅，因为它已经足够稳定且有丰富的工具支持。通常这样的EAI产品在目前阶段都还不是基于开放的标准，例如IBM的WebSphere MQ5.3，作为IBM EAI实现ESB的消息平台，就不是开放的标准。如果一定要选择开放标准的ESB实现方式，Web 服务加上WS-* 协议几乎是我们唯一的选择，但毕竟SOA、ESB仍处于起步的阶段，一方面我们还没有很成熟的产品支持所有的WS-*协议，另一方面这些WS-* 协议本身还处在频繁变化的阶段。因此当你选择ESB实施方案的时候，最好考虑平衡ESB实施、开发的工作量。
这里你可能会有疑问，既然SOA架构追求开放性，为什么我们要容忍用私有的ESB产品如IBM WBI/MQ来构建SOA架构的集成环境？这是一个好问题。SOA始终是我们追求的大目标，开放是必然的趋势，这是毋庸置疑的。但是，请注意ESB的定义，至少到目前为止，还没有明确的要求它的实现一定是开放的，每一个软件供应商对它都可能有不同的理解和实现的策略。我们不用怀疑ESB将来的开放之路，但至少在目前阶段，我们不能坐下来等待它的到来。 其实，ESB充当的是SOA中的中介角色，因此，即使将来ESB变化了，对服务的请求者和服务的提供者都不会造成很大的冲击，因为它本来就是对用户透明的。举个例子，J2EE，它的标准一直在变化中，但是大家通常都能接受它的变化，社会总是要进步的，IT也一样。你不可能因为J2EE 两年以后要出1.6就不再使用现在的1.4了。
IBM目前可以用于ESB实施的产品也可以分为两大阵营：
现有的EAI解决方案，可能涉及如下的IBM软件产品：
WAS6 中提供了崭新的消息服务平台WPM(WebSphere platform messaging)，并基于这一平台提供了ESB的一个具体实现- SIBus(Service Integration Bus) 它可以支持同步和异步的消息通信。总线(Bus)通过互联的消息引擎管理消息源。同时支持基于Web服务和JMS，MQ格式的消息交互。你可以从WAS6身上看到IBM战略的变化，SIBus只是IBM加大对于SOA支持的一步，你还会很快看到更多的变化，例如独立的ESB产品，ESB的开发工具等等。但是，你完全不必担心，这些变化都会保持兼容性，现在SOA的投入，无论是以哪一种方式，都会在IBM的SOA整体考虑之中。
上述的两种方案并不是对立的，你可以选择基于成熟产品实现ESB，也可以尝试一下IBM的最新技术。这两种方案甚至可以互联，见图八。我们将在系列的第四部分讲解这一较为复杂的场景。
在本系列文章接下来的三部分中，我们将继续详细描述ESB的具体实现步骤。
本文向您介绍了SOA以及ESB 的基本知识，确定了一些 ESB 实现中最常见的基本功能，论述了ESB产生的必要性，以及ESB在SOA中的地位。
http://www.ibm.com/developerworks/cn/webservices/ws-esb1/
