山东农行: 决断数据容灾

“不要把所有的鸡蛋都放在同一个篮子里”。这个道理看似简单，但是山东省农行率先做出建立省级数据容灾中心的决定却并不容易。尽管农行全国数据中心很快就要建立，山东农行仍然决定建立自己的省级数据中心的容灾备份中心，总共投资3000多万元，占了山东农行一年的IT建设投资的1/3。

“如果把所有鸡蛋都放在一个篮子中，万一篮子摔在地上了，会发生怎样的后果？同样，当数据中心遭遇突发的、意想不到的灾难时，包括火灾、机房内由于某种原因导致漏水而损坏设备等，这时，客户数据的安全问题如何保证？”出于上述考虑，山东农行成为农行系统中第一个“吃螃蟹”者，于2002年11月建成了农行系统中第一家省级数据中心的同城数据容灾备份中心。

保障业务连续性还是数据连续性？

中国农业银行山东省分行科技处总工程师宋传杰介绍说，按照容灾的内容可以将容灾划分为三个级别：一是业务连续性容灾，即无论发生什么情况，都不会影响银行业务的运行和运营，客户感觉不到后台系统出现了什么问题；二是数据连续性容灾，指通过采取一定的措施，保证数据在发生突发灾难时，数据具有连续性；三是操作连续性容灾，是指既做不到业务连续性，也做不到数据连续性时，可以通过采取一些措施使IT操作具有一定的连续性。山东省农行采取的就是数据连续性容灾。

山东农行的数据容灾备份中心可谓是一个速战速决的产物，系统的具体实施仅用了一个月左右的时间，而山东农行从想上这个项目到最后建成，也只花了7个月时间，项目总投资为3000多万元。2002年4月，山东农行开始做一些建立容灾备份中心的准备工作，5月份与惠普公司签订合同，10月份工程设备陆续到位开始系统建设，11月份即建成投入使用。

然而，快速实施的背后却是山东农行的深入思考，宋传杰告诉记者，山东农行早在2001年建立省级数据中心后就开始考虑建设数据容灾备份中心的问题，在建设生产数据中心时就为容灾系统预设了接口，之所以选择数据容灾也是基于对自身业务需要和银行IT架构发展趋势的分析?

“容灾的目的就是为了保证业务的连续性，但从实现的手段上可以有不同形式。如果要真正保证业务连续性的话，不仅需要数据容灾，而且网络、运行以及所有IT架构都要有容灾，即在一个地方有一个生产处理系统，则需要在另一个地方建立一个完全等同的备份处理系统，而且这两套系统要进行实时的同步处理。这样，当一个中心发生灾难，另一个中心能够在非常短的时间内接管生产运行系统，使各网点几乎感觉不出这个转换的过程。”

“而未来全国农行将建立单一的数据中心，并且将在2005年以前投入运行。届时，山东省农行数据中心的绝大部分数据都要迁移到全国数据中心。考虑到这一发展趋势以及IT架构的变化趋势，山东农行没有投巨资来建立业务连续容灾系统，而是进行数据容灾。”宋传杰如是说。

兼顾近期需求与远期发展

近年来，山东农行业务增长率一直处于上升态势，在山东省银行业中的业务增长率连续两年排名第一。截止到2003年6月底的6个月中，业务增长率仍是排名第一。目前，山东省农行数据中心管理着几千万客户的信息。过去没有计算机时，银行使用账本来记录客户信息，包括所有的账号信息、支取信息、客户资料等。这些客户信息反映到计算机系统中，就是银行的客户账目信息（CIF）和账户信息（CAF）。

而一旦数据中心遭遇突发的、意想不到的灾难时，比如火灾、地震、机房内由于某种原因导致漏水而损坏设备、大规模停电等情况，客户数据的安全问题如何保证？如何保障这几千万个CIF和几千万个CAF的安全，不仅关系到客户财产安全，也关系到银行的声誉和业务能力。因此，银行需要对客户信息提供一个万无一失的备份方案。

事实上，银行的数据备份有多种方式，包括采用磁带进行异步备份、用一个相对较小的服务器对生产系统进行备份，这些手段在银行中都已得到普遍采用。但问题在于这些备份手段都有一个时间差，因此，如果希望拥有一个每时每刻都能够同步记录客户信息的备份系统，就要建立一个确保数据连续性的容灾备份系统。

在宋传杰看来，建立数据容灾备份系统的意义不外乎两个方面，一方面是为了保证山东农行能够以更有效的手段来保证业务的正常运行——无论发生什么灾难和非灾难性的突发事件; 另一方面则是对客户负责，“银行离开了客户，也就失去其存在的意义了，我们必须对客户负责，这是一家银行的社会负责问题。”正是基于这两点认识，尽管农行全国数据中心很快就要建立，山东农行仍然决定建立自己的省级数据中心的容灾备份中心，总共投资3000多万元，占了山东农行一年的IT建设投资的1/3。

宋传杰给记者算了一笔账，根据现在每年固定资产折旧率来计算，电子设备的使用期通常是3～5年。如果从系统的具体应用来看，电子设备如果能用4年还可以满足应用需求、不影响业务运营的话，这个电子设备在投资运行4年后，就完全达到了投入产出的经济学指标要求。另一方面，全国农行数据中心建成时，只是移走核心数据（比如CIF、CAF），银行其他业务数据如信贷、中间业务信息等还需要存储在省级数据中心。目前，山东农行中间业务正在快速发展，它在整个营业额中的比例估计能够从现在的30%提高到2005年的50%～60%，中间业务的账户和账目信息需要移到全国数据中心，但与合作伙伴合作的其他相关业务信息还需要存储在省级数据中心中。照此推断，山东农行的数据中心在2005年时已基本上可体现其价值，而且还可以在中间业务等环节中继续发挥作用。

没摔过的篮子最好


虽然已经成功地将鸡蛋放在两个篮子里面，但宋传杰似乎并不希望那个备份的篮子有一天真的派上用场。目前，山东农行的容灾备份系统处于平稳运行阶段，用宋传杰的话来说，“没有体会就是最好的体会。当对容灾备份系统没有体会时，说明生产系统处于正常状态。如果有体会的话，问题就大了，那就是系统不正常的时候。”

谈到山东农行建立容灾备份系统的经验时，宋传杰对两点感受颇深，第一是一定要好好计划；第二是找一个值得信任、能够解决问题的技术供应商，真正形成技术合作伙伴关系。

宋传杰介绍说，山东农行在建数据中心时，就考虑到未来要建立一个容灾备份中心，已经在生产数据中心中为容灾系统预设了接口，所以在建设备份中心时没有对生产数据中心做任何改动。作为山东农行的总工程师，他提醒同行们如果数据中心中没有留有备份中心的途径，那么在做备份中心时就要非常小心。因为在具体实施过程中，备份中心需要整合到生产中心中去，而这一整合过程一点问题也不允许出现，否则就违背了建立备份中心的初衷。

“从这点来讲，找一个有经验的厂商是非常重要的，如果一个厂商曾经在我们这里做过工程，积累了我们系统建设的经验，这些经验在下一次系统建设时将会发挥作用。”事实上,山东农行整个生产系统中心——从主机、存储、各种规模的服务器、带库都选择了惠普方案,他们认为从单一厂商购买所有需要的设备不仅整体价格更优惠，而且集成的复杂度更低。“惠普过去在为山东农行建设各种系统的过程中，积累了丰富的经验，这些经验对未来进一步建立山东农行的各种系统都大有好处。惠普虽然不是全线产品解决方案供应商，但是在全线产品的技术支持能力方面，要比我们单纯选择一个设备供应商要来得更为方便、更为有利。”