中国移动成功建成全国清算中心远程备份系统

国际调查机构Gartner Group的数据表明，在经历大型灾难而导致系统停运的公司中有2/5再也没有恢复运营，剩下的公司中也有1/3在两年内破产，对于一家大型电信运营商来说，关键系统的宕机将带来难以估量的损失，为此，中国移动公司成功实施了其全国清算中心远程容灾备份系统的建设，中国移动计费清算系统已经成为全球最可靠的电信清算系统之一。

地域相去2000多公里，TB一级的数据传输量，每天将产生上千万张的用户话单--中国移动日前采用在国内乃至国际还没有真正大规模实施过的基于应用级的远程系统容灾备份方案成功在北京和深圳两地间建立了互为补充的全国计费清算中心，并已于今年年初上线试运行，该系统的建立使中国移动的计费清算系统可实现系统永续运行的需求，极大的提升了在其国内外电信运营企业之间的信誉与地位，增强了用户的安全感，坚定了持有中国移动股票的股民们的信心。据悉，这也是国际上两地距离相距最远、传输数据量最大、采用技术最新的远程备份系统之一。

目前，中国移动通信公司的用户数目已经超过1亿户，并已经与全球120多个电信运营商之间有着业务关系，中国移动光国际结算费用一项一年便超过了100亿，国内31个省之间的结算金额就更高了，所以如果中国移动的计费清算系统出现问题，损失将是不可估量的。

早在1999年时，中国移动便完成了"中国移动计费清算系统"第三期工程，可以准确和地完成国内GSM、国内模拟及国际GSM漫游清算业务，并在国内首次实现了无误差清算，即零调帐。该系统的开通及时地支持了中国移动集团公司移动通信漫游业务的迅速发展，加快国际漫游结算标准化的进程，促进租机租卡等移动通信新业务的开展，并可根据漫游高额话费快速准确地检测出潜在的欺诈用户和欺诈行为。

中国移动计费清算系统三期项目虽然采取了多种高可靠性措施，但还是没有建立起一套完善的远程计费清算备份系统，仍然不能抵御如火灾、地震等区域性灾难或恐怖袭击等人为事故。一旦这些灾难发生，中国移动公司漫游话费计费和清算业务将陷入瘫痪，漫游话费无法收取。随这中国移动公司在香港成功上市以及国内移动通信产业的飞速发展，中国移动的用户已经突破1亿户成为全球最大的移动通信运营商，中国移动每天的国内、国际的用户漫游结算费用都高达数亿元，如若发生严重的灾难或破坏，重新恢复计费清算系统要花费2至3天的时间，估计在系统恢复期间公司的损失将超过10亿元，并且，公司还将无法检测和制止用户故意制造高额话单等恶意欺诈行为的发生，这将使某些人有机可乘而给公司造成更大的损失，更重要的是，国内外新闻机构也会大肆报道，影响中国移动在国际国内的形象与声誉，降低国际合作伙伴对中国移动的信任度，流失大量忠实用户，对于一家上市公司来说，这将是非常致命的。

为了确保中国移动漫游清算业务的安全可靠性和业务连续性，中国移动决定在中国移动北京计费清算中心的基础上，建立深圳计费清算中心。两个中心互为备份，构成容灾系统，以抵御区域性灾难，共同保证移动计费清算业务连续运行。

中国移动远程计费清算备份系统的最大特点是基于应用级的备份系统，基于应用级的远程备份系统是惠普咨询根据中国移动的业务特点而为其量身打造的方案，它不仅节约了中国移动在硬件设施上的大量投资，还使系统达到了快速恢复，在最多2小时内恢复系统运行的能力，并且极大地满足了中国移动新业务不断涌现，用户不断扩展的需要。惠普咨询认为，若采用传统的磁盘镜像、数据库复制、操作系统级同步等方案北京深圳2000多公里的距离上实现完全同步，即使使用光纤，延迟会比较大，等待同步的握手时间会比较长，这样每天传输TB级的数据在实现上是有一定困难的，另外，建设成本也过于庞大，惠普初步测算了一下，如果使用硬件同步的方式，按照TB级数据的量，它在北京和深圳要申请的线路带宽要超过100兆，这笔投资非常大，而这不仅仅是一次性投资，它要租用一个上百兆的线路的话，每个月还要交付数目不斐的线路租用费，所以使用成本是中国移动难以接受的。所以惠普认为一定要在用户的清算业务的应用上做文章，并提出了一套基于应用的融灾方案。所谓基于应用的融灾方案就是不使用硬件技术和中间件技术，只是通过修改它的计费清算软件来达到北京和深圳同时处理移动计费清算业务的目的。这样最主要的是会节省客户的运营成本，最主要的是客户不需要在北京和深圳之间租用几十兆甚至上百兆带宽的线路，另外这种同步的效率可靠性也能够达到用户的满意程度。

项目目标是在不影响三期系统业务功能的条件下，在北京中心和深圳中心之间，分别为国内漫游业务系统和国际漫游业务系统建立容灾备份机制，对发生灾难的业务系统进行容灾切换，而不影响另一业务系统。从而可以实现交叉容灾备份模式，例如：国际漫游（GSM）业务以北京中心为主系统、深圳中心为备系统；国内漫游（GSM）业务以深圳中心为主系统、北京中心为备系统的方式运行。以确保当主系统发生意外灾难或有计划的长时间停机的情况下，备份系统能够在短时间内接替、延续主系统的生产任务，并保证主系统以前的处理结果在备份系统中能够继续使用，同时与备份系统的后续处理保持数据一致。

目前全国漫游清算中心的话音业务漫游清算职能主要包括国内GSM漫游数据处理、国际GSM来访数据处理和国际GSM出访数据处理三种业务，每种业务均包含以下几种基本功能：上发文件校验、文件分拣汇总转发、结算、高额报告、统计分析、系统监控等。本项目需要对以上业务系统进行容灾化改造，使得上述系统具有容灾备份能力。

北京和深圳两地的主备中心采用完全相同的应用软件，这个方案的核心是要在应用程序当中嵌入数据同步的功能。在数据发送模块中，要求省中心和国际运营者同时向主中心和备份中心发送上发文件。在正常情况下，仅主生产系统将处理结果文件向各省或运营者下发，而备系统只生成结果文件但不下发。

在应用系统开发中将涉及对应用程序的容灾化改变，而且对以后的新业务功能的开发、维护、版本更新等，都必须遵照一定的容灾设计规范，确保在实现新的业务功能的同时保证主备系统数据处理的同步。

容灾系统是一个灾难备份系统，它是用于预防发生概率相当小而造成系统严重故障的事件，因此备份系统是附属系统，不应由于备份系统的存在而影响生产系统的正常运行。当然具有容灾能力的系统与不具有容灾能力的系统在复杂度上有相当大的差异。对于容灾系统的运作维护必须遵循一定的容灾规范，否则备份系统将无法跟从主系统或无法完成实时备份。因此容灾系统的基本特性：尽可能分离同步机制与主系统业务，从而降低备份系统对生产系统的影响（业务处理流程、程序设计，性能、故障等）；尽可能减少由于添加同步机制对业务应用程序的修改，增强容灾机制的独立性；为确保备份系统与主系统一致，主系统应当为每一次完整事务处理（例如一次数据库提交或关闭一个文件）都记录IDX。并且IDX记录失败将导致主系统执行该事务失败、回退，从而确保主系统记录下了备系统所需跟从的信息。；容灾同步机制软件应具有良好的灵活性和可扩展性，以适应三期业务系统的不断更新与扩展。；容灾系统应能够连续7*24小时不间断工作，系统的任一模块在更新、加载时，在不更新与上下模块的接口的前提下，不影响其它模块的运行。；系统应具良好的安全性和可靠性。对主备系统的登录操作权限进行严格管理，保证结算数据不被非法盗用、修改或伪造；对于系统的软硬件的单点故障进行自动检测、报警和切换；采用故障检查、告警和处理机制，保证数据不因意外情况丢失和损坏。；实时性：准实时完成大容量数据的处理；对实时性要求高的数据提供特殊的处理方法。；准确性：提供多种核查手段，保证两个中心计费清算结果的准确性。；易操作、易管理：应具有良好的用户操作界面、详细的帮助信息；系统参数的维护与管理通过操作界面实现。

在电信运营商越来越注重用户满意度的今日，中国移动远程计费清算备份中心的建立，加强了中国移动的市场竞争力，进一步提升了中国移动的行业地位，将有利于其国际间业务的开展，另外，GPRS、移动短消息、移动数据业务等新业务正不断增长，良好的业务支撑系统的建立，也为中国移动进一步的业务拓展打好了坚实的基础。