上海移动互通网关容灾备份机制及其实现专项工作汇报

互通网关容灾备份机制及实现专项工作汇报中国移动上海公司2009年10月目录实施背景1容灾备份机制2一键式手工切换4应用情况312实施背景——三大运营商间互通网关联接示意图防火墙上海联通上海电信上海移动实施背景——互通网关现状•上海移动现有互通网关2套：•到电信的互通网关，处理能力为硬件3000条/秒，软件2000条/秒；•到联通的互通网关，处理能力为2500条/秒。•上海移动两套网关采用统一组网方式和相同的应用系统版本：•到联通的互通网关，硬件配置为HP7640（4*1.4双核CPU，16G内存）双机；•到电信的互通网关，硬件配置为HP7640（8*1.6G双核CPU，16G内存）双机。34实施背景如何快速恢复业务，将用户影响降至最低？引起批量用户投诉,造成不良用户影响，影响上海移动企业形象。严重影响异网运营商之间互通短信业务。互通网关容灾备份虽然互通网关在设备层及网络层均使用双机方式,然而一旦双机无法正常切换或磁阵故障,且无法迅速恢复时,将对业务造成重大影响。目录互通网关现状1容灾备份机制2一键式手工切换4应用情况356容灾备份可行性•处理能力：2500条/秒；•业务处理机：HP7640双机，Unix操作系统；•软件版本：ZXF118-ICMGWV3.51.03.06_U02；•日常忙时业务量：168条/秒。联通互通网关•处理能力：硬件3000条/秒，软件2000条/秒；•业务处理机：HP7640双机，Unix操作系统；•软件版本：ZXF118-ICMGWV3.51.03.06_U02；•日常忙时业务量:371条/秒。电信互通网关相同的双机架构相同的硬件配置相同的软件版本单套网关处理能力足以承载两套网关忙时业务量上海移动的两套互通网关之间互为容灾备份是可行的7容灾备份机制到电信的互通网关到联通的互通网关防火墙短信中心1短信中心2电信方互通网关联通方互通网关联通号段电信号段电信号段联通号段上海移动互通网关现网容灾备份机制在正常情况下，两套互通网关分别连接电信方互通网关和联通方互通网关，同时两套网关各建立一个备用帐号指向另一个对端互通网关。当某套网关发生故障时，只要在另一套网关上启用备用帐号，通过该帐号绑定对端互通网关，同时短信中心将指向原故障网关的号段指向另一套网关，即实现互通短信业务的快速切换，达到容灾备份的目的。8本端修改防火墙配置，允许对端访问本端另一套互通网关；同时，对方运营商要配合修改访问地址。每套网关配有一个到短信中心的账号，切换时需修改短信中心指向。计费中心需要修改计费话单采集点。容灾备份机制——注意事项目录互通网关现状1容灾备份机制2一键式手工切换4应用情况3910应用情况——现网容灾备份演练移动方单边故障•即故障点在本端移动互通网关，由移动方进行网关倒换应急处理。联通方单边故障•即故障点在对端联通互通网关，由联通方进行网关倒换应急处理。双边故障•即双方同时发生故障或故障点无法确认，由移动、联通双方同时进行网关倒换应急处理。2009年3月,上海移动和上海联通针对互通网关容灾备份机制进行研讨，在双方互通网关架构相同的前提下，最终确定三种情况下的应急演练方案，并于6月3日与联通运营商成功实施了三种情况下的互通网关容灾备份演练。应用情况——现网容灾备份演练11移动方单边故障到电信的互通网关到联通的互通网关防火墙短信中心1短信中心2电信方互通网关联通方移动互通网关联通号段电信号段电信号段联通号段Step1:启用互通电信网关到联通方互通网关的备用帐号，通过该帐号绑定联通互通网关；Step2:修改防火墙上配置，允许对端互通网关访问本端的互通电信网关；同时，联通方将访问地址修改为本端电信互通网关地址。Step3:在短信中心上调整联通号段的路由指向，把指向“到联通互通网关“的联通号段路由全部指向“到电信互通网关”。12应用情况——现网容灾备份演练移动方单边故障——计费中心修改计费点原计费点：联通网关老帐号目录新计费点：电信网关新帐号目录现网容灾备份演练13联通方单边故障到电信的互通网关到联通的互通网关防火墙短信中心1短信中心2电信方互通网关联通方移动互通网关联通号段电信号段电信号段联通号段联通方电信互通网关Step1:对端（即联通方）完成联通网关到电信网关的切换，修改防火墙相关配置；Step2:本端只需要将访问地址修改为联通方的电信互通网关地址，如绿色线条所示。我方计费点不变现网容灾备份演练14双边故障到电信的互通网关到联通的互通网关防火墙短信中心1短信中心2电信方互通网关联通方移动互通网关联通号段电信号段电信号段联通号段联通方电信互通网关双方同时完成网关的切换，并修改本端访问对端网关的地址。原计费点：联通网关老帐号目录新计费点：电信网关新帐号目录应用情况——后续改进15启动此容灾备份方案可在10分钟之内恢复业务，但由于计费需要修改程序，更改采集点，时间较长，且存在不可控因素，考虑对互通网关计费点改造。完成互通网关计费点改造，即新建一套计费服务器，两套网关的话单文件均传送至该机费服务器，供计费取话单文件。网关发生切换时，对计费而言则无需修改计费点。目录互通网关现状1容灾备份机制2一键式手工切换4应用情况31617假设移动方电信互通网关设备异常，启用联通互通网关访问电信方互通网关CT的账号，需完成：1）修改防火墙配置，允许对端（电信方）访问本端联通互通网关；同时，电信方将访问地址修改为本端联通互通网关地址。2）每套网关配有一个到短信中心的账号，切换时需修改短信中心指向。现状目标采用一键式切换，当本端互通网关发生故障，进行切换时：1）无需对端运营商配合做修改；2）无需调整短信中心指向。一键式手工切换一键式手工切换18到联通的互通网关IP2a到电信的互通网关IP2b防火墙短信中心1短信中心nLT联通互通网关ACT电信互通网关B上海移动上海电信上海联通IP1aIP1bIP3aIP3b若移动方互通电信网关设备异常，通过一键切换，启用移动方互通联通网关访问电信方互通网关CT的账号，移动方互通联通网关与CT连接采用浮动IP即IP3a，同时在防火墙上修改IP1b映射为IP3a，而对端电信互通网关看到的还是IP1b，即不需对端配合修改IP连接。一键式手工切换19到联通的互通网关IP2a到电信的互通网关IP2b防火墙短信中心1短信中心nLT联通互通网关ACT电信互通网关B上海移动上海电信上海联通IP1aIP1bIP3aIP3b移动互通联通网关采用互通电信网关帐号绑定所有短信中心，该帐号路由生效，即不需短信中心配合修改路由指向，实现MO业务的接管。20方案优点：一键式手工执行切换，减少手工操作步骤；出现故障时无需对端进行配合。存在问题：由原业务处理机发送的短消息，其状态报告不能返回到原来出故障的业务处理机上。一键式手工切换21跨越新的高峰……