13 ● June ● 2018
朗新
95598客户服务中心作为国网公司总部直接面向客户、展示形象的重要窗口，凭借规模化的专业服务能力、卓越的运营管理能力，实现了稳健发展，品牌影响力逐步扩大。核心业务支持系统作为95598业务的重要支撑，服务全国27省市近11亿用电客户，其对国网公司生产经营活动有着极其重大影响。作为国网公司一类信息系统，对其进行灾备防护，势在必行，是一个浩大而又艰巨的工程。
终于，在熬过无数个深夜和黎明之后，我们迎来了曙光，2018年6月13日，95598核心业务支持系统协同27家省（市）公司营销系统，圆满完成了核心业务系统南北双中心双活运行模式的切换，标志着双活项目顺利达到预定目标。
恰逢迎峰度夏前，采用双中心运行方式，有效保障中心业务运行安全，提升运行能力，为中心95598服务提供了有力的信息化支撑。
实力彰显
这一天，翘首期盼、一等就是三年，今天我们要把这个好消息分享给大家！
这是国网总部业务部客服支持部项目交付团队、后端研发支撑团队通力合作取得的一次艰难胜利。同时，作为领域内首创的核心生产业务系统远距离数据级双活项目，也再次彰显了公司在咨询规划、集成研发、交付运营管理，乃至行业领域的强大竞争力。
卓绝历程
四年规划、三年建设、艰辛历程、一路风雨。
2015年初，为进一步巩固中心信息化发展成果，确保中心核心业务系统生产环境发生局部或大范围故障灾难时，持续为客服中心业务提供支撑，中心信息化发展特别提出灾备平台建设规划。
2015年底，灾备项目设计阶段，结合中心“十三五”信息化规划，灾备平台建设规划升级演变为灾备“双活”建设。在双活设计模式下，由主备两个中心同时承接用户业务，互为备份，在灾难发生时，将故障中心的业务全部转发到另一个中心处理，确保业务的稳定连续性。论证阶段，各路对手纷纷亮剑，公司选派技术骨干全力参与前期设计（关键技术、POC论证测试），把握机遇并最终与承建主体合作，获得独立开发许可。
2016年招标启动，各方驻场集中办公，按照双活最终评审确定的技术和实施方案有序推进。年底，根据建设关键信息基础设施“同步规划、同步建设、同步使用”的三同步原则，双活项目如火如荼，有条不紊地完成双活项目需求、概要、详设编制和评审，并逐步开展典型功能场景的开发测试。
2017年5月，项目施工进入设备上架、环境前期准备关键阶段，因第三方厂商一个极小SAN交换机级联实施错误操作，造成核心存储磁盘不可识盘，影响一类信息系统业务中断持续时间 1 小时以上，直接导致国网客服中心接二连三的安全事故调查。双活项目全面停顿、505事件整改。同时《网络安全法》自6月1日起正式施行。中心要求项目团队按“四不放过”的要求组织开展原因分析，认真汲取505事件经验教训，进一步优化调整项目组织架构，并从制度建设、人员管理、安全管理、检修流程、考核评价方面完善工作保障机制。《95598核心业务系统双活项目管理细则》出台，一道道红线在眼前，前路无望两茫茫。
2017年7月，“屋漏偏逢连夜雨，船迟又遇打头风”，此时现场面临人员变动，资源紧张等多种问题，在此情况下，国网总部业务部及时从各方调配资源，现场及时抽派核心成员加入双活团队，完成双活团队重新组建。从头出发，重新梳理下一步关键任务节点进行分析规划，重点完成SAN交换机配置、亦庄存储扩容、公共库迁移、ADG库拆除、贯通性测试和切换测试、数据初始化和割接上线、切换演练的各项任务，举一反三，逐项规范。
2018年1月，为解决系统单边运行隐患，确保为客户提供优质的供电服务，执照“安全第一”的原则，分三批次与省（市）单位开展基于LTM的切换测试，自4月18始，顺利完成上海侧独立运行、业务回切北京生产环境、双中心运行改造、双中心运行演练等工作。
双活项目自团队重新组建后即进入最后攻坚冲刺阶段，他们放弃周末、早出晚归、默默无闻、甘于奉献。他们以高度的使命感和责任感，爱岗敬业、拼搏向上的奋斗精神，精准表达和直接影了一批人。用客服中心主任的话讲“双活项目建设，直接为中心培养和锻炼了一批人，这是项目本身对国网公司客服中心的最大奉献，非常辛苦、非常不容易”。
下一步，双活建设不仅仅满足于项目的现有成绩，要进一步对系统架构梳理，通过复盘对前序问题做好总结，将技术空白和典型问题总结为案例库，开展专题化的培训、技术交流，做好全面的风险分析评估和调优。
四年磨一剑，今朝出鞘试锋芒，多少人心血凝聚于此，在此，致敬所有负出过心血的人，青春我们不枉费。惊涛骇浪后烟消云散，全力付出就是精彩，感慨万千，执笔为念。
致敬
客服总部开发部
张丽娜、孙骏杰、林秀影、檀东宁、尧文强、刘唯、吴志伟、姚忠杰、陈斌彬、黄艺森
国网总部客服支持部
邹代雄、刘康、柳冬燕、赵宏伟、史翠娟、靳树聪、于洋、韩志忠、黄旭东
起飞
