引言

在過去的一年里，國(guó)家電網(wǎng)在全國(guó)全力落實(shí)“三型兩網(wǎng)”的戰(zhàn)略，致力于打造樞紐型、平臺(tái)型和共享型企業(yè)。在推進(jìn)能源轉(zhuǎn)型和信息技術(shù)深度融合，科技創(chuàng)新與產(chǎn)業(yè)升級(jí)相互促進(jìn)的大趨勢(shì)下，國(guó)網(wǎng)新疆電力在數(shù)字化的建設(shè)上也做出了巨大改進(jìn)。云和恩墨充分利用自身在數(shù)據(jù)領(lǐng)域的深耕積淀，結(jié)合國(guó)家電網(wǎng)的運(yùn)維經(jīng)驗(yàn)和深厚的場(chǎng)景理解，通過應(yīng)用架構(gòu)改造和雙活架構(gòu)升級(jí)，支持國(guó)網(wǎng)新疆電力的數(shù)字電網(wǎng)建設(shè)工作。

雙方通過合作協(xié)同，繼2019年12月31日，國(guó)網(wǎng)新疆電力順利完成營(yíng)銷業(yè)務(wù)應(yīng)用系統(tǒng)架構(gòu)改造后（了解詳情），該系統(tǒng)的雙活架構(gòu)改造項(xiàng)目又歷時(shí)半年多，并經(jīng)過最終40多個(gè)小時(shí)的連續(xù)奮戰(zhàn)，于2020年11月23日順利割接上線，標(biāo)志著該項(xiàng)目的成功完成。改造后的系統(tǒng)高效支撐95598客服、繳費(fèi)業(yè)務(wù)的高可用，切實(shí)讓客戶體驗(yàn)到“互聯(lián)網(wǎng)+營(yíng)銷服務(wù)”帶來的便利。

01核心業(yè)務(wù)長(zhǎng)足發(fā)展，同城災(zāi)備迫在眉睫

國(guó)網(wǎng)新疆電力的營(yíng)銷業(yè)務(wù)應(yīng)用系統(tǒng)于2009年上線運(yùn)行，用電用戶數(shù)將近800萬(wàn)。目前，營(yíng)銷業(yè)務(wù)的數(shù)據(jù)月增長(zhǎng)量約為200GB，年增長(zhǎng)達(dá)2TB以上。隨著該業(yè)務(wù)的不斷深化和拓展，當(dāng)前的基礎(chǔ)環(huán)境已不能滿足業(yè)務(wù)和技術(shù)發(fā)展需求，缺少應(yīng)用級(jí)容災(zāi)預(yù)案，如果遇到嚴(yán)重故障無(wú)法快速完成應(yīng)用切換。

接下來，如何在保證高并發(fā)存儲(chǔ)和強(qiáng)計(jì)算的同時(shí)，又能做到數(shù)據(jù)的完整性和業(yè)務(wù)的連續(xù)性，是新疆電力面臨的重要挑戰(zhàn)，同城災(zāi)備的建設(shè)刻不容緩。

02新冠疫情共克時(shí)艱，雙活改造排除萬(wàn)難

國(guó)網(wǎng)新疆電力同云和恩墨的技術(shù)專家一起，結(jié)合其自身基礎(chǔ)架構(gòu)布局，確定了營(yíng)銷系統(tǒng)同城雙活架構(gòu)的方案。該方案利用南湖、建設(shè)路同城兩地?cái)?shù)據(jù)中心，采用裸光纖和長(zhǎng)距InfiniBand技術(shù)，構(gòu)建兩中心微秒級(jí)雙通道網(wǎng)絡(luò)；同時(shí)應(yīng)用全域負(fù)載均衡和“6+15”分布式數(shù)據(jù)庫(kù)集群，搭建營(yíng)銷系統(tǒng)同城雙活環(huán)境。

同城雙活建成后，將實(shí)現(xiàn)與電網(wǎng)人資、財(cái)務(wù)、交易等33套系統(tǒng)、4067項(xiàng)業(yè)務(wù)流程的雙活高可用，可有效抵御局部重大災(zāi)難發(fā)生帶來的風(fēng)險(xiǎn)，保障應(yīng)用快速切換和數(shù)據(jù)的零丟失，從技術(shù)上實(shí)現(xiàn)無(wú)感知，提升用戶體驗(yàn)。

雙活架構(gòu)-拓?fù)鋱D

云和恩墨結(jié)合客戶現(xiàn)場(chǎng)實(shí)際環(huán)境條件，定制了完備的項(xiàng)目實(shí)施計(jì)劃，在正式割接前，做到充分的測(cè)試準(zhǔn)備，保證雙活的順利上線。

雙活項(xiàng)目計(jì)劃-關(guān)鍵節(jié)點(diǎn)步驟

然而，受到年初全國(guó)范圍的疫情影響，以及7月中旬烏魯木齊的疫情再次反彈，雙活改造項(xiàng)目的推進(jìn)遇到了巨大的阻撓。云和恩墨的專家和工程師們?cè)跓o(wú)法到達(dá)客戶現(xiàn)場(chǎng)的時(shí)候，在家隔離時(shí)依然積極推進(jìn)項(xiàng)目進(jìn)展，同客戶遠(yuǎn)程開展項(xiàng)目會(huì)議，及時(shí)同步項(xiàng)目進(jìn)度，不放過任何一個(gè)潛在的風(fēng)險(xiǎn)點(diǎn)。

03同城雙活五九可用，高效雙寫自動(dòng)切換

11月23日，在經(jīng)過了40多個(gè)小時(shí)的連續(xù)奮戰(zhàn)后，國(guó)網(wǎng)新疆電力的營(yíng)銷系統(tǒng)雙活架構(gòu)改造項(xiàng)目順利割接上線，項(xiàng)目取得圓滿成功。

雙活架構(gòu)改造的項(xiàng)目成效包括：

真正雙活：可在兩個(gè)數(shù)據(jù)中心，對(duì)數(shù)據(jù)庫(kù)同時(shí)進(jìn)行事務(wù)處理，雙中心的6個(gè)計(jì)算節(jié)點(diǎn)數(shù)據(jù)庫(kù)對(duì)應(yīng)用系統(tǒng)透明無(wú)感知，相比傳統(tǒng)兩中心的主備建設(shè)模式，設(shè)備資源利用率提高了30%以上。

五九可用：雙活架構(gòu)支持下的兩個(gè)數(shù)據(jù)中心數(shù)據(jù)庫(kù)可達(dá)到99.999%可用性，出現(xiàn)任意單個(gè)存儲(chǔ)故障、計(jì)算節(jié)點(diǎn)故障，甚至單中心機(jī)房掉電等事件發(fā)生時(shí)，營(yíng)銷業(yè)務(wù)均能自動(dòng)化切換，連續(xù)對(duì)外提供服務(wù)。整個(gè)災(zāi)難切換及業(yè)務(wù)恢復(fù)的過程均無(wú)需人工干預(yù)，自動(dòng)化的操作能夠有效降低企業(yè)客戶的管理成本。

雙活架構(gòu)-高可用測(cè)試通過

高效雙寫：雙活架構(gòu)存儲(chǔ)網(wǎng)絡(luò)基于RDMA，讀寫效率是傳統(tǒng)SAN存儲(chǔ)的10倍以上，真正實(shí)現(xiàn)了高帶寬、高性能、低延遲。I/O性能在同站點(diǎn)和不同站點(diǎn)的表現(xiàn)都很優(yōu)秀，在同站點(diǎn)下雙端口200Gbps的IB網(wǎng)絡(luò)環(huán)境下，最大讀帶寬高達(dá)20GB/s，單節(jié)點(diǎn)8K寫的IOPS高達(dá)55.5w，在不同站點(diǎn)間延遲低至0.3ms。

自動(dòng)運(yùn)維：zData的一體化管理與監(jiān)控平臺(tái)，實(shí)現(xiàn)了從底層硬件到上層數(shù)據(jù)的完整管理和監(jiān)控，可維護(hù)性和可管理性更強(qiáng)。雙活拓?fù)淇沙尸F(xiàn)眾多節(jié)點(diǎn)和網(wǎng)絡(luò)的運(yùn)行狀態(tài)，性能圖表則全面直觀地展示性能趨勢(shì)，一目了然。

zData雙活版 - 拓?fù)鋱D管理

zData 雙活版– 性能監(jiān)控圖表

04里程碑式意義深遠(yuǎn)，持續(xù)探索再譜新篇

國(guó)網(wǎng)新疆電力營(yíng)銷系統(tǒng)雙活建設(shè)，不僅可以高效支撐95598客服、繳費(fèi)業(yè)務(wù)的高可用和業(yè)務(wù)連續(xù)性，切實(shí)讓客戶體驗(yàn)到“互聯(lián)網(wǎng)+營(yíng)銷服務(wù)”帶來的便利，良好的可擴(kuò)展性更能夠滿足營(yíng)銷類信息系統(tǒng)未來3-5年的發(fā)展需要。同時(shí)，本次的建設(shè)實(shí)現(xiàn)了電網(wǎng)核心業(yè)務(wù)同城雙活零的突破，為電力企業(yè)業(yè)務(wù)系統(tǒng)的容災(zāi)建設(shè)提供了有益的借鑒和參考。

下一步，國(guó)網(wǎng)新疆電力將持續(xù)探索人工智能、區(qū)塊鏈等新技術(shù)的應(yīng)用，以信息化建設(shè)為平臺(tái)，全面提升信息化服務(wù)水平，推動(dòng)電力的數(shù)字化、網(wǎng)絡(luò)化和智能化發(fā)展。