王明強(qiáng)｜網(wǎng)管技術(shù)專(zhuān)家王明強(qiáng)｜網(wǎng)管技術(shù)專(zhuān)家CONTENTS目錄網(wǎng)管系統(tǒng)數(shù)據(jù)庫(kù)現(xiàn)狀數(shù)據(jù)庫(kù)自主可控轉(zhuǎn)型理論研究數(shù)據(jù)庫(kù)平替方案實(shí)踐01網(wǎng)管系統(tǒng)數(shù)據(jù)庫(kù)現(xiàn)狀——多源、多場(chǎng)景、重載業(yè)務(wù)電信行業(yè)網(wǎng)管系統(tǒng)介紹n電信行業(yè)的網(wǎng)管系統(tǒng)在技術(shù)演進(jìn)和業(yè)務(wù)需求驅(qū)動(dòng)下，確實(shí)呈現(xiàn)出“殊途同歸”的趨勢(shì)。盡管不同運(yùn)營(yíng)商、設(shè)備廠商的網(wǎng)管系統(tǒng)在架構(gòu)、功能和實(shí)現(xiàn)路徑上存在差異，但最終目標(biāo)逐漸趨同，主要實(shí)現(xiàn)平臺(tái)化、模塊化、流程化、自動(dòng)化的全域網(wǎng)絡(luò)管理。基本網(wǎng)絡(luò)管理功能基本網(wǎng)絡(luò)管理功能1)開(kāi)通管理2)資源管理3)質(zhì)量管理4）故障管理5)運(yùn)維管理5)運(yùn)維管理6)安全管理7)數(shù)據(jù)管理--------------------?--------------------?電信行業(yè)網(wǎng)管系統(tǒng)數(shù)據(jù)庫(kù)特點(diǎn)nn相同的系統(tǒng)架構(gòu)的同時(shí)，業(yè)務(wù)系統(tǒng)與數(shù)據(jù)庫(kù)也具有相同的特點(diǎn)。數(shù)據(jù)庫(kù)是支撐網(wǎng)絡(luò)監(jiān)控、配置、故障管理和性能分析的核心基礎(chǔ)設(shè)施，其設(shè)計(jì)需滿(mǎn)足網(wǎng)絡(luò)的高復(fù)雜性、高負(fù)載以及多場(chǎng)景要求。網(wǎng)管并不是獨(dú)立的很多系統(tǒng)，是一個(gè)綜合性系統(tǒng)進(jìn)行功能拆分模塊化處理的實(shí)踐落地。海量數(shù)據(jù)復(fù)雜計(jì)算海量數(shù)據(jù)復(fù)雜計(jì)算數(shù)據(jù)流程復(fù)雜02數(shù)據(jù)庫(kù)自主可控轉(zhuǎn)型理論研究——基于移動(dòng)網(wǎng)管系統(tǒng)關(guān)鍵節(jié)點(diǎn)關(guān)鍵節(jié)點(diǎn)一般節(jié)點(diǎn)03數(shù)據(jù)庫(kù)的自主可控研究n在網(wǎng)管系統(tǒng)國(guó)產(chǎn)化替換過(guò)程中，根據(jù)河南移動(dòng)國(guó)產(chǎn)化實(shí)踐將數(shù)據(jù)庫(kù)國(guó)產(chǎn)化過(guò)程總結(jié)成九步替換法，將國(guó)產(chǎn)化替代從“高風(fēng)險(xiǎn)試錯(cuò)”轉(zhuǎn)變?yōu)椤翱闪炕?、可?fù)制、可審計(jì)”的標(biāo)準(zhǔn)化工程。通過(guò)標(biāo)準(zhǔn)化流程、降低數(shù)據(jù)庫(kù)國(guó)產(chǎn)化風(fēng)險(xiǎn)、降低國(guó)產(chǎn)化成本、提升替換成功率，加速?lài)?guó)產(chǎn)數(shù)據(jù)庫(kù)全面落地。調(diào)研業(yè)務(wù)需求，了解現(xiàn)有數(shù)據(jù)庫(kù)品牌、架構(gòu)、高可用要求、業(yè)務(wù)增長(zhǎng)量、設(shè)計(jì)應(yīng)用系統(tǒng)以及數(shù)據(jù)庫(kù)整體架構(gòu)、數(shù)據(jù)同步方案、安全方案、備份方案從各個(gè)團(tuán)隊(duì)協(xié)調(diào)資源組件項(xiàng)目專(zhuān)項(xiàng)支撐團(tuán)隊(duì)、并明確數(shù)據(jù)庫(kù)使用應(yīng)用系統(tǒng)，并提煉典型場(chǎng)景進(jìn)行數(shù)據(jù)庫(kù)使用應(yīng)用系統(tǒng)，并提煉典型場(chǎng)景進(jìn)行按照系統(tǒng)上線方案進(jìn)行操作，并做應(yīng)用功能和數(shù)據(jù)第一步:業(yè)務(wù)調(diào)研分析n全面理解現(xiàn)有業(yè)務(wù)與數(shù)據(jù)庫(kù)的關(guān)系、業(yè)務(wù)特點(diǎn)、數(shù)據(jù)庫(kù)指標(biāo)、業(yè)務(wù)增長(zhǎng)量等相關(guān)技術(shù)細(xì)節(jié)，評(píng)估數(shù)據(jù)庫(kù)國(guó)產(chǎn)化的可性能，同時(shí)也為國(guó)產(chǎn)數(shù)據(jù)庫(kù)選型、架構(gòu)設(shè)計(jì)、遷移策略、相關(guān)方案提供精準(zhǔn)依據(jù)。降低替換風(fēng)險(xiǎn)、確保系統(tǒng)的穩(wěn)定運(yùn)行。整體架構(gòu)應(yīng)用指標(biāo)方式，各個(gè)數(shù)據(jù)集之間是否需要數(shù)據(jù)交互2.★各個(gè)系統(tǒng)之間數(shù)據(jù)流方式，接口方式、導(dǎo)入導(dǎo)出、實(shí)時(shí)同步等3.業(yè)務(wù)增長(zhǎng)情況4.備份保留策略6.批量導(dǎo)入導(dǎo)出。1、4節(jié)點(diǎn)oracle2、采為160threads,。?采用分布式數(shù)據(jù)庫(kù)。 3、源庫(kù)160threads建議采用集中式數(shù)據(jù)案1、4節(jié)點(diǎn)oracle2、采為160threads,。?采用分布式數(shù)據(jù)庫(kù)。 3、源庫(kù)160threads建議采用集中式數(shù)據(jù)案的容型業(yè)務(wù)。30000.3、存儲(chǔ)過(guò)程磁盤(pán)占用不足50%3:建議采用集中式數(shù)、分布式分析性數(shù)據(jù)庫(kù) 通用服務(wù)器2、通用配置160。1、源庫(kù)采用8節(jié)點(diǎn)RAC、。、實(shí)時(shí)性要求嚴(yán)苛，毫秒級(jí)響應(yīng)。第三步:數(shù)據(jù)庫(kù)替換選型n明確數(shù)據(jù)庫(kù)系統(tǒng)架構(gòu)后，在安全可靠名錄中合計(jì)16家廠商、17款集中式數(shù)據(jù)庫(kù)、11款分布式數(shù)據(jù)庫(kù)，參考系統(tǒng)可靠性明確采用開(kāi)源還是商用數(shù)據(jù)庫(kù)，在現(xiàn)有階段建議RTO在小時(shí)級(jí)別內(nèi)的系統(tǒng)或復(fù)雜業(yè)務(wù)，不建議采用開(kāi)源數(shù)據(jù)庫(kù)。在多個(gè)廠家中根據(jù)公司實(shí)力以及產(chǎn)品能力綜合考量確定產(chǎn)品。.pingcap-z前期：選型采購(gòu)中期：開(kāi)發(fā)部署后期：運(yùn)維使用選型成本前期：選型采購(gòu)中期：開(kāi)發(fā)部署后期：運(yùn)維使用選型成本評(píng)測(cè)成本產(chǎn)品費(fèi)用服務(wù)費(fèi)用包括個(gè)性化定制、部署、培訓(xùn)、后續(xù)運(yùn)維的費(fèi)用擴(kuò)展限制Bug優(yōu)化開(kāi)源商業(yè)部署成本擴(kuò)展限制Bug優(yōu)化開(kāi)源商業(yè)部署成本開(kāi)發(fā)成本遷移成本配套升級(jí)遷移成本配套升級(jí)人力投入咨詢(xún)費(fèi)用咨詢(xún)費(fèi)用評(píng)價(jià)體系 技術(shù)創(chuàng)新能力公司整體（公司資質(zhì)，注冊(cè)資金，股權(quán)架 技術(shù)創(chuàng)新能力公司整體（公司資質(zhì)，注冊(cè)資金，股權(quán)架人員實(shí)力（人員規(guī)模，資質(zhì)，學(xué)歷，團(tuán)整體生態(tài)能力（主流軟硬件適配情況、上下游兼第四步:團(tuán)隊(duì)組建分工n通過(guò)專(zhuān)業(yè)化分工、敏捷協(xié)作、技術(shù)沉淀，能夠顯著提升工作團(tuán)隊(duì)效率、降低不可控的風(fēng)險(xiǎn)、加快項(xiàng)目進(jìn)度、降低項(xiàng)目風(fēng)險(xiǎn)，并確保系統(tǒng)穩(wěn)定上線。根據(jù)網(wǎng)管系統(tǒng)多年數(shù)據(jù)庫(kù)工作經(jīng)驗(yàn)，將項(xiàng)目團(tuán)隊(duì)按照能力域進(jìn)行劃分，由六個(gè)能力域共同支撐數(shù)據(jù)庫(kù)國(guó)產(chǎn)化項(xiàng)目。領(lǐng)導(dǎo)組項(xiàng)目實(shí)施組項(xiàng)目負(fù)責(zé)人項(xiàng)目實(shí)施組項(xiàng)目負(fù)責(zé)人技術(shù)專(zhuān)家組第五步:全量數(shù)據(jù)遷移評(píng)估報(bào)告數(shù)據(jù)采集遷移評(píng)估架構(gòu)遷移語(yǔ)法轉(zhuǎn)換數(shù)據(jù)遷移遷移報(bào)告數(shù)據(jù)結(jié)構(gòu)比對(duì)行數(shù)比對(duì)適用各種場(chǎng)景的邏輯架構(gòu)國(guó)產(chǎn)數(shù)據(jù)庫(kù)任務(wù)監(jiān)控遷移任務(wù)調(diào)度任務(wù)支援邏輯解析類(lèi)型轉(zhuǎn)換語(yǔ)法轉(zhuǎn)換數(shù)據(jù)清洗斷點(diǎn)續(xù)傳并行執(zhí)行資源感知全面的工具集n數(shù)據(jù)庫(kù)國(guó)產(chǎn)化替換普遍存在數(shù)據(jù)遷移工作，為了完成高質(zhì)量數(shù)據(jù)庫(kù)遷移，需要提供高效的、全面的數(shù)據(jù)遷移工具集，并提供適用各種場(chǎng)景的底層邏輯實(shí)現(xiàn)邏輯解析、類(lèi)型轉(zhuǎn)換、數(shù)據(jù)清洗、語(yǔ)法轉(zhuǎn)換、斷點(diǎn)續(xù)傳、并行解析加載、資源感知等功能。評(píng)估報(bào)告數(shù)據(jù)采集遷移評(píng)估架構(gòu)遷移語(yǔ)法轉(zhuǎn)換數(shù)據(jù)遷移遷移報(bào)告數(shù)據(jù)結(jié)構(gòu)比對(duì)行數(shù)比對(duì)適用各種場(chǎng)景的邏輯架構(gòu)國(guó)產(chǎn)數(shù)據(jù)庫(kù)任務(wù)監(jiān)控遷移任務(wù)調(diào)度任務(wù)支援邏輯解析類(lèi)型轉(zhuǎn)換語(yǔ)法轉(zhuǎn)換數(shù)據(jù)清洗斷點(diǎn)續(xù)傳并行執(zhí)行資源感知全面的工具集第六步:應(yīng)用系統(tǒng)適配n在國(guó)產(chǎn)化數(shù)據(jù)庫(kù)改造中，系統(tǒng)適配應(yīng)以“語(yǔ)法兼容性、數(shù)據(jù)一致性、性能對(duì)等、安全合規(guī)”為核心目標(biāo)。重點(diǎn)進(jìn)行數(shù)據(jù)庫(kù)、應(yīng)用、性能和硬件的適配工作，通過(guò)雙軌驗(yàn)證和灰度發(fā)布確保平滑過(guò)渡。構(gòu)建從評(píng)估->改造->驗(yàn)證的全流程閉環(huán)管理機(jī)制，綜合運(yùn)用自動(dòng)化工具與人工校驗(yàn)手段，最終達(dá)成業(yè)務(wù)無(wú)感切換且性能達(dá)標(biāo)的改造目標(biāo)。u系統(tǒng)性能適配u硬件適配,明確割接路徑及回滾策略確?；?1方案制定與評(píng)審數(shù)據(jù)遷移準(zhǔn)備 檢查數(shù)據(jù)回流配置、日志收集功能?召開(kāi)割接前動(dòng)員會(huì)議操作準(zhǔn)備 對(duì)照測(cè)試表，完成應(yīng)用功能的驗(yàn)證實(shí)例+實(shí)例+參數(shù)指標(biāo)問(wèn)題診斷參數(shù)模板設(shè)置實(shí)例啟動(dòng)、停止、重啟規(guī)格變更文件上傳下載開(kāi)發(fā)工具網(wǎng)絡(luò)監(jiān)控操作系統(tǒng)配置數(shù)據(jù)庫(kù)及操作系統(tǒng)參數(shù)查看檢查內(nèi)容維臺(tái)驗(yàn)證、處理參數(shù)應(yīng)用歷史實(shí)例刪除、回收實(shí)例密碼修改安裝部署數(shù)據(jù)庫(kù)日常管理工具集管理參數(shù)模板設(shè)置實(shí)例啟動(dòng)、停止、重啟規(guī)格變更文件上傳下載開(kāi)發(fā)工具網(wǎng)絡(luò)監(jiān)控操作系統(tǒng)配置數(shù)據(jù)庫(kù)及操作系統(tǒng)參數(shù)查看檢查內(nèi)容維臺(tái)驗(yàn)證、處理參數(shù)應(yīng)用歷史實(shí)例刪除、回收實(shí)例密碼修改安裝部署數(shù)據(jù)庫(kù)日常管理工具集管理——業(yè)務(wù)調(diào)研分析、架構(gòu)方案設(shè)計(jì)、數(shù)據(jù)庫(kù)替換選型n電子運(yùn)維系統(tǒng)是網(wǎng)絡(luò)運(yùn)維管理的核心支撐平臺(tái)，是運(yùn)維制度和規(guī)程的信息化載體，以IT方式實(shí)現(xiàn)標(biāo)準(zhǔn)運(yùn)維流程固化，日均派單3萬(wàn)余張。系統(tǒng)既是支撐O域十多個(gè)專(zhuān)業(yè)網(wǎng)絡(luò)維護(hù)工作的核心生產(chǎn)調(diào)度平臺(tái)，又是貫通B域到O域的紐帶，PLSQL占比較高，資源需求量較低，采用集中式數(shù)據(jù)庫(kù)架構(gòu)。在選型過(guò)程中以項(xiàng)目平穩(wěn)替換為第一原則，兼顧公司實(shí)例，最后選擇金倉(cāng)數(shù)據(jù)庫(kù)。1業(yè)務(wù)調(diào)研分析數(shù)據(jù)庫(kù)架構(gòu)設(shè)計(jì)1電子運(yùn)維系統(tǒng)電子運(yùn)維系統(tǒng)讀寫(xiě)請(qǐng)求熱備讀寫(xiě)請(qǐng)求熱備4、未來(lái)五年業(yè)務(wù)增長(zhǎng)不超過(guò)15%。數(shù)據(jù)同步 主節(jié)點(diǎn)備節(jié)點(diǎn)數(shù)據(jù)庫(kù)替換選型4、產(chǎn)品周邊工具、生態(tài)齊全建設(shè)項(xiàng)目團(tuán)隊(duì)n從運(yùn)維廠商、開(kāi)發(fā)廠家、數(shù)據(jù)庫(kù)原廠協(xié)調(diào)專(zhuān)業(yè)人員成立項(xiàng)目組團(tuán)隊(duì)，其中項(xiàng)目經(jīng)理由使用部門(mén)擔(dān)任。同時(shí)從內(nèi)部其他部門(mén)協(xié)調(diào)響應(yīng)專(zhuān)家參與技術(shù)方案制定以及安全方案、方案評(píng)審工作。項(xiàng)目經(jīng)理運(yùn)維保障組數(shù)據(jù)庫(kù)運(yùn)維開(kāi)發(fā)測(cè)試組運(yùn)維保障組自有專(zhuān)家團(tuán)隊(duì)自有專(zhuān)家團(tuán)隊(duì)自有專(zhuān)家團(tuán)隊(duì)自有專(zhuān)家團(tuán)隊(duì)3C3C3C東信東信東信東信東信東信東信3C數(shù)據(jù)庫(kù)遷移、適配、上線、割接n生產(chǎn)系統(tǒng)基于某一事務(wù)號(hào)開(kāi)始做生產(chǎn)負(fù)載的錄制工作，用智能化遷移工具做數(shù)據(jù)全量遷移至同一事務(wù)號(hào)，做生產(chǎn)負(fù)載的回放工作。由數(shù)據(jù)庫(kù)廠家解決功能以及性能適配問(wèn)題，開(kāi)發(fā)生做驗(yàn)證測(cè)試完成適配工作。生產(chǎn)割接采用柔性遷移的不停機(jī)遷移方案，并采用雙軌并行的回退方案確保萬(wàn)無(wú)一失。原生產(chǎn)區(qū)wor*recwor_scapture.wmdwor_fcapture.wmd應(yīng)用服務(wù)器5增量數(shù)據(jù)入庫(kù)l-----------------------------------------------------反向同步1記錄時(shí)間斷點(diǎn)將全量數(shù)據(jù)備份至NBU64全量數(shù)據(jù)入庫(kù)capfiles目錄cap目錄3轉(zhuǎn)服務(wù)器全量備份數(shù)據(jù)還原至中轉(zhuǎn)原生產(chǎn)區(qū)wor*recwor_scapture.wmdwor_fcapture.wmd應(yīng)用服務(wù)器5增量數(shù)據(jù)入庫(kù)l-----------------------------------------------------反向同步1記錄時(shí)間斷點(diǎn)將全量數(shù)據(jù)備份至NBU64全量數(shù)據(jù)入庫(kù)capfiles目錄cap目錄3轉(zhuǎn)服務(wù)器全量備份數(shù)據(jù)還原至中轉(zhuǎn)生產(chǎn)2節(jié)點(diǎn)RAC+備機(jī)2節(jié)點(diǎn)RACcpu40%，內(nèi)存56%，磁盤(pán)io40%，存儲(chǔ)使用率52%，數(shù)據(jù)庫(kù)連接數(shù)1200左右4月20上線運(yùn)行到至今2025-06-17日，業(yè)務(wù)流程正常。內(nèi)存使用率高于原oracle，其他基本持平