1、數(shù)據脫敏銀行解決方案第1頁，共93頁。01數(shù)據脫敏建設目標02數(shù)據脫敏解決方案03數(shù)據脫敏實施計劃目錄CONTENTS第2頁，共93頁。01數(shù)據脫敏的建設目標第3頁，共93頁。銀行機構應規(guī)避信息風險，加強數(shù)據、文檔的安全管理，對客戶的敏感信息提供完善的保護，對用于測試開發(fā)的生產數(shù)據要進行脫敏、變形、實現(xiàn)有效保護，逐步建立信息資產分類分級保護機制，完善敏感信息存儲和傳輸?shù)雀唢L險環(huán)節(jié)的控制措施。第4頁，共93頁。大數(shù)據及云平臺的發(fā)展，最終目的在于提高信息的利用率、數(shù)據的流通性、進一步挖掘數(shù)據的價值，尤其是在金融領域長期積累的數(shù)據，其本身的價值也越來越高。第5頁，共93頁。第6頁，共93頁。第7頁，

2、共93頁。OR數(shù)據脫敏是什么-客戶角度識別客戶需求321業(yè)務快捷辦理資產增值保值第8頁，共93頁。數(shù)據脫敏是什么-個人隱私1. 大量積累的業(yè)務數(shù)據，在用與防之間的流轉過程中，如何保障個人隱私？ 隨著金融業(yè)務的快速發(fā)展，業(yè)務生產系統(tǒng)積累了大量包含客戶賬戶等敏感信息的數(shù)據。而在業(yè)務分析、開發(fā)測試、審計監(jiān)管，甚至是外包業(yè)務等金融業(yè)的工作場景中，工作人員使用的都是真實數(shù)據。 如果這些數(shù)據發(fā)生泄露、損壞，不僅會帶來經濟損失，更重要的是會大大影響用戶對該金融機構的信任度，如何保證生產數(shù)據安全已成為銀行必須面對的一個重要問題。第9頁，共93頁。數(shù)據脫敏是什么-數(shù)據合規(guī)2.上級主管部門不斷推出針對性的政策法規(guī)

3、，如何確保自身數(shù)據合規(guī)？ 金融行業(yè)是高度信息化的行業(yè)，在人們的日常生活中扮演著重要的角色，同時也積累了大量的用戶個人數(shù)據，如何保證生產環(huán)境數(shù)據安全已經成為一個行業(yè)難題。第10頁，共93頁。數(shù)據脫敏是什么-技術規(guī)范3.現(xiàn)有技術明顯跟不上業(yè)務發(fā)展的需要，輸出包含有個人隱私數(shù)據的過程不夠規(guī)范。（1）備份恢復手段直接獲得測試數(shù)據優(yōu)點是簡單快捷；弊端卻是隱私數(shù)據毫無保留地被泄露。（2）由開發(fā)商負責脫敏看似對數(shù)據進行了處理，但實際上執(zhí)行者是開發(fā)商，真實數(shù)據同樣已外流；效率低下，占用大量人力和時間；規(guī)則簡單，通過逆向運算即可得到真實數(shù)據，并且簡單的規(guī)則還會導致數(shù)據大量失真，仿真度太低，影響測試效果。（3）寫

4、程序、腳本或命令對數(shù)據進行脫敏，效率不高，準確率無法判斷對客戶員工的技術水平要求較高；不成熟的算法導致測試數(shù)據質量同樣不高。第11頁，共93頁。1、主動服務2、智能分流3、降低人工網點業(yè)務轉型1、精準營銷2、產品咨詢 3、目標客戶挖掘1、線下渠道融合2、設備資源共享3、客戶行為分析數(shù)據脫敏是什么-銀行角度銀行產品營銷網點智能管理第12頁，共93頁。數(shù)據脫敏的建設目標01030204線上線下渠道協(xié)同業(yè)務辦理效率提升精準客戶營銷資源管理與配置第13頁，共93頁。數(shù)據治理意義、作用和價值意義是構建完善、共享、統(tǒng)一管理數(shù)據環(huán)境的基本保障和重要組成部分是把數(shù)據作為資產來管理的有效手段作用確定了一系列崗位

5、角色和相應的責任及管理流程保證了業(yè)務數(shù)據在采集、集中、轉換、存儲、應用整個過程中的完整性、準確性、一致性和時效性價值企業(yè)進行數(shù)據治理的最大驅動力來自數(shù)據質量，通過提高數(shù)據質量實現(xiàn)更多的業(yè)務價值將實現(xiàn)業(yè)務目標作為數(shù)據管理和服務的核心驅動力，優(yōu)化數(shù)據架構，提升數(shù)據倉庫/信息化管理系統(tǒng)建設，支持管理能力的提高、精細化和決策的科學性第14頁，共93頁。數(shù)據戰(zhàn)略數(shù)據應用與服務數(shù)據管理保障機制促進支撐實現(xiàn)支撐數(shù)據戰(zhàn)略與規(guī)劃數(shù)據組織與職責數(shù)據制度與管理流程數(shù)據服務管理數(shù)據需求管理應用系統(tǒng)建設數(shù)據服務數(shù)據架構與模型管理數(shù)據標準管理數(shù)據質量管理元數(shù)據管理主數(shù)據管理數(shù)據保留與歸檔管理數(shù)據安全管理內容管理數(shù)據治理框

6、架第15頁，共93頁。數(shù)據調度與處理大數(shù)據平臺數(shù)據結構化轉換大數(shù)據分析計算分布式數(shù)據庫分布式文件系統(tǒng)數(shù)據生命周期管理數(shù)據平臺數(shù)據傳輸數(shù)據服務數(shù)據集市數(shù)據質量檢核元數(shù)據管理數(shù)據管理平臺數(shù)據應用統(tǒng)計報表基礎數(shù)據平臺貼源層整合層匯總層數(shù)據切分數(shù)據源業(yè)務系統(tǒng)物聯(lián)網互聯(lián)網數(shù)據交換平臺內部數(shù)據外部數(shù)據其他系統(tǒng)數(shù)據接口數(shù)據架構數(shù)據挖掘高管駕駛艙第16頁，共93頁。一、應用（需求）驅動主導數(shù)據平臺的實現(xiàn)，加強業(yè)務的關注和參與二、初期能夠快速見效并體現(xiàn)建設價值，不盲目投入三、借鑒同業(yè)的成功經驗和成果，選擇成熟技術架構和解決方案四、重視內部人員培養(yǎng)，建設配套運營制度和管理體系解決在金融生產環(huán)境與非生產環(huán)境敏感隱私

7、數(shù)據的使用過程中，如何保護個人隱私數(shù)據的難題，實現(xiàn)金融業(yè)務與管理無縫對接，快速高效地實現(xiàn)生產環(huán)境數(shù)據向非生產環(huán)境的過渡。實施周期不易過長，規(guī)模不易過大，能夠快速的見到數(shù)據總線帶來的效果和價值。盡量參考同行業(yè)、同規(guī)模、同類型企業(yè)行的建設經驗，適當創(chuàng)新。前期讓公司內IT人員盡量更多、更深入的參與到數(shù)據總線的建設中，后期角色以管理為主，盡量與合作伙伴共同建設二期以上。配套的管理規(guī)范、技術規(guī)范、運營體系。數(shù)據平臺建設原則第17頁，共93頁。第一步：為生產數(shù)據建立一套隱私數(shù)據的模型和關系，同時支持自動定義和手工定義兩種模式；第二步：通過內部保存的生產數(shù)據模型，從生產系統(tǒng)周期性地抽取真實數(shù)據；第三步：根據

8、隱私數(shù)據模型，將抽取到的真實數(shù)據進行漂白脫敏，生成偽數(shù)據，這樣測試數(shù)據就準備好待用，由于方案設計的平臺是封閉系統(tǒng)，整個過程能夠很好地避免數(shù)據泄露事件的發(fā)生；四步：當需要使用樣例數(shù)據時，用戶并不會直接訪問內部數(shù)據，而是使用有限權限的帳號登錄并將數(shù)據高速裝載到外部的某個數(shù)據庫中。數(shù)據平臺建設步驟第18頁，共93頁。02數(shù)據脫敏解決方案第19頁，共93頁。01網點設備智能化02線下渠道精準營銷03線下線上渠道融合04線下渠道互聯(lián)互通數(shù)據脫敏整體解決方案05相關技術方案第20頁，共93頁。功能與業(yè)務流程據自身記錄的生產系統(tǒng)的元數(shù)據定義，從生產系統(tǒng)數(shù)據庫當中抽取數(shù)據，抽取的數(shù)據源支持主流的數(shù)據庫系統(tǒng)及文

9、件。為安全起見，隱私數(shù)據在完成漂白之前，非數(shù)據管理員看到的都是空表。 數(shù)據自動抽取面向不同的元數(shù)據，可以提供豐富多樣的數(shù)據分發(fā)方式，同時支持對目標源的自動校驗，最大限度保障用戶數(shù)據的安全。數(shù)據智慧裝載自動掃描并定位銀行生產數(shù)據中的敏感數(shù)據，建立隱私數(shù)據模型，自動識別表與表之間的關聯(lián)關系，利用自身獨一無二的深度內容識別技術，在敏感數(shù)據智能發(fā)現(xiàn)上具有獨一無二的競爭優(yōu)勢。數(shù)據智能發(fā)現(xiàn)根據隱私數(shù)據模型進行敏感數(shù)據匹配，定位哪些表哪些字段為隱私數(shù)據，屬于哪種隱私數(shù)據，同時對于出錯的數(shù)據進行進一步梳理，剔除錯誤數(shù)據，保證隱私數(shù)據模型的準確；數(shù)據梳理識別數(shù)據漂白會自動根據元數(shù)據中隱私數(shù)據的定義，內置豐富的隱

10、私數(shù)據模型規(guī)則，同時也可以自定義修改脫敏規(guī)則，對相應的數(shù)據進行脫敏變形。數(shù)據高效脫敏第21頁，共93頁。01數(shù)據脫敏-系統(tǒng)架構圖數(shù)據脫敏 綜合大前置運營管理平臺銀行后臺自助設備大堂經理移動自助接入適配器轉接適配器精準營銷系統(tǒng)核心CRM銀聯(lián) 互聯(lián)互通平臺第22頁，共93頁。01數(shù)據脫敏-網點設備智能化人臉識別系統(tǒng)設備端加裝人臉識別攝像頭，柜面及自助設備增加人臉采集綁定流程后臺部署人臉識別系統(tǒng)語音識別系統(tǒng)設備端加裝陣列麥克風，后臺部署語音識別系統(tǒng)生物識別手段指靜脈識別（活體檢測）聲紋識別等快捷方式二維碼掃描第23頁，共93頁。01數(shù)據脫敏-網點設備智能化_刷臉交易用戶設備攝像頭刷臉取款輸入手機號人

11、臉比對人臉定位檢測特征提取人臉特征比對人臉比對系統(tǒng) 賬號選擇 密碼驗證出鈔 輸入金額第24頁，共93頁。01數(shù)據脫敏-網點設備智能化_語音交互場景用戶設備設備展示語音識別語音識別系統(tǒng) 請說：取款轉賬取款500歡迎光臨請說出您要辦理的業(yè)務靠近展示取款500指靜脈識別指靜脈設備（活體樣例）出鈔第25頁，共93頁。數(shù)據應用現(xiàn)狀分析-總體情況行領導？綜合業(yè)務系統(tǒng)信貸管理國際業(yè)務系統(tǒng)債券管理系統(tǒng)數(shù)據交換平臺綜合報表平臺財務會計部信貸管理部國際業(yè)務部資金計劃部.客戶信息.貸款余額客戶信息.貸款余額.客戶信息客戶信息.客戶信息. 業(yè)務職能不清晰或相互重疊，觀察數(shù)據視角不盡相同，缺少數(shù)據標準與業(yè)務統(tǒng)一定義，語

12、軌不一致 IT架構中中都是以部門級應用為主（如計財、資金計劃部等），缺乏從大的管理職能（財務、風險、運營等）綜合方面的數(shù)據整合、數(shù)據標準和統(tǒng)一業(yè)務定義 缺乏數(shù)據梳理，造成行領導看到的數(shù)據相互沖突和矛盾 由于業(yè)務系統(tǒng)輸入的隨意性，導致部分關鍵業(yè)務數(shù)據質量較差業(yè)務人員X?567第26頁，共93頁。數(shù)據應用現(xiàn)狀分析-數(shù)據架構方面由于全行的數(shù)據散落在各個業(yè)務系統(tǒng)中，沒有進行有效整合，形成豎井式架構，造成多個信息孤島，整體架構缺少一個穩(wěn)定的、抗源變化的保存最細粒度歷史數(shù)據的數(shù)據層。無法支撐未來共享性應用。集市層客戶風險客戶一部中間業(yè)務匯總數(shù)據層主題層報表應用共用主題數(shù)據客戶風險報表客戶一部報表中間業(yè)務報

13、表支付報表支付業(yè)務ODS層DEP層BDS層其它報表業(yè)務表現(xiàn)信息孤島數(shù)據冗余共享性差歷史數(shù)據缺失問題數(shù)據分散，難以管理沒有一個穩(wěn)定的，抗源變化的數(shù)據層綜合業(yè)務信貸管理國際結算債券核算源系統(tǒng)豎井式架構，造成信息孤島缺少一個穩(wěn)定的、抗源變化的數(shù)據層客戶管理績效考核沒有進行整合，無法共享，不能支持如客戶管理等共享性應用第27頁，共93頁。數(shù)據應用現(xiàn)狀分析-數(shù)據應用難題業(yè)務表現(xiàn)各集市系統(tǒng)指標存在重復各集市系統(tǒng)在保有存量的同時，不斷產生新的指標（增量）集市指標派生無法實現(xiàn)指標邏輯視圖（指標分類）不一致問題重復投入數(shù)據不一致指標設計、口徑不一致指標難以共享客戶風險集市客戶一部集市資金計劃部借據號期末余額。借

14、據編號期末貸款余額總資產用戶我想看本期貸款余額，看哪個呢？主營業(yè)務收入負債總額活期存款流水采集單G21流動性期限缺口統(tǒng)計表。我想看客戶經營情況信息，有哪些呢？用戶活期存款指標數(shù)據怎么不一致呢？活期存款缺少統(tǒng)一的應用分析標準第28頁，共93頁。數(shù)據應用現(xiàn)狀分析-數(shù)據應用難題業(yè)務表現(xiàn)各系統(tǒng)存在冗余數(shù)據各系統(tǒng)存在業(yè)務含義一致，名稱定義不一致的屬性各系統(tǒng)存在含義不一致，名稱定義一致的情況業(yè)務代碼定義混亂問題重復投入數(shù)據不一致、不準確難以利用和管理各系統(tǒng)數(shù)據難以共享缺少統(tǒng)一的基礎數(shù)據標準核心貸款分戶賬表貸款主檔代碼貸款余額。五級分類標志計息方式信貸管理借據表貸款賬號貸款余額。5級分類標志借據計息周期業(yè)務

15、含義一致，名稱定義不一致數(shù)據冗余相同業(yè)務代碼定義不一致核心五級分類代碼信貸管理五級分類代碼1 正常01 正常2 關注02 關注3 次級（不良）03 次級4 可疑（不良）04 可疑5 損失（不良）05 損失第29頁，共93頁。數(shù)據應用現(xiàn)狀分析-數(shù)據質量方面沒有歸納并總結數(shù)據質量問題，缺少反饋機制,導致長期存在各類數(shù)據質量問題。業(yè)務表現(xiàn)指標難以共享數(shù)據不一致、不準確問題部分關鍵業(yè)務數(shù)據缺失源系統(tǒng)校驗關系缺失及業(yè)務人員操作隨意30非現(xiàn)場監(jiān)管報表統(tǒng)計各省分支機構每筆借據的五級分類信貸管理源系統(tǒng)操作錯誤貸款質量五級分類情況簡表信貸管理客戶表核心客戶表由于信貸管理系統(tǒng)業(yè)務人員沒有填寫或填寫錯誤借據的五級分

16、類信息，導致報表數(shù)據不準確，需要手工補錄修改不同系統(tǒng)相同客戶號對應的客戶簡稱不一致客戶號客戶簡稱75682839綜合廠97326762國鑫資產客戶號客戶簡稱75682839糧食局糧油綜合97326762乳山市國鑫資產第30頁，共93頁。數(shù)據應用現(xiàn)狀分析-總結隨著業(yè)務的不斷發(fā)展和信息化的不斷深入，需建設的業(yè)務系統(tǒng)越來越多，隨著業(yè)務系統(tǒng)的數(shù)據種類不斷豐富完善，數(shù)據量的不斷增大，如果不采取有效手段解決數(shù)據架構、數(shù)據標準、數(shù)據質量問題，隨著信息化建設的深入，這些問題將像雪球一樣越滾越大，越積越多。第31頁，共93頁。02數(shù)據脫敏-線下渠道精準營銷線下渠道對接精準營銷系統(tǒng)后臺建設精準營銷系統(tǒng)線下渠道設備

17、通過前置對接精準營銷系統(tǒng)線下渠道增加精準營銷功能精準營銷廣告投放精準營銷產品購買入口第32頁，共93頁。02數(shù)據脫敏-線下渠道精準營銷場景用戶設備身份識別精準營銷系統(tǒng)大堂經理推送重要客戶排隊機取號機用戶設備身份識別自助設備營銷展示營銷交易入口第33頁，共93頁。03數(shù)據脫敏-線上線下渠道融合構建互聯(lián)互通平臺后臺部署互聯(lián)互通平臺服務器構建網點設備群組線上線下渠道互通手機銀行、微信銀行等線上渠道與線下自助渠道通過互聯(lián)互通平臺對接打造高效客戶體驗第34頁，共93頁。03數(shù)據脫敏-線上線下渠道融合場景用戶手機開卡申請開卡資料填寫生成二維碼發(fā)卡區(qū)掃碼二維碼提交申請身份證核查拍照電子簽名發(fā)卡線上申請開卡第

18、35頁，共93頁。04數(shù)據脫敏-線下渠道互聯(lián)互通線下渠道接入互聯(lián)互通平臺線下渠道對接互聯(lián)互通平臺，成為群組一員通過互聯(lián)互通平臺實現(xiàn)消息傳遞與數(shù)據共享線下渠道實施自助設備新一代統(tǒng)一平臺實現(xiàn)線下渠道統(tǒng)一部署和管理線下渠道共用同一套業(yè)務功能APP線下渠道業(yè)務流程優(yōu)化業(yè)務流程模塊化、參數(shù)化第36頁，共93頁。04數(shù)據脫敏-線下渠道互聯(lián)互通場景用戶設備選擇金額非現(xiàn)金設備大額取款1000020000300004000050000身份審核生成取款二維碼大額取款區(qū)掃碼二維碼輸入密碼出鈔第37頁，共93頁。05數(shù)據脫敏-相關技術方案自助設備統(tǒng)一應用平臺跨操作系統(tǒng)：支持Windows、Linux、Android運

19、行渠道統(tǒng)一：同一套平臺及應用代碼，無需重復開發(fā)和測試部署靈活：支持CS、BS及混合架構部署模式極致客戶體驗：UI獨立運行，支持跨瀏覽器互聯(lián)互通平臺線上線下渠道全打通支持集群部署設備端業(yè)務流程時序數(shù)據同步第38頁，共93頁。05數(shù)據脫敏-相關技術方案自助設備統(tǒng)一運營管理平臺統(tǒng)一管理各類型自助設備集成各類管理系統(tǒng)：無紙化、冠字號、安全管理統(tǒng)一用戶入口：PC、智能手機、pad自助設備統(tǒng)一前置平臺開放性接入接出：支持多種協(xié)議、多種報文格式、支持交易透傳多渠道交易共享：實現(xiàn)渠道無關性高效開發(fā)工具第39頁，共93頁。真正意義上的跨平臺05數(shù)據脫敏-統(tǒng)一應用平臺第40頁，共93頁。05數(shù)據脫敏-統(tǒng)一應用平臺

20、UI交互系統(tǒng)：提供界面展示及人機交互APP應用服務層：提供應用服務級封裝及接口APP應用：提供APP應用加載、UI系統(tǒng)接口調用、APP應用服務平臺接口調用第41頁，共93頁。WSAP+架構-WSAP5.0運行展示ANDROID PADWINDOWS/LINUX05數(shù)據脫敏-統(tǒng)一應用平臺第42頁，共93頁。05數(shù)據脫敏-互聯(lián)互通平臺用戶終端互聯(lián)互通平臺PAD基礎通訊服務業(yè)務邏輯路由服務（控制服務）連接第三方系統(tǒng)平臺服務管理臺服務器（終端管理群組管理交易監(jiān)控報表管理）實時數(shù)據總行控制管理臺歷史數(shù)據網銀系統(tǒng)手機銀行CRM大數(shù)據平臺手機監(jiān)控管理臺 分行 機器人 ATM 自助終端 大堂移動端 排隊機 V

21、TM 呼叫系統(tǒng) 其它終端控制管理臺網點第43頁，共93頁。05數(shù)據脫敏-互聯(lián)互通平臺單個銀行網點的所有設備（自助設備），排隊機，柜員等，可以組成一個群組，實現(xiàn)網點內消息的交互。場景1： 客戶進入網點后，機器人通過語音識別出客戶需要辦理的業(yè)務后，可以根據客戶業(yè)務類型，提示用戶到自助終端辦理還是到柜臺辦理.如果到柜臺辦理，機器人可以通過互聯(lián)互通系統(tǒng)獲取當前用戶辦理業(yè)務當前排隊人數(shù)，并將信息提示給用戶.場景2： 用戶在自助終端上辦理需要大堂經理授權的業(yè)務時，系統(tǒng)會自動提示大堂經理當前客戶要辦理的業(yè)務及授權類型。大堂經理授權結束之后，用戶可以繼續(xù)進行業(yè)務辦理。第44頁，共93頁。05數(shù)據脫敏-互聯(lián)互通

22、平臺管機員可以通過移動終端實時查看自助終端的運行狀態(tài)，當終端出現(xiàn)故障后，管機員可以實時了解設備故障修復情況。經過授權的管機員可以在移動端對終端進行修復等操作。第45頁，共93頁。05數(shù)據脫敏-互聯(lián)互通平臺一次服務可以調用多個業(yè)務渠道的資源。通過互聯(lián)互通，讓自助設備、客戶設備、銀行客服協(xié)作，為用戶提供統(tǒng)一服務。第46頁，共93頁。05數(shù)據脫敏-統(tǒng)一前置平臺第47頁，共93頁。共享共享共享共享共享共享BPE交易共享CUPBSM渠道HOST第三方業(yè)務ATM渠道VTM渠道05數(shù)據脫敏-統(tǒng)一前置平臺第48頁，共93頁。05數(shù)據脫敏-統(tǒng)一前置平臺第49頁，共93頁。統(tǒng)一平臺運營管理集中監(jiān)控1品牌：日立、N

23、CR、迪堡、廣電、長城解決監(jiān)控的“各種煩惱”ATM/CRS填單機/BSM/智能大屏TCRSTM發(fā)卡機05數(shù)據脫敏-統(tǒng)一運營管理平臺第50頁，共93頁。統(tǒng)一平臺運營管理系統(tǒng)-移動互聯(lián)采用富客戶端技術，統(tǒng)一了PC桌面、平臺電腦、智能手機三大用戶入口！05數(shù)據脫敏-統(tǒng)一運營管理平臺第51頁，共93頁。數(shù)據平臺邏輯架構數(shù)據調度與處理元數(shù)據管理數(shù)據傳輸數(shù)據生命周期管理非現(xiàn)場報表財會報表客戶風險報表.機構客戶賬戶.非現(xiàn)場監(jiān)管集市財會報表集市風險報表集市高管駕駛艙集市.數(shù)據倉庫源數(shù)據數(shù)據應用貼源層整合層匯總層集市層數(shù)據管理系統(tǒng)綜合業(yè)務系統(tǒng)CM2006國際結算系統(tǒng)債券管理系統(tǒng)ETLETL數(shù)據切分數(shù)據質量檢查系

24、統(tǒng)高管駕駛艙當事人協(xié)議事件當事人資產.外匯資金系統(tǒng)報文清算系統(tǒng)報價引擎系統(tǒng)整合層作業(yè)調度作業(yè)調度作業(yè)調度ETLCBSCM2006EEBONDPEFESMCS第52頁，共93頁。數(shù)據平臺部署架構第53頁，共93頁。數(shù)據平臺項目建設目標第54頁，共93頁。目標建設方法-發(fā)現(xiàn)數(shù)據質量問題建設內容分析源系統(tǒng)表數(shù)據，從及時性、完整性、準確性、有效性、一致性方面對源系統(tǒng)數(shù)據進行數(shù)據校驗，發(fā)現(xiàn)并記錄數(shù)據質量問題，生成數(shù)據質量問題報告建設數(shù)據質量檢核系統(tǒng)，對源系統(tǒng)基礎業(yè)務數(shù)據的進行全面的數(shù)據質量檢查，并實現(xiàn)重要業(yè)務數(shù)據質量的周期性動態(tài)檢查，對發(fā)現(xiàn)的數(shù)據質量問題生成數(shù)據質量報告，反饋給業(yè)務部門第55頁，共93頁

25、。目標建設方法-發(fā)現(xiàn)數(shù)據質量問題源系統(tǒng)分析階段全面分析主要源業(yè)務系統(tǒng)數(shù)據質量問題檢查階段根據制定的檢查規(guī)則編寫程序，對源系統(tǒng)數(shù)據進行檢查數(shù)據質量問題分析階段分析有質量問題數(shù)據對現(xiàn)有應用的影響；提出解決措施123工作階段第56頁，共93頁。源系統(tǒng)分析階段技術角度分析調研產出物源系統(tǒng)表結構，包括主鍵、外鍵、唯一性約束源系統(tǒng)表間關系源系統(tǒng)字段長度和類型業(yè)務角度分析調研源系統(tǒng)表和字段的業(yè)務含義源系統(tǒng)業(yè)務規(guī)則和流程第57頁，共93頁。數(shù)據質量檢查階段第58頁，共93頁。數(shù)據質量分析階段第59頁，共93頁。數(shù)據質量反饋系統(tǒng)概述建設目標對業(yè)務數(shù)據進行數(shù)據質量檢核，準確掌握業(yè)務系統(tǒng)各種數(shù)據質量問題，促進基礎業(yè)

26、務數(shù)據質量的提高建設內容質量檢查規(guī)則定制 實現(xiàn)質量檢查規(guī)則的靈活定制數(shù)據質量檢查 系統(tǒng)按照預定義的數(shù)據質量檢查規(guī)則，對數(shù)據的準確性、有效性、關聯(lián)性、一致性、及時性進行檢查，生成并保存的數(shù)據質量檢查信息。數(shù)據質量分析報告 生成不同類型的數(shù)據質量檢查報表，對不同的數(shù)據質量問題進行分析和展示第60頁，共93頁。 架構和功能系統(tǒng)架構數(shù)據質量檢核與反饋系統(tǒng)檢核對象管理導入、查詢、修改、刪除檢查對象檢核規(guī)則管理新增、刪除、修改檢核規(guī)則檢查頻度管理制定檢查周期和時間權限管理用戶建立權限管理問題報告問題查詢規(guī)則查詢打包下載.問題管理維護并管理發(fā)現(xiàn)的數(shù)據質量問題日志查詢報告管理功能分類功能名稱功能說明檢核對象管

27、理對象編輯修改導入表，修改表和字段的相關屬性檢核規(guī)則管理有效性靈活定制自定義檢核規(guī)則，實現(xiàn)可視化規(guī)則配置和管理關聯(lián)性一致性準確性及時性檢查頻度管理檢核頻度管理質量監(jiān)控周期頻度，可按日、周、月、年等頻度制定檢核時間問題管理問題管理對發(fā)現(xiàn)的數(shù)據質量問題進行進一步的描述和分析，并劃分問題歸屬業(yè)務分類報告管理報告管理質量問題報告查詢，并可按照部門、系統(tǒng)、問題進行匯總查詢系統(tǒng)管理權限管理管理員、操作員權限設置檢核對象配置管理需檢核的表系統(tǒng)功能調度管理整合層匯總層集市層貼源層第61頁，共93頁。數(shù)據質量檢查及反饋系統(tǒng)界面第62頁，共93頁。數(shù)據質量管理建議通過逐套的解決報表數(shù)據質量問題，以數(shù)據標準為依據，

28、來切實解決基層手工修改報表的問題源頭負責制，誰錄入誰修改操作層面數(shù)據糾錯管理層面形成數(shù)據質量管理的機制：發(fā)現(xiàn)問題，定位問題，解決問題的管理流程IT系統(tǒng)建設層面將數(shù)據質量問題檢查規(guī)則固化到系統(tǒng)中，形成數(shù)據質量臺賬，為解決數(shù)據質量問題和考核提供依據第63頁，共93頁。數(shù)據平臺項目建設目標第64頁，共93頁。數(shù)據標準梳理及歸納基礎數(shù)據標準指標數(shù)據標準數(shù)據標準梳理及歸納對我行日常業(yè)務開展過程中所產生基礎性數(shù)據，從業(yè)務方面、技術方面、管理三個方面，對數(shù)據的業(yè)務表達、數(shù)據格式、數(shù)據關系等方面進行一致約定，從而規(guī)范數(shù)據在全行內外共享和使用中的一致性和準確性對數(shù)據的管理、應用過程進行統(tǒng)一和規(guī)范，明確數(shù)據的定義

29、、格式、規(guī)則以及數(shù)據與數(shù)據間的關系為系統(tǒng)開發(fā)實施提供全行統(tǒng)一的規(guī)范準則為數(shù)據加工和應用提供統(tǒng)一來源和依據作用定義定義通過對我行經營管理資料的分析，并參考同 業(yè)的類似成果以及監(jiān)管部門要求，梳理 和篩選出直接反映我行業(yè)務經營管理 狀態(tài)的重要指標，并對指標的業(yè)務 含義、業(yè)務規(guī)則、統(tǒng)計口徑等內 容進行標準化定義，形成全行一 致的指標數(shù)據標準作用 統(tǒng)一全行對各項經營指標的理解和 認識，促進各項經營指標在經營管理 決策中的運用；統(tǒng)一全行指標標準的業(yè)務含義、計算口徑等內容，從而解決我行取數(shù)口徑不一致、業(yè)務含義不清晰、指標分類不清晰的情況，促進部門間數(shù)據共享第65頁，共93頁。目標建設方法-數(shù)據標準解決的問題

30、數(shù)據孤島數(shù)據質量制定了全行統(tǒng)一的標準，實現(xiàn)了業(yè)務數(shù)據信息統(tǒng)一定義，統(tǒng)一命名、統(tǒng)一來源對于數(shù)據質量造成的數(shù)據準確性、一致性等問題，找出造成這些問題的原因，違背業(yè)務和約束的數(shù)據不進入標準體系中舉例例如：在標準制定過程當中，對于業(yè)務數(shù)據之間關聯(lián)不上的問題，首先要找出關聯(lián)不上的原因，之后通過和業(yè)務人員的有效溝通，制定出以哪一類數(shù)據為準的標準，比如信貸管理系統(tǒng)的貸款余額和核心系統(tǒng)的貸款余額不一致，在制定“協(xié)議金額”標準的過程當中，必須明確以那個系統(tǒng)的貸款余額為準，且以此貸款余額制定全行標準，從而解決此類問題。例如：不同部門的貸款余額由于取數(shù)來源不同而造成差異，通過建立完整的分析數(shù)據標準體系后，統(tǒng)一了業(yè)務

31、定義和取數(shù)口徑，有利于全行范圍內重復利用，杜絕出現(xiàn)各業(yè)務部門多次重復定義類似的指標，并且因為標準的權威性和標準的嚴格管理，有效防止指標定義和口徑的二義性。第66頁，共93頁。目標建設方法-數(shù)據標準-建設步驟基礎數(shù)據標準指標數(shù)據標準分析數(shù)據標準發(fā)布執(zhí)行標準映射數(shù)據源和基礎標準數(shù)據映射數(shù)據源和分析標準數(shù)據映射標準執(zhí)行標準定義數(shù)據標準基礎數(shù)據標準發(fā)布執(zhí)行業(yè)務定義、業(yè)務規(guī)則、業(yè)務含義、計算口徑 業(yè)務含義、業(yè)務規(guī)則、業(yè)務描述、 數(shù)據來源第67頁，共93頁。目標建設方法-數(shù)據標準-建設內容1.現(xiàn)狀分析2.標準定義3.標準映射4.執(zhí)行建議目前存在問題業(yè)務訪談系統(tǒng)調研結合最佳實踐分析、診斷形成標準化定義初稿和

32、框架對定義初稿征求意見和討論根據意見反饋和討論結果和修正并形成數(shù)據標準確定映射的系統(tǒng)范圍制定源系統(tǒng)與標準的映射規(guī)則根據數(shù)據驗證映射規(guī)則提出標準在未來各影響面執(zhí)行的遵循原則就標準與現(xiàn)狀的實際差異給出具體的執(zhí)行建議第68頁，共93頁。目標建設方法-數(shù)據標準-基礎數(shù)據標準調研調研分析業(yè)務字段源業(yè)務系統(tǒng)分析調研記錄整合層模型數(shù)據質量反饋主題實體屬性實體屬性實體屬性代碼主題實體屬性實體屬性實體屬性地址主題實體屬性實體屬性實體屬性渠道主題實體屬性實體屬性實體屬性財務主題實體屬性實體屬性實體屬性事件主題實體屬性實體屬性實體屬性當事人資產主題實體屬性實體屬性實體屬性產品主題實體屬性實體屬性實體屬性協(xié)議主題實體

33、屬性實體屬性實體屬性當事人主題實體屬性實體屬性實體屬性源系統(tǒng)表名字段名業(yè)務含義業(yè)務規(guī)則業(yè)務描述是否代碼對應主題對應實體對應屬性核心客戶信息客戶名稱否xxxxxxxxxxxxxxxxxxxx實體屬性信貸管理貸款客戶信息貸款客戶名稱否xxxxxxxxxxxxxxxxxxxx客戶對公客戶對公客戶名稱核心貸款分戶賬表貸款余額否xxxxxxxxxxxxxxxxxxxx協(xié)議協(xié)議金額表貸款余額信貸管理貸款借據表貸款余額否xxxxxxxxxxxxxxxxxxxx信貸管理貸款展期臺賬貸款方式是xxxxxxxxxxxxxxxxxxxx協(xié)議貸款展期信息表抵押方式協(xié)議貸款信息表貸款方式信貸管理貸款基本信息貸款方式是x

34、xxxxxxxxxxxxxxxxxxxXXXXXXXXXXXXxxxxxxxxxxxxxxxxxxxxXXXXXXXXXXXX模型匹配整合1、名稱不同，業(yè)務含義相同2、名稱相同，業(yè)務相同3、名稱相同，業(yè)務含義不相同第69頁，共93頁。目標建設方法-數(shù)據標準-基礎數(shù)據標準框架梳理源系統(tǒng)表名字段名是否代碼.業(yè)務含義業(yè)務描述業(yè)務規(guī)則對應主題對應實體對應屬性基礎數(shù)據標準框架梳理篩選保留重命名分類整合合并參考補充分析調研記錄協(xié)議xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx協(xié)議貸款貸款余額xxxxxxxxxxxxxx信貸管理xxxxxxxxxxx標準分類標準主題標準中文名

35、稱標準英文名稱標準依據相關標準標準管理部門業(yè)務規(guī)則業(yè)務描述數(shù)據類型長度業(yè)務含義源系統(tǒng)數(shù)據格式客戶對共客戶客戶名稱xxxxxxxxxx信貸管理xxxxxxxxx協(xié)議賬戶合同貸款賬戶存款賬戶參考：1、同業(yè)標準體系框架2、TD模型的結構與分類第70頁，共93頁。目標建設方法-數(shù)據標準-基礎數(shù)據標準定義及確認xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx標準分類標準中文名稱標準信息類業(yè)務規(guī)則業(yè)務描述數(shù)據類型長度標準依據相關標準標準英文名稱業(yè)務含義源系統(tǒng)標準管理部門數(shù)據格式xxxxxxxxxxxx

36、xxxxxxxxxxxxxxxxx代碼標準方案技術人員業(yè)務人員整合.定義補充.完善補充.完善溝通.確認技術部分業(yè)務部分基礎數(shù)據標準溝通.確認基礎數(shù)據標準化方案第71頁，共93頁。目標建設方法-基礎標準-制定框架 基礎數(shù)據標準框架屬性參考人民銀行標準規(guī)范文檔和他行標準，由3部分22個屬性項組成，分別為業(yè)務屬性、技術屬性、管理屬性。第72頁，共93頁。目標建設方法-基礎標準-指標標準建設思路第73頁，共93頁。目標建設方法-基礎標準-指標標準篩選方法經營管理資料：行領導講話我行各業(yè)務部門的業(yè)務經營分析報告我行的各類管理報表篩選原則：反映我行規(guī)模、風險、盈利、業(yè)務增長等各方面業(yè)務狀況的典型指標口徑穩(wěn)

37、定不易變化的指標外部資料：同業(yè)相關建設資料城商行銀行國有銀行建設銀行人民銀行、銀監(jiān)會監(jiān)管指標要求篩選原則：監(jiān)管部門有強制監(jiān)管要求的指標同業(yè)用到，與我行業(yè)務有關的指標篩選、確認方式：項目組內部討論篩選外部需求調研，進行補充和確認第74頁，共93頁。目標建設方法-基礎標準-指標標準框架制定方法設計依據：指標的業(yè)務共性的歸納及提煉參考行內資料我行業(yè)務分類源業(yè)務系統(tǒng)操作手冊及業(yè)務簡介文檔統(tǒng)計集中系統(tǒng)指標分類參考外部資料監(jiān)管部門的管指標及指標分同業(yè)相關資料的指標分類設計原則分類體系覆蓋篩選出的所有業(yè)務指標，并能為每個指標確定唯一的分類易于根據業(yè)務和指標變化進行擴展設計依據：人民銀行JRT 0105-20

38、14銀行數(shù)據標準定義規(guī)范外部資料設計原則：可以從業(yè)務、技術、管理不同角度對標準進行全面定義對指標標準必須清晰、明確滿足未來對滿足標準進行管理的需要第75頁，共93頁。目標建設方法-基礎標準-指標數(shù)據標準框架指標數(shù)據標準框架業(yè)務屬性技術屬性管理屬性指標中文名稱指標英文名稱指標范圍類別計算公式業(yè)務規(guī)則相關指標標準是否手工錄入顯示精度指標落地系統(tǒng)數(shù)據來源系統(tǒng)數(shù)據源表數(shù)據格式度量單位取值范圍歸口業(yè)務部門業(yè)務負責人技術負責人反饋結果描述指標編碼指標別名指標定義指標大類指標小類指標來源口徑明細取數(shù)口徑相關基礎類數(shù)據標準指標生成頻度取值精度第76頁，共93頁。指標應用-高管駕駛艙指標總覽主駕駛艙經營概覽專項

39、分析熱點地圖 從經營概況到具體指標分析今日快報全行7項核心業(yè)務指標的展現(xiàn)和分析最重要3項監(jiān)管指標進行展現(xiàn)和分析指標總覽按分類展現(xiàn)全部指標的本期值及與往期的比較值的列表經營概覽對某一具體指標進行比較、結構、趨勢等方面的分析專項分析從業(yè)務角度對一組反映類似業(yè)務的指標進行分析熱點地圖顯示全國地圖，可以展示各一級分行重要的經營簡報數(shù)據我的指標規(guī)模分析利潤分析風險分析主駕駛艙選取13個行領導重點關注的指標展示我的指標根據用戶對指標的重視程度，實現(xiàn)指標的個性化定制功能簡介第77頁，共93頁。指標應用-高管駕駛艙-界面截圖第78頁，共93頁。數(shù)據平臺項目建設目標第79頁，共93頁。數(shù)據倉庫層次架構主題主題是

40、模型按業(yè)務劃分的最頂層的分類根據我行業(yè)務實際，劃分10個業(yè)務主題邏輯視圖（子主題） 邏輯視圖是根據實體涉及的業(yè)務，將實體劃分為不同子集同一實體可屬于不同邏輯視圖實體實體是一組具有業(yè)務相關性的屬性組成的集合，是描述和構成業(yè)務邏輯、業(yè)務流程的基本單位一個實體可能涉及多類業(yè)務屬性模型最明細一級結構對應具體的業(yè)務數(shù)據項（字段）主題邏輯視圖實體屬性共性提煉分類分層第80頁，共93頁。數(shù)據倉庫層次架構風險評級當事人主題當事人主題當事人主題當事人主題當事人主題內部機構對公客戶對公客戶信息對公客戶管理信息不良貸款信息對公客戶領導信息對公客戶資本金構成財務信息客戶名稱所屬領域注冊資本企業(yè)規(guī)模法人代表基本賬戶開戶

41、行機構信息第81頁，共93頁。數(shù)據倉庫模型設計方法TD模型業(yè)務剪裁保留與我行業(yè)務有關的主題、實體和屬性刪除與我 行業(yè)務無關的主題、實體和屬性根據我行業(yè)務實際需求對主題進行新增和合并邏輯模型設計復制：系統(tǒng)間業(yè)務含義、名稱均不重復的字段整合：系統(tǒng)間業(yè)務含義相同的多個字段拆分：系統(tǒng)間業(yè)務含義不同，名稱相同的多個字段物理模型設計當前業(yè)務及數(shù)據都支持的實體進行理化當前業(yè)務不支持或數(shù)據不支持的不進行物理化模型映射第82頁，共93頁。目標的建設方法-數(shù)據倉庫模型框架整合層模型設計-基礎模型（業(yè)務匹配） 基礎模型是TD模型在我行進行初步客戶化后的產物。 將TD模型的主題和實體，與我行的實際業(yè)務行的實際業(yè)務進行

42、對比分析，根據匹配結果對TD模型進行裁剪、合并和擴充，形成匹配我行實際業(yè)務的情況的模型框架。營銷主題當事人主題Teradata金融模型10.0當事人資產主題產品主題事件主題協(xié)議主題地址主題渠道主題內部組織主題財務主題基礎模型我行無關業(yè)務我行現(xiàn)有關務我行未來關務我行現(xiàn)有業(yè)務我行無關業(yè)務我行未來業(yè)務對公客戶合同機構個人業(yè)務營銷活動保險投資合并當事人主題當事人主題保留內部組織主題營銷主題保留增加當事人資產主題產品主題事件主題協(xié)議主題地址主題渠道主題財務主題代碼主題數(shù)據質量反饋業(yè)務匹配第83頁，共93頁。目標的建設方法-數(shù)據倉庫模型框架整合層模型設計-屬性匹配 對源業(yè)務系統(tǒng)的字段進行梳理分析，篩選出具

43、體業(yè)務價格的字段，將業(yè)務字段與基礎模型的主題、實體和屬性進行匹配分析，根據匹配結果對基礎模型的實體、屬性進行增刪。實體屬性基礎模型源業(yè)務系統(tǒng)業(yè)務字段分析匹配?新增屬性實體屬性保留（整合）并映射新增并映射？溝通確認未來業(yè)務相關則邏輯化保留未來業(yè)務無關則刪除數(shù)據倉庫模型數(shù)據質量反饋主題實體屬性實體屬性實體屬性代碼主題實體屬性實體屬性實體屬性地址主題實體屬性實體屬性實體屬性渠道主題實體屬性實體屬性實體屬性財務主題實體屬性實體屬性實體屬性事件主題實體屬性實體屬性實體屬性當事人資產主題實體屬性實體屬性實體屬性產品主題實體屬性實體屬性實體屬性協(xié)議主題實體屬性實體屬性實體屬性當事人主題實體屬性實體屬性實體屬

44、性第84頁，共93頁。邏輯模型設計-主題劃分當事人資產渠道財務產品地域協(xié)議事件代碼當事人第85頁，共93頁。邏輯模型設計-當事人主題當事人是一個獨立的人或者一組人組成的機構、團體等，主要分為個人、機構和家庭，他們是和我行有往來或者出于營銷、管理等各種需要希望關心和分析的個體或人群。從模型角度考慮，應該包括以下當事人信息：在我行登記注冊開立賬戶的對公普通客戶；我行擔?？蛻艉臀倚杏袠I(yè)務往來的其他金融機構；機構的內部組織（如分支機構、部門等）；機構的員工（含我行柜員、員工等）；個人信息聯(lián)系信息關聯(lián)信息財務信息風險信息評價信息集團信息柜員信息公司信息內部機構外部機構糧棉油對全行客戶進行統(tǒng)一識別與數(shù)據整

45、合當事人個人當事人家庭機構內部員工柜員外部組織機構內部機構金融 機構（同業(yè)）對公客戶其它內部組織金融機構內部組織協(xié)議地址產品當事人渠道反饋域財務事件當事人資產代碼邏輯模型第86頁，共93頁。邏輯模型設計-代碼主題代碼：是指將源業(yè)務系統(tǒng)所涉及到的所有代碼進行整合，在整合層模型中統(tǒng)一存儲，依據前端應用需求的需要，將代碼主題的整合分為兩大類：簡單代碼表和復雜代碼表，簡單代碼表指的是只需要關注代碼值和代碼值業(yè)務含義描述；復雜代碼表指的應用需求除關注代碼值和代碼值業(yè)務含義描述外，該代碼表的其他屬性也有應用需求，同樣需要關注，這樣的碼表將作為普通的數(shù)據表對待；自定義代碼，是屬于簡單碼表的一種。簡單碼表復雜

46、碼表自定義代碼分類模式編碼表當事人類代碼表公共類代碼表分類模式枚舉值編碼表協(xié)議類代碼表資產類代碼表源和目標代碼映射關系表事件類代碼表財務類代碼表對全行業(yè)務代碼進行統(tǒng)一識別代碼當事人類代碼表事件類代碼表分類模式枚舉值編碼表源和目標代碼映射關系表公共類代碼表協(xié)議類代碼表分類模式編碼表協(xié)議地址產品當事人渠道反饋域財務事件當事人資產代碼邏輯模型第87頁，共93頁。邏輯模型設計-協(xié)議主題協(xié)議地址產品當事人渠道反饋域財務事件當事人資產代碼協(xié)議是指金融機構與當事人之間針對某種特定產品或服務而簽立的契約關系，如賬戶、客戶和銀行簽訂的合同等。當金融機構與客戶之間針對某種產品或服務的條款和條件達成協(xié)議時，一個協(xié)議

47、（Agreement）就會被開立，因此協(xié)議是客戶和銀行往來的重要載體，我行模型包括以下協(xié)議信息：我行涉及金額、期限、利率等的具體協(xié)議細項的金融賬戶我行與當事人之間針對某種特定產品或服務而簽立的金融合約我行在支付結算業(yè)務中使用到的各種銀行票據：匯票貸款帳戶存款帳戶貸款合同抵押合同質押合同貸款借據國際結算銀行本票銀行匯票其他信息銀行承兌匯票客戶理財簽約 銀行與客戶之間針對某種特定產品或服務而簽立的契約關系，將所有協(xié)議和關系，整合和歸并協(xié)議金融賬戶申請金融合約貸款賬戶銀行票據存款賬戶內部賬戶貸款類合約邏輯模型抵質押合同貸款借據項目額度申請貸款申請項目貸款貸款合同抵質押合同押品信息借據還款計劃第88頁，共93頁。邏輯模型設計-事件主題事件：可以記錄各種與銀行相關的活動的詳細情況。既可以與資金相關，也可以與資金無關；既可以有客戶參與，也可以沒有客戶參與；既可以與帳戶相關，也