案例名稱
符合中小銀行質量提升的數據治理方案
案例簡介
在數字化轉型的驅動和數據治理“嚴監管”的推動下,為解決金融機構數據治理體系不健全、數據質量低下等問題,利用數據治理成熟度評估模型進行問題分析定位,重點圍繞數據規劃、組織機制、標準建設以及數據類平臺建設等方面進行數據質量提升。通過應用實踐,總結歸納形成全生命周期的數據治理體系,從平臺、標準、管理、質量四大方面應用技術手段有效提升金融數據質量和統計報送質量,且對其他中小銀行具有一定的參考性和可復用性。
創新技術/模式應用
1.1 應用工具做好規劃,建立金融數據管理提升路徑
1.1.1 數據治理成熟度評估模型
圖1 數據治理框架
1.2 機制和管理先行,為質量提升提供制度保障
1.2.1 組織架構和制度建設
圖2 數據治理組織架構
1.2.2 標準建設
標準建設主要包括技術標準、指標標準和指標口徑建設。
·詞根:使用金融行業常用英文縮寫,保證技術和業務也能通過字段名理解字段含義。
圖3 數據平臺詞根
·數據字典:包括碼值、字段長度等各類技術說明,保證數據開發人員使用數據的來源一致性。
圖4 數據字典
·模型規范:建設9大主題模型,將數據進行有效歸類,實現數據開發人員的快速入手。
圖5 主題模型分類
·開發規范:形成統一開發,保證技術平臺和底層代碼的一致性,降低維護成本和學習成本。
·指標標準:形成行業規范標準,標注規范來源,實現與監管要求一致。
圖6 指標標準
·指標口徑:實現技術口徑和業務口徑的統一管理,降低業務和技術的門檻。
圖7 指標口徑
1.3 夯實系統功能,實現數據全面管控提升報送質量
1.3.1 數據平臺建設
數據平臺包括數據開發平臺、數據基礎平臺、數據模型三部分。
·數據開發平臺
根據詞根和數據開發規范等建立統一的可視化、組件化、流程化的數據開發平臺,實現代碼線上化管理模式。
圖8 數據開發模板
·基礎平臺建設
數據平臺采用Hadoop作為底層基礎,搭配hdfs、yarn等基礎組件實現數據存儲、計算等功能,為海量數據的存儲和計算提供了高性能的平臺基礎。
圖9 數據平臺基礎架構
·數據平臺模型
數據平臺模型保證了數據開發、數據存儲、數據計算的統一,形成了標準化的流程模型。
圖10 數據模型架構
1.3.2 數據治理平臺建設
數據治理平臺涵蓋元數據采集、數據標準管理、數據血緣管理到數據質量監控等數據全生命周期的管理。
圖11 數據治理平臺
1.3.3 指標平臺建設
指標管理平臺實現指標線上流程化管理、指標的統一存儲和共享、血緣關系追蹤。
圖12 指標平臺
1.3.4 統一報送平臺建設
統一報送平臺支持業務數據的統一補錄核對和復雜的信息檢索,實現各類監管報送的統一登錄、統一整合、統一指標、統一展現、統一管理,進行監管報送集中管理。
項目效果評估
通過實踐經驗,形成了數據平臺、數據治理平臺、統一報送平臺的建設方案,并將開發規范納入數據治理標準體系建設,應用大數據和人工智能技術實現數據全流程管控,歸納總結形成數據治理體系方案。
1、數據質量的提升和金融統計質量的提升
一、根據數據治理成熟度評估模型應用方法以及調查問卷信息,通過組織、機制、流程和平臺建設,確保數據治理流程在系統中有序的開展,有規劃性地提升開發質量。
二、通過數據治理平臺質量監控實現源頭數據的提升,實現客戶信息和交易的質量提升,確保證件號碼與各類信息區域的一致性,地址與區域的統一管理等,使質量提升有了抓手。
三、提升源頭數據質量、建立各類交叉、勾稽校驗規則,為金融統計在行業分類、涉農、科目產品分類等方面的質量提升提供了技術和數據的保證,實現了金融統計工作的提質增效。
四、全面梳理各報表口徑,將“口口相傳”的統計口徑梳理成對應的技術語言,落地到指標;建立全面、完整的指標體系,實現數據的共用共享。
2、金融數據治理方案可復用性
鄞州銀行的現狀與大部分中小銀行所處的階段基本一致,從數據管理到平臺建設的方案符合中小銀行的數據治理訴求,可復制推廣到其他金融機構,從而提升數據質量。整體數據治理方案主要包括制度、標準和平臺建設、涵蓋數據治理的全流程管控,盡可能的通過技術手段去發現數據質量問題,從而降低人員的人力投入。
3、可視化展示實現業務數據的理解
傳統銀行的分析系統,存在“煙囪式”架構,獨立的登錄界面和用戶管理,導致數據和分析成果無法共享。同時業務人員過度依賴技術人員實現分析需求,導致效率太低,相似需求不斷重復,數據的利用率也不夠。通過建設數據平臺和統一報送平臺,將基礎數據和匯總數據進行了全面的整合,實現數據的共用共享,業務人員可通過一個平臺實現可拖拉拽的功能,從匯總指標到數據明細進行自主的數據分析和挖掘,一方面可以更快地核對數據,另一方面,可以更加高效地為經營管理提供數據支撐。
項目牽頭人
許曉杰 科技部副總/大數據管理部總經理
項目團隊成員
邵杰、鄭嘎、童月飛、王彭林、黃炎
責任編輯:王超
免責聲明:
中國電子銀行網發布的專欄、投稿以及征文相關文章,其文字、圖片、視頻均來源于作者投稿或轉載自相關作品方;如涉及未經許可使用作品的問題,請您優先聯系我們(聯系郵箱:cebnet@cfca.com.cn,電話:400-880-9888),我們會第一時間核實,謝謝配合。