天天看點

淺談資料标準體系建設

引言

中國銀行保險監督管理委員會為指導銀行業金融機構加強資料治理,提高資料品質,發揮資料價值,提升經營管理能力,于2018年5月21日頒布了《銀行業金融機構資料治理指引》,共7章55條。其中與資料标準、資料字典、資料共享、資料品質及資料名額等資料管控平台建設相關的有12條法規條文,資料标準體系的建立是資料治理中的基礎性工作。今天和大家探讨一下如何建立資料标準體系并且持續維護和管理資料标準。

淺談資料标準體系建設

資料标準定義

2014年3月中國人民銀行釋出了金融行業标準:《銀行資料标準定義規範》,對資料标準定義和内容作了規範:“資料标準是對資料的表達、格式及定義的一緻約定,包含資料業務屬性、技術屬性和管理屬性的統一定義”。

業務屬性包括中文名稱、業務定義、業務規則等,技術屬性包括資料類型、資料格式等,管理屬性包括資料定義者、資料管理者等。用以確定各種重要資訊在共同使用和交換中的準确性、完整性和一緻性,是資料品質管理的基礎。

資料标準體系建設前提條件

1.建構資料标準管理組織

資料标準體系建設需要得到企業高層的重視和支援,更需要企業的所有部門共同參與。形成高層決策、資料标準管理部門統籌、各部門參與的資料标準管理的長效機制。其中高層是資料标準化工作的最高決策機構,資料标準化工作小組負責組織推動企業資料标準化工作。

淺談資料标準體系建設

2.制定資料标準管理制度

制定相關資料标準管理辦法、細則等,從制度層面明确了在标準化工作中相關方的職責,建立了資料标準制定與釋出、落地執行流程、變更與複審機制,使資料标準在機制上得到保障。

淺談資料标準體系建設

标準體系建立過程

企業在進行資料标準制定和維護的過程中,經常遇到的困惑是:到底哪些資料要定義資料标準?

從業務領域出發,挖掘各個業務領域的資料治理需求,在有需求、有目标、有驅動力的前提下,企業按組織推進标準化工作。隻有業務部門的深入參與識别出業務自身需求才能做好标準的治理。

從核心資料開始,如外部監管要求、多個系統共用、企業資料分析類資料等,循序漸進的制定資料标準。

按系統進行标準落标,建立了資料标準體系後,按企業核心系統推動資料标準落地應用,在需求流程中實施資料标準的強管控。而技術部門使用标準化的資料字典進行模組化,實作資料字典标準化管理及應用,進而規範資料标準。對于建立系統與重構系統,應采用落标政策;而對于存量系統,可采用升标政策,不斷增加資料标準。

按資料标準進行資料品質檢核。針對資料治理過程中發現的重點、重要的資料品質問題,例如監管資料品質問題、資料多口徑問題、資料低時效問題等,通過資料标準中的業務規則、值域、資料類型、資料格式等配置資料品質檢核規則,從源頭消除資料不規範等問題,進而達到提升資料品質的目的。

資料标準規範的分類

在資料管理部門進行針對各種資料項的标準化過程中,結合實際工作情況,一般可以将标準規範分為兩類,一種是基礎資料标準,一種是名額資料标準,以兩類細分規範來進行更進一步的管理,為後續的各種資料管理工作提供便利。

(一)基礎資料标準,基礎标準是基于業務開展過程中直接産生的資料,未經過加工和處理的基礎業務資訊制定的标準化規範。

(二)名額資料标準,名額标準是指按使用場景分類,針對為滿足内部分析管理需要以及外部監管需求,對基礎類資料加工産生的名額資料制定的标準化規範。

基礎資料标準和名額數标準根據各自業務主題進行細分,應盡可能涵蓋企業的主要業務,并且覆寫企業生産系統中産生的所有業務資料。以銀行為例,基礎資料标準分為客戶資料标準、産品資料标準、協定資料标準、管道資料标準、交易資料标準、财務資料标準、公共代碼資料标準、機構員工資料标準、地域地點資料标準等。名額資料标準包括監管合規名額、客戶管理名額、風險管理資産負債名額、營銷管理名額、綜合經營名額等。

銀行業典型基礎資料标準和名額資料标準分類如圖:

淺談資料标準體系建設

資料标準的内容是在開展業務過程中所涉及的資料的特性。資料标準定義架構規定了資料标準的業務屬性資訊、技術屬性資訊、管理屬性資訊,可應用在企業的資料管控相關領域。

資料标準定義架構如圖:

淺談資料标準體系建設

業務屬性包括中文名稱、英文名稱、标準别名、業務定義、業務規則、代碼編碼規則、值域、标準依據、敏感度、相關标準、與相關标準的關系。

技術屬性包括資料類型、資料格式。

管理屬性包括标準編号、标準主題、資料制定人、标準定義部門、标準管理者、資料使用者、業務應用領域、使用系統、标準大類、标準子類、标準狀态。

資料标準定義架構中的每個具體屬性不是在所有情況下都是必須的,這些屬性被分為必選、條件選、可選幾種限制類型。屬性的限制類型由資料管控需求和環境決定,同一屬性,在不同發展時期,可以有更嚴格或者更寬松的限制類型。例如管理屬性中的“标準管理者”,根據目前資料管控環境規定為可選,未來可根據業務發展需求規定為更嚴格的條件選或者必選。

建設資料标準管理平台

資料标準管理平台為資料管理人員集中管理、展示和查詢資料标準的綜合性管理系統。資料标準管理平台的建設,必須符合資料标準管理的相關辦法,落實資料标準管理相關人員的職責,固化資料标準管理的流程規範。是企業資料标準制定、釋出、管理、查詢、執行的系統載體。資料标準管理平台提供儲存和處理資料标準内容,提供統一的資料标準管理與标準執行分析功能,為日後的企業各系統的資料标準化工作提供基礎。

結語

以上是筆者對在做資料标準化項目工作對資料标準體系的了解和自己的總結,資料标準化工作開展的企業中,絕大多數銀行因為業務系統過多,資料标準制定方法都是結合外部标準和監管要求以及同業實踐,在咨詢公司積累的初版基礎上進行修改和添加。對于一些系統比較少的企業筆者建議應先做資料資産梳理,編制資料資産目錄,全面梳理企業内部業務範圍和流程,以及伴随流程運轉過程中産生的資料項,對資料項進行分類歸并,進而提煉資料标準。本文對于資料标準化方法論沒有過多描述,有需要的也歡迎進一步溝通和交流。

上一篇: 感冒看看