鋼鐵行業(yè)數(shù)據(jù)治理架構(gòu)建設(shè)實(shí)踐
發(fā)布時(shí)間：2023-03-20 www.xstr.xyz
1 引言
中國(guó)寶武鋼鐵集團(tuán)有限公司(簡(jiǎn)稱“中國(guó)寶武”)是一家以鋼鐵行業(yè)為主、多行業(yè)為輔多元化發(fā)展的企業(yè)，旗下分子公司遍布全國(guó)，各自擁有海量的數(shù)據(jù)。其數(shù)據(jù)以鋼鐵或相關(guān)生產(chǎn)、管理數(shù)據(jù)為主，在傳統(tǒng)鋼鐵領(lǐng)域內(nèi)的L1—L5的架構(gòu)中，生產(chǎn)數(shù)據(jù)以金字塔形分布，數(shù)據(jù)之間關(guān)聯(lián)不多，數(shù)據(jù)統(tǒng)一化程度弱。各子公司信息化系統(tǒng)繁多，相互之間層級(jí)關(guān)系復(fù)雜，關(guān)聯(lián)關(guān)系交錯(cuò)，層次關(guān)系不分明，相互引用情況時(shí)有發(fā)生，且又有不少系統(tǒng)孤島形式存在，數(shù)據(jù)標(biāo)準(zhǔn)化程度很低，導(dǎo)致數(shù)據(jù)相互使用起來(lái)難度大，查找困難，難以發(fā)揮價(jià)值。因此迫切需要一個(gè)可解決這些難點(diǎn)的方法，面對(duì)這些難點(diǎn)，以數(shù)據(jù)標(biāo)準(zhǔn)體系為核心的的數(shù)據(jù)治理架構(gòu)應(yīng)運(yùn)而生。
2 數(shù)據(jù)治理架構(gòu)建設(shè)
2.1 數(shù)據(jù)治理理論基礎(chǔ)
數(shù)據(jù)治理在國(guó)外有著較為成熟的模型、體系，例如數(shù)據(jù)管理成熟度模型(DMM)、DAMA體系等。國(guó)內(nèi)公認(rèn)數(shù)據(jù)治理模型——數(shù)據(jù)管理能力成熟度評(píng)估模型(簡(jiǎn)稱“DCMM”)，于2018年正式發(fā)布，成為中國(guó)寶武開(kāi)展數(shù)據(jù)治理的理論基礎(chǔ)。
DCMM模型由8個(gè)數(shù)據(jù)管理能力域組成，它為廣義的數(shù)據(jù)治理工作劃定了范圍。但模型本身無(wú)法直接落地，需要企業(yè)自行構(gòu)建適合自己的數(shù)據(jù)治理架構(gòu)，明確數(shù)據(jù)管理具體執(zhí)行方法，把數(shù)字化轉(zhuǎn)型工作落到實(shí)處。
2.2 鋼鐵行業(yè)數(shù)據(jù)治理架構(gòu)
數(shù)據(jù)治理在鋼鐵行業(yè)的大數(shù)據(jù)中心全面應(yīng)用還屬于初級(jí)階段。中國(guó)寶武逐步開(kāi)展數(shù)字化轉(zhuǎn)型，初建數(shù)據(jù)治理規(guī)范體系解決如何用好數(shù)據(jù)的問(wèn)題，必須著力于一個(gè)核心焦點(diǎn)。中國(guó)寶武選擇了核心數(shù)據(jù)管理能力域：數(shù)據(jù)標(biāo)準(zhǔn)作為數(shù)據(jù)治理核心。以數(shù)據(jù)標(biāo)準(zhǔn)為主線，將之作為數(shù)據(jù)架構(gòu)、使用的基礎(chǔ)，同時(shí)將元數(shù)據(jù)結(jié)構(gòu)標(biāo)準(zhǔn)化，將它們貫穿數(shù)據(jù)生存周期始終，形成數(shù)據(jù)治理架構(gòu)的主體，輔以數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全，形成完整的中國(guó)寶武數(shù)據(jù)治理架構(gòu)如圖1所示。
圖 1 以數(shù)據(jù)標(biāo)準(zhǔn)體系為核心的數(shù)據(jù)治理架構(gòu)
中國(guó)寶武第一階段選擇治理的數(shù)據(jù)標(biāo)準(zhǔn)包括：業(yè)務(wù)術(shù)語(yǔ)標(biāo)準(zhǔn)、數(shù)據(jù)元標(biāo)準(zhǔn)、指標(biāo)標(biāo)準(zhǔn)、維度標(biāo)準(zhǔn)、數(shù)據(jù)分類標(biāo)準(zhǔn)、數(shù)據(jù)分層標(biāo)準(zhǔn)。
2.3 鋼鐵行業(yè)數(shù)據(jù)治理核心
DCMM模型中，數(shù)據(jù)標(biāo)準(zhǔn)能力域包括4項(xiàng)子域，分別為：業(yè)務(wù)術(shù)語(yǔ)、參考數(shù)據(jù)和主數(shù)據(jù)、數(shù)據(jù)元、指標(biāo)數(shù)據(jù)。中國(guó)寶武大數(shù)據(jù)中心施行的數(shù)據(jù)標(biāo)準(zhǔn)在此基礎(chǔ)上進(jìn)行了大幅修改，現(xiàn)階段不僅設(shè)立了業(yè)務(wù)術(shù)語(yǔ)、數(shù)據(jù)元、指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)，而且將這3個(gè)標(biāo)準(zhǔn)的范圍進(jìn)行適當(dāng)修改容納更多的標(biāo)準(zhǔn)內(nèi)容，還將其他可標(biāo)準(zhǔn)化管理的內(nèi)容一律用數(shù)據(jù)標(biāo)準(zhǔn)的方式進(jìn)行管理，最終形成適合鋼鐵行業(yè)使用的數(shù)據(jù)標(biāo)準(zhǔn)體系。
(1)擴(kuò)展業(yè)務(wù)術(shù)語(yǔ)，形成術(shù)語(yǔ)標(biāo)準(zhǔn)和字根標(biāo)準(zhǔn)。中國(guó)寶武大數(shù)據(jù)中心數(shù)據(jù)標(biāo)準(zhǔn)將DCMM的業(yè)務(wù)術(shù)語(yǔ)標(biāo)準(zhǔn)范圍擴(kuò)大，形成術(shù)語(yǔ)標(biāo)準(zhǔn)。術(shù)語(yǔ)標(biāo)準(zhǔn)中涵蓋了業(yè)務(wù)術(shù)語(yǔ)、技術(shù)術(shù)語(yǔ)、管理術(shù)語(yǔ)及通用術(shù)語(yǔ)4類術(shù)語(yǔ)，術(shù)語(yǔ)標(biāo)準(zhǔn)分別收集了各門類下的國(guó)標(biāo)、行標(biāo)、集團(tuán)內(nèi)部自定義的術(shù)語(yǔ)及術(shù)語(yǔ)描述。在集團(tuán)內(nèi)部建立大數(shù)據(jù)相關(guān)統(tǒng)一的語(yǔ)義，確保達(dá)成一致的認(rèn)知，降低因理解差異和被相互理解錯(cuò)誤導(dǎo)致的風(fēng)險(xiǎn)。在業(yè)務(wù)術(shù)語(yǔ)、技術(shù)術(shù)語(yǔ)的基礎(chǔ)上，還形成了字根標(biāo)準(zhǔn)。字根標(biāo)準(zhǔn)不僅規(guī)范了中文詞語(yǔ)、短句的定義，還在語(yǔ)義理解、英語(yǔ)定義，尤其是英語(yǔ)縮略語(yǔ)定義上進(jìn)行了標(biāo)準(zhǔn)化，含義一致或接近的對(duì)象都統(tǒng)一使用一個(gè)英語(yǔ)縮略語(yǔ)進(jìn)行定義。此類標(biāo)準(zhǔn)是基礎(chǔ)標(biāo)準(zhǔn)，成為大數(shù)據(jù)中心內(nèi)首批建成的數(shù)據(jù)標(biāo)準(zhǔn)。
(2)依托字根標(biāo)準(zhǔn)，形成數(shù)據(jù)元標(biāo)準(zhǔn)。數(shù)據(jù)元可用獨(dú)立定義的方式標(biāo)準(zhǔn)化，但是中國(guó)寶武大數(shù)據(jù)中心建有字根標(biāo)準(zhǔn)，可使用字根標(biāo)準(zhǔn)，讓字根成為數(shù)據(jù)元標(biāo)準(zhǔn)的原子，根據(jù)使用者的需求，排列組合成數(shù)據(jù)元標(biāo)準(zhǔn)。這樣形成的數(shù)據(jù)元標(biāo)準(zhǔn)更規(guī)范、更精確，減少語(yǔ)義重復(fù)語(yǔ)義相近導(dǎo)致的數(shù)據(jù)元數(shù)量爆發(fā)的情況。
(3)結(jié)合指標(biāo)標(biāo)準(zhǔn)和維度標(biāo)準(zhǔn)。中國(guó)寶武大數(shù)據(jù)中心使用維度建模方式，與DCMM融合，建立了完整的指標(biāo)標(biāo)準(zhǔn)和維度標(biāo)準(zhǔn)。首先，將指標(biāo)分為技術(shù)指標(biāo)和業(yè)務(wù)指標(biāo)兩大類，每一類都可分為：原子指標(biāo)、派生指標(biāo)和復(fù)合指標(biāo)。其次，把所有指標(biāo)進(jìn)行拆分，提取出不可拆分的有業(yè)務(wù)含義的指標(biāo)定義成原子指標(biāo)。然后用維度對(duì)指標(biāo)進(jìn)行限定，組合成派生指標(biāo)，或者對(duì)原子、派生指標(biāo)進(jìn)行計(jì)算，形成復(fù)合指標(biāo)。這些指標(biāo)將成為大數(shù)據(jù)中心的核心價(jià)值。
(4)建立數(shù)據(jù)分類標(biāo)準(zhǔn)。在識(shí)別出數(shù)據(jù)核心價(jià)值之后，需要解決如何讓使用者使用數(shù)據(jù)的問(wèn)題，需要一種辦法讓使用者輕易找到想要的數(shù)據(jù)。針對(duì)這個(gè)需求，制定了數(shù)據(jù)分類標(biāo)準(zhǔn)，用分類的方式展示數(shù)據(jù)資產(chǎn)。數(shù)據(jù)分類方式可以有多種，歸根結(jié)底都是將擁有近似屬性或特征的數(shù)據(jù)歸攏到一個(gè)分類中，各分類之間相互獨(dú)立。按使用者角度，數(shù)據(jù)可按業(yè)務(wù)領(lǐng)域分類，可按工藝流程、組織機(jī)構(gòu)分類。默認(rèn)可用一種方式展示數(shù)據(jù)，其他的類型供候選。
(5)建立統(tǒng)一的參考數(shù)據(jù)和主數(shù)據(jù)標(biāo)準(zhǔn)。中國(guó)寶武內(nèi)部子公司曾建有代碼管理系統(tǒng)，管理了生產(chǎn)過(guò)程中的工藝代碼，但是這些代碼相互之間不統(tǒng)一，需要一個(gè)統(tǒng)一的參考數(shù)據(jù)標(biāo)準(zhǔn)將它們統(tǒng)一化。以往的代碼系統(tǒng)中管理的代碼范圍較小，難以滿足數(shù)據(jù)建設(shè)的需要，所以擴(kuò)大范圍建成統(tǒng)一的參考數(shù)據(jù)標(biāo)準(zhǔn)成了數(shù)據(jù)標(biāo)準(zhǔn)化過(guò)程中“排頭兵”。主數(shù)據(jù)管理的范圍特別大，數(shù)據(jù)中心建設(shè)初期不建議大規(guī)模鋪開(kāi)，出具規(guī)則由各業(yè)務(wù)系統(tǒng)自行管理。
(6)其他數(shù)據(jù)標(biāo)準(zhǔn)?？蓸?biāo)準(zhǔn)化的數(shù)據(jù)種類非常多，為適應(yīng)鋼鐵行業(yè)的數(shù)據(jù)特征，還創(chuàng)建了數(shù)據(jù)分層標(biāo)準(zhǔn)、質(zhì)量標(biāo)準(zhǔn)、業(yè)務(wù)板塊標(biāo)準(zhǔn)、缺陷標(biāo)準(zhǔn)等多種類型的標(biāo)準(zhǔn)。
2.4 數(shù)據(jù)治理架構(gòu)整合
在數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)外，中國(guó)寶武還引用了其他能力域。元數(shù)據(jù)管理是數(shù)據(jù)管理的重要能力之一，中國(guó)寶武為各類數(shù)據(jù)標(biāo)準(zhǔn)分別建立對(duì)應(yīng)的元數(shù)據(jù)標(biāo)準(zhǔn)，形成統(tǒng)一的數(shù)據(jù)字典，建立了數(shù)據(jù)標(biāo)準(zhǔn)管理的結(jié)構(gòu)體系，確保了數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一規(guī)劃。
在以數(shù)據(jù)標(biāo)準(zhǔn)為主線，元數(shù)據(jù)與數(shù)據(jù)標(biāo)準(zhǔn)結(jié)合為數(shù)據(jù)治理主體的數(shù)據(jù)治理架構(gòu)構(gòu)建中，還需要結(jié)合數(shù)據(jù)架構(gòu)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生存周期、數(shù)據(jù)應(yīng)用等其他能力，搭建成完整的符合鋼鐵行業(yè)需求的數(shù)據(jù)治理規(guī)范體系，為鋼鐵行業(yè)大數(shù)據(jù)中心建設(shè)和數(shù)據(jù)治理邁出堅(jiān)實(shí)的一步。
3 結(jié)語(yǔ)
隨著大數(shù)據(jù)時(shí)代的發(fā)展和進(jìn)步，企業(yè)數(shù)字化轉(zhuǎn)型已經(jīng)變得越來(lái)越重要。不同的行業(yè)都在逐步根據(jù)自身發(fā)展的需求推進(jìn)數(shù)據(jù)治理的進(jìn)程。中國(guó)寶武在以數(shù)據(jù)標(biāo)準(zhǔn)體系為核心的大數(shù)據(jù)中心建設(shè)及數(shù)據(jù)治理工作上取得一定的進(jìn)展，通過(guò)了DCMM4級(jí)評(píng)審，在數(shù)據(jù)標(biāo)準(zhǔn)化、賦能業(yè)務(wù)發(fā)展、提升數(shù)據(jù)價(jià)值上也獲得了初步的成效。中國(guó)寶武的經(jīng)驗(yàn)可成為鋼鐵行業(yè)的標(biāo)桿做法，能夠發(fā)揮大企業(yè)引領(lǐng)支撐作用，不僅在集團(tuán)內(nèi)部使用，也可與其他鋼企共建共享，甚至可以與上下游企業(yè)連通，共建立體的數(shù)字化鋼鐵生態(tài)圈。