企業(yè)數(shù)據(jù)質(zhì)量管理制度搭建
編輯導(dǎo)語:數(shù)據(jù)質(zhì)量問題是各種行業(yè)和企業(yè)在步入信息化數(shù)字階段后都會面臨的一個問題,那如何確保自己企業(yè)的數(shù)據(jù)質(zhì)量比較高呢?其中一個重要的保障措施就是頒布管理制度,本篇文章主頁闡述了數(shù)據(jù)管理制度有哪幾個關(guān)鍵部分,一起來看看吧。
無論是任何行業(yè)或者何種背景下的企業(yè),在步入信息化數(shù)字化階段后,都會面臨數(shù)據(jù)質(zhì)量問題。沒有一個組織擁有完美的業(yè)務(wù)流程、完美的技術(shù)流程或完美的數(shù)據(jù)管理實踐,所有組織都會遇到與數(shù)據(jù)質(zhì)量相關(guān)的問題。
相比那些不開展數(shù)據(jù)質(zhì)量管理的組織,實施正式數(shù)據(jù)質(zhì)量管理的組織碰到的問題會更少。如何確保自己企業(yè)的數(shù)據(jù)質(zhì)量比較高,或者是逐步提高,一個很重要的保障措施就是頒布管理制度。數(shù)據(jù)質(zhì)量管理制度需要包含數(shù)據(jù)質(zhì)量管理辦法,數(shù)據(jù)質(zhì)量管理規(guī)范,數(shù)據(jù)質(zhì)量績效考核方面的內(nèi)容。
值得大家注意的是,管理制度搭建的過程中,往往很難區(qū)分規(guī)范、辦法兩者之間的關(guān)系。
規(guī)范是指對于某一工程作業(yè)或者行為進(jìn)行定性的信息規(guī)定。主要是因為無法精準(zhǔn)定量而形成的標(biāo)準(zhǔn),所以相對籠統(tǒng)。
辦法是按照規(guī)范制度的要求提出具體可落地、可執(zhí)行的實施措施,所以一定是很具體可量化的細(xì)則。
我們在規(guī)范中可以強調(diào)數(shù)據(jù)的及時性,但是在具體的管理辦法中需要明確、量化及時性這一指標(biāo)概念。如:獲取數(shù)據(jù)后X個工作日內(nèi)錄入數(shù)據(jù),發(fā)生變更時X個工作日內(nèi)完成數(shù)據(jù)更新等。
細(xì)分來講,數(shù)據(jù)質(zhì)量管理制度應(yīng)該由以下幾個關(guān)鍵部分組成。
一、 規(guī)范定義
首先定義清楚什么樣的數(shù)據(jù)稱之為高質(zhì)量的數(shù)據(jù),高質(zhì)量數(shù)據(jù)并不是越高越好,因為學(xué)過質(zhì)量成本控制的都清楚,數(shù)據(jù)質(zhì)量并不存在絕對的,而只要滿足企業(yè)業(yè)務(wù)管理需要,即可認(rèn)為數(shù)據(jù)質(zhì)量達(dá)標(biāo)的數(shù)據(jù)。
還要明確什么樣的數(shù)據(jù)屬于數(shù)據(jù)質(zhì)量管理的范疇。比如核心,重要的數(shù)據(jù),所以識別關(guān)鍵數(shù)據(jù)重要數(shù)據(jù),并且還要確認(rèn)該類數(shù)據(jù)的生成規(guī)則和維護(hù)流程。
那達(dá)到什么程度才算高質(zhì)量呢?例如:確保數(shù)據(jù)的及時性,究竟怎么才算及時性,是獲取數(shù)據(jù)的時效?還是分發(fā)到下游的時效?還是接受數(shù)據(jù)的時效?
二、稽查監(jiān)控措施
- 針對我們已經(jīng)識別的數(shù)據(jù)及其對應(yīng)生成規(guī)則,我們需要確定稽查監(jiān)控的措施(提升數(shù)據(jù)質(zhì)量的關(guān)鍵是預(yù)防,而不是事后修正)
- 對于產(chǎn)生問題的錯誤數(shù)據(jù),我們?nèi)绾稳バ迯?fù)改正相應(yīng)流程
- 數(shù)據(jù)稽查的頻率和問題反饋頻率,以及反饋渠道或稽查工具平臺需要明確清楚
三、組織與職能
- 重點描述組織崗位對應(yīng)的職能,定義需要執(zhí)行遵守的數(shù)據(jù)質(zhì)量管理原則
- 各組織對數(shù)據(jù)質(zhì)量流程中的職責(zé)權(quán)利需要明確清楚,例如誰生產(chǎn),誰使用,誰負(fù)責(zé),誰改進(jìn)等權(quán)責(zé)
四、績效考核
評價標(biāo)準(zhǔn)需要量化。一般情況下,以單條數(shù)據(jù)為單位,通過數(shù)據(jù)質(zhì)量巡檢規(guī)則,從完整性、及時性、準(zhǔn)確性、一致性、唯一性、有效性等六個維度進(jìn)行檢查,根據(jù)計算規(guī)則得出各區(qū)域的數(shù)據(jù)質(zhì)量綜合得分。常見的數(shù)據(jù)質(zhì)量考核計算方法如下:
1)員工數(shù)據(jù)質(zhì)量綜合得分
以該員工錄入維護(hù)的相關(guān)數(shù)據(jù)質(zhì)量項為范圍,以數(shù)據(jù)質(zhì)量檢查項的單條數(shù)據(jù)質(zhì)量規(guī)則為檢查單元,先計算正確記錄數(shù)占比作為該條數(shù)據(jù)質(zhì)量規(guī)則對應(yīng)的得分,再加權(quán)計算該數(shù)據(jù)項的所有數(shù)據(jù)質(zhì)量規(guī)則得分作為該數(shù)據(jù)項的得分,最后取所有數(shù)據(jù)項得分的平均值作為員工的數(shù)據(jù)質(zhì)量綜合得分,計算過程及計算公式如下:
數(shù)據(jù)質(zhì)量規(guī)則得分=(1-數(shù)據(jù)質(zhì)量規(guī)則檢查的問題數(shù)/數(shù)據(jù)質(zhì)量規(guī)則檢查的總數(shù))*100
數(shù)據(jù)質(zhì)量規(guī)則的得分表(示例)
數(shù)據(jù)項的得分表(示例)
員工的得分表(示例)
2)團(tuán)隊數(shù)據(jù)質(zhì)量綜合得分
以該團(tuán)隊的全體成員為范圍,統(tǒng)計每個團(tuán)隊的數(shù)據(jù)質(zhì)量綜合得分,取所有項目得分的平均值作為該團(tuán)隊的綜合得分。
區(qū)域的得分表(示例)
統(tǒng)計各團(tuán)隊的綜合得分,并根據(jù)各團(tuán)隊的綜合得分從高到低進(jìn)行排名,由數(shù)據(jù)管理團(tuán)隊負(fù)責(zé)人進(jìn)行有效獎懲排名。如果對數(shù)據(jù)質(zhì)量評價結(jié)果有意見,可向數(shù)據(jù)管理團(tuán)隊提出。
團(tuán)隊數(shù)據(jù)質(zhì)量綜合評價表(示例)
五、附則—數(shù)據(jù)質(zhì)量衡量維度
在DAMA體系中,數(shù)據(jù)質(zhì)量維度是指數(shù)據(jù)的某個可測量的特性。國際上較為成熟的框架包括:Strong-Wang 框架、Redman的“可表示的三元組”還有Larry Englist的固有特征和實用特征。各個企業(yè)公司可以根據(jù)自身的業(yè)務(wù)場景、管控要求選擇不同的質(zhì)量維度框架,本篇文章只針對DAMA UK提出的六個核心維度進(jìn)行闡述解釋:
1)完整性
指數(shù)據(jù)在創(chuàng)建、傳遞過程中無缺失和遺漏。包括實體完整、屬性完整、記錄完整和字段值完整四個方面,完整性是數(shù)據(jù)質(zhì)量最基礎(chǔ)的評判維度。
2)及時性
指及時記錄和傳遞相關(guān)數(shù)據(jù),滿足業(yè)務(wù)對信息獲取的時間要求。數(shù)據(jù)交付的及時性,及時抽取、及時展現(xiàn),如果數(shù)據(jù)交付時間過長,可能導(dǎo)致分析結(jié)論失去參考意義。
3)準(zhǔn)確性
指真實、準(zhǔn)確記錄原始數(shù)據(jù),無虛假數(shù)據(jù)及信息,數(shù)據(jù)準(zhǔn)確反映其所建模的“真實世界”實體。例如:員工的身份信息必須與身份證件上的信息保持一致。
4)一致性
指遵守統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn),記錄和傳遞數(shù)據(jù)和信息,主要體現(xiàn)在數(shù)據(jù)記錄的規(guī)范和數(shù)據(jù)是否符合邏輯。例如:同一工號數(shù)據(jù)在不同系統(tǒng)的員工姓名不一致。
5)唯一性
指同一數(shù)據(jù)只能有唯一的標(biāo)識符。體現(xiàn)在一個數(shù)據(jù)集中,沒有實體多余一次出現(xiàn),并且每個唯一實體有一個鍵值且該鍵值只指向該實體。例如:員工有且僅有一個有效工號。
6)有效性
指數(shù)據(jù)的值、格式和展現(xiàn)形式符合數(shù)據(jù)定義和業(yè)務(wù)定義的要求。描述數(shù)據(jù)格式、數(shù)據(jù)類型、值域和相關(guān)業(yè)務(wù)規(guī)則的有效性。例如:員工的國籍類型必須存在于國家基礎(chǔ)數(shù)據(jù)中定義的允許值。
企業(yè)數(shù)據(jù)質(zhì)量管理體系的搭建并非一朝一夕的事情,本文只是針對管理制度的目錄編寫進(jìn)行了詳細(xì)闡述。如何針對管理制度進(jìn)行組織保障、資金項目保障、人力保障等措施在后續(xù)章節(jié)會再詳細(xì)講到。
作者:成于念,微信號:415864696,感興趣的事情很多,歡迎一起溝通交流。
本文由@成于念 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)作者許可,禁止轉(zhuǎn)載。
題圖來自Unsplash,基于CC0協(xié)議。
“相比那些不開展數(shù)據(jù)質(zhì)量管理的組織,實施正式數(shù)據(jù)質(zhì)量管理的組織碰到的問題會更少?!边@句話說得有道理
相比那些不開展數(shù)據(jù)質(zhì)量管理的組織,實施正式數(shù)據(jù)質(zhì)量管理的組織碰到的問題會更少。
高質(zhì)量的企業(yè)數(shù)據(jù)能夠隨時調(diào)用,建立管理的組織非常必要,非常期待后續(xù)的章節(jié)!
數(shù)據(jù)管理制度真的是一個很重要的內(nèi)容,之前一直容易忽略,這篇文章很具有操作性
真的是一篇很好的操作指南!把整個管理制度搭建講的很系統(tǒng)性