01
什么是數(shù)據(jù)標(biāo)準(zhǔn)
小菜是剛?cè)肼殐商斓膶?shí)習(xí)生,外向的他很快和前輩們熟絡(luò)了,這天他在去茶水間的路上順便瞅了一眼旁邊前輩的電腦,見前輩正在整理數(shù)據(jù)標(biāo)準(zhǔn)管理系統(tǒng)需要改的bug需求。小菜心里就開始嘀咕:“數(shù)據(jù),我知道是什么意思。標(biāo)準(zhǔn),我也大概能明白,但是整合到一起——數(shù)據(jù)標(biāo)準(zhǔn)?這是個什么鬼?難道是數(shù)據(jù)的標(biāo)準(zhǔn)?給數(shù)據(jù)一個定義?“
01
什么是數(shù)據(jù)標(biāo)準(zhǔn)
自己苦思不得,從茶水間回來后小菜終于忍不住了。
小菜:“哥啊,這個數(shù)據(jù)標(biāo)準(zhǔn)是什么???”
前輩:“數(shù)據(jù)標(biāo)準(zhǔn)就是數(shù)據(jù)的標(biāo)準(zhǔn)唄,就是給數(shù)據(jù)一個統(tǒng)一的定義,讓各系統(tǒng)的使用人員對同一指標(biāo)的理解是一樣的?!?/p>
小菜聽到和自己心里想的差不多,不屑的說:“定義就定義唄,有那么重要嗎?”
02
為什么數(shù)據(jù)標(biāo)準(zhǔn)很重要
前輩:“因?yàn)榘?.....”,前輩看到小菜滿臉的不屑,“那你說說,你覺得對一個銀行來說,它的客戶是什么?”
小菜:“啊,客戶不就是辦了他們銀行卡的人么?”
前輩:“那我也可以認(rèn)為是在他們的銀行網(wǎng)站注冊過的、或者通過這個銀行轉(zhuǎn)賬過的人都是客戶呀。而且由于數(shù)據(jù)需求缺乏規(guī)范,可能會造成同一數(shù)據(jù)對象多份存儲,存儲結(jié)構(gòu)不一致等問題。比如,某個公司的業(yè)務(wù)部門和財務(wù)部門都有客戶信息這項(xiàng)數(shù)據(jù),但可能由于建設(shè)時期或者團(tuán)隊(duì)的不同,他們對客戶編號長度的定義不一致,業(yè)務(wù)系統(tǒng)中定義的是6位,財務(wù)系統(tǒng)定義的是8位,這就會造成同一客戶在業(yè)務(wù)和財務(wù)信息中不能很好打通,嚴(yán)重影響數(shù)據(jù)共享”
小菜瞬間明白了,原來如果數(shù)據(jù)沒有一個標(biāo)準(zhǔn),那么人與人之間的理解就不一樣,有時為了確定自己的理解是否有誤就會詢問其他人,這個人如果也不清楚又會再找別人來確定,無疑增加了溝通成本,而且有時技術(shù)人員偷懶連問都不問,那可能就與需求有所偏差,導(dǎo)致項(xiàng)目的結(jié)果與業(yè)務(wù)需求相差甚遠(yuǎn),就很麻煩了。
前輩看到小菜恍然大悟的表情,哈哈大笑:“這下你知道數(shù)據(jù)標(biāo)準(zhǔn)的重要性了吧!現(xiàn)在這個大數(shù)據(jù)時代啊,數(shù)據(jù)應(yīng)用分析項(xiàng)目那么多,如果數(shù)據(jù)本身存在非常嚴(yán)重的問題,如數(shù)據(jù)統(tǒng)計(jì)口徑不統(tǒng)一,數(shù)據(jù)質(zhì)量參差不齊,數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一等,往往會影響到項(xiàng)目正常交付,甚至后續(xù)數(shù)據(jù)應(yīng)用和戰(zhàn)略決策。因?yàn)樵谡麄€項(xiàng)目實(shí)施過程時,應(yīng)用系統(tǒng)之間需要上傳下達(dá)、信息共享、集成整合、協(xié)同工作。沒有數(shù)據(jù)標(biāo)準(zhǔn),那不亂成一團(tuán)了嘛。
小菜狂點(diǎn)頭:“是的是的,知道了。”但是馬上又疑惑了:“那就成文規(guī)定一下,讓使用人員都清楚明白不就行了,還非得搞個平臺?”
03
為什么要有數(shù)據(jù)標(biāo)準(zhǔn)平臺
前輩:“成文規(guī)定一下?大數(shù)據(jù)耶,數(shù)據(jù)多如牛毛難找得很,我們這個數(shù)據(jù)標(biāo)準(zhǔn)平臺啊,有一套統(tǒng)一的數(shù)據(jù)命名、數(shù)據(jù)定義、數(shù)據(jù)類型、賦值規(guī)則等的定義標(biāo)準(zhǔn),還能提供搜索功能,幫助客戶快速找到標(biāo)準(zhǔn)。而且你想啊,你認(rèn)為標(biāo)準(zhǔn)定了就定了,你就能保證不會更改?還保證它一直有用?你就能保證別人都是按著這個標(biāo)準(zhǔn)來的?”
小菜臉一紅,撓撓頭:“哇,我確實(shí)沒想到那么多,原來有這么多的用處啊,哥,你再多講講唄!”
看到這小子這么好學(xué),前輩的興致也來了:“一般,我們認(rèn)為的標(biāo)準(zhǔn)就是一套規(guī)范,但數(shù)據(jù)標(biāo)準(zhǔn)不僅僅是一套規(guī)范,是實(shí)現(xiàn)數(shù)據(jù)信息標(biāo)準(zhǔn)化的過程。通過指定數(shù)據(jù)標(biāo)準(zhǔn),可以明確數(shù)據(jù)定義,避免歧義;通過標(biāo)準(zhǔn)使數(shù)據(jù)具有相同的結(jié)構(gòu),使數(shù)據(jù)共享和交換更容易,減少數(shù)據(jù)清洗工作;數(shù)據(jù)標(biāo)準(zhǔn)提供完整的,高質(zhì)量的數(shù)據(jù),為決策支持和精細(xì)化管理等提供支撐?!?/p>
”那數(shù)據(jù)標(biāo)準(zhǔn)什么時候會變呢?“小菜繼續(xù)追問。
前輩:”數(shù)據(jù)標(biāo)準(zhǔn)不是一成不變的,比如企業(yè)在拓展新業(yè)務(wù)的時候就需要增加相應(yīng)的標(biāo)準(zhǔn),另外對于沒有價值的標(biāo)準(zhǔn)也要及時廢棄。當(dāng)然了,這就需要我們對數(shù)據(jù)標(biāo)準(zhǔn)不斷進(jìn)行改造,讓標(biāo)準(zhǔn)滿足現(xiàn)有業(yè)務(wù)。我們的數(shù)據(jù)標(biāo)準(zhǔn)平臺對每個版本修改都做了管理,以便于持續(xù)維護(hù)改進(jìn),方便問題查找。而且為了直觀的查看標(biāo)準(zhǔn)的變化情況,這個平臺還提供了數(shù)據(jù)標(biāo)準(zhǔn)監(jiān)控模塊,以圖表的形式,直觀的展現(xiàn)三個月內(nèi)標(biāo)準(zhǔn)各方面的變化情況,實(shí)時監(jiān)控?!?/p>
小菜聽到這里,激動地?fù)]動雙手,感嘆到:“原來數(shù)據(jù)標(biāo)準(zhǔn)不僅僅是一套共同使用和重復(fù)使用的規(guī)范,而是通過一套由管理規(guī)范、管控流程、技術(shù)工具共同組成的體系逐步實(shí)現(xiàn)信息標(biāo)準(zhǔn)化的過程啊,牛!”
小菜:“說了這么多,那怎么建標(biāo)準(zhǔn)呢?需要填寫什么信息?”
04
4
怎么建立數(shù)據(jù)標(biāo)準(zhǔn)
前輩:“不同類別的數(shù)據(jù)標(biāo)準(zhǔn)可能需要設(shè)置不同的信息,所以在建立標(biāo)準(zhǔn)之前呢,我們可以先建個標(biāo)準(zhǔn)集,對標(biāo)準(zhǔn)進(jìn)行分類,設(shè)置其需要填寫的屬性,每個標(biāo)準(zhǔn)集都可以自定義屬性。而且我們除了有單條新建標(biāo)準(zhǔn)的方法,即在新建標(biāo)準(zhǔn)頁面設(shè)置標(biāo)準(zhǔn)屬性值然后保存即可,也支持從excel文本中導(dǎo)入在表格中編輯好的標(biāo)準(zhǔn)到系統(tǒng)中,還提供了標(biāo)準(zhǔn)文檔管理,你可以上傳和管理任何格式文檔的標(biāo)準(zhǔn)。另外還支持從元數(shù)據(jù)拾取生成數(shù)據(jù)標(biāo)準(zhǔn),用戶選擇元數(shù)據(jù)及元數(shù)據(jù)下的字段信息,設(shè)置元數(shù)據(jù)屬性與數(shù)據(jù)標(biāo)準(zhǔn)屬性的對應(yīng)關(guān)系,自動獲取元數(shù)據(jù)屬性信息填充到標(biāo)準(zhǔn)中,形成標(biāo)準(zhǔn)?!?/p>
前輩看了看表:“你感興趣的話可以看看數(shù)據(jù)治理相關(guān)內(nèi)容,剛才我們討論的數(shù)據(jù)標(biāo)準(zhǔn),其實(shí)就是數(shù)據(jù)治理中的重要環(huán)節(jié)。想做大數(shù)據(jù)治理,首先要把數(shù)據(jù)標(biāo)準(zhǔn)做好,否則匆忙建設(shè)各種數(shù)據(jù)倉庫、數(shù)據(jù)集市,最后發(fā)現(xiàn)標(biāo)準(zhǔn)有問題,質(zhì)量不高,這時候再去建數(shù)據(jù)標(biāo)準(zhǔn)就會導(dǎo)致投資浪費(fèi)問題。我們的數(shù)據(jù)治理管理平臺睿治有9大產(chǎn)品,從元數(shù)據(jù)、主數(shù)據(jù)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量再到數(shù)據(jù)處理、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)交換和數(shù)據(jù)安全,可以打通數(shù)據(jù)治理的整個流程。所以了解數(shù)據(jù)標(biāo)準(zhǔn)的同時也該了解一下數(shù)據(jù)治理,你慢慢看吧,小伙子,我先去吃午飯啦。”
嗯哼,聽君一席話,勝讀十年書。前輩離開后,留下若有所思的小菜,默默地打開億信華辰官網(wǎng),仔細(xì)研讀數(shù)據(jù)治理專題頁面克了......