隨著大數(shù)據(jù)時(shí)代的到來(lái),企業(yè)在日常業(yè)務(wù)運(yùn)營(yíng)中積累了大量的數(shù)據(jù)。如何從這些海量數(shù)據(jù)中挖掘出有價(jià)值的信息,已經(jīng)成為許多企業(yè)迫切需要解決的問(wèn)題之一。隨著大數(shù)據(jù)平臺(tái)和因特網(wǎng)的興起,數(shù)據(jù)治理逐漸成為企業(yè)挖掘數(shù)據(jù)價(jià)值的重要手段和工具。理解數(shù)據(jù)治理這一概念可能會(huì)有些困難,但沒關(guān)系,一步一步來(lái),今天我們了解一下數(shù)據(jù)治理的基礎(chǔ)——元數(shù)據(jù)管理。
?
一、什么是元數(shù)據(jù)管理?
在了解元數(shù)據(jù)管理之前,首先要了解元數(shù)據(jù)的定義。元數(shù)據(jù)主要記錄數(shù)據(jù)倉(cāng)庫(kù)中模型的定義、各級(jí)之間的映射關(guān)系、數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)狀態(tài)和ETL的任務(wù)運(yùn)行狀態(tài)。元數(shù)據(jù)管理是對(duì)數(shù)據(jù)采集、存儲(chǔ)、處理和顯示等數(shù)據(jù)生命周期的描述信息,幫助用戶理解數(shù)據(jù)關(guān)系和相關(guān)屬性。元數(shù)據(jù)管理是企業(yè)數(shù)據(jù)治理的基礎(chǔ),是企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)的關(guān)鍵組成部分,貫穿于數(shù)據(jù)倉(cāng)庫(kù)的整個(gè)生命周期,利用元數(shù)據(jù)帶動(dòng)數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展,使數(shù)據(jù)倉(cāng)庫(kù)自動(dòng)化、可視化。
二、元數(shù)據(jù)管理平臺(tái)的功能
元數(shù)據(jù)管理平臺(tái)主要包括元數(shù)據(jù)采集服務(wù)、元數(shù)據(jù)訪問(wèn)服務(wù)、元數(shù)據(jù)管理服務(wù)和元數(shù)據(jù)分析服務(wù)。
1、元數(shù)據(jù)采集服務(wù):能夠適應(yīng)異構(gòu)環(huán)境,支持從傳統(tǒng)關(guān)系數(shù)據(jù)庫(kù)和大數(shù)據(jù)平臺(tái)中采集從數(shù)據(jù)生成系統(tǒng)到數(shù)據(jù)處理系統(tǒng)到數(shù)據(jù)應(yīng)用報(bào)表系統(tǒng)的全量元數(shù)據(jù),包括過(guò)程中的數(shù)據(jù)實(shí)體和數(shù)據(jù)實(shí)體處理過(guò)程中的邏輯。
如思邁特軟件Smartbi數(shù)據(jù)管理平臺(tái)內(nèi)置多種采集適配器,支持多種存儲(chǔ)格式的元數(shù)據(jù)自動(dòng)獲取,如:數(shù)據(jù)庫(kù)、報(bào)表工具、ETL工具、文件系統(tǒng)等。在信息管理方面,Smartbi可以管理系統(tǒng)中的元數(shù)據(jù)信息,包括表、字段、參數(shù)、業(yè)務(wù)主題、多維模型、查詢、儀表盤等信息管理。
2、元數(shù)據(jù)訪問(wèn)服務(wù):元數(shù)據(jù)訪問(wèn)服務(wù)是元數(shù)據(jù)管理軟件提供的元數(shù)據(jù)訪問(wèn)接口服務(wù),一般支持REST或Webservice等接口協(xié)議。通過(guò)元數(shù)據(jù)訪問(wèn)服務(wù)支持企業(yè)元數(shù)據(jù)共享,是企業(yè)數(shù)據(jù)治理的基礎(chǔ)。
3、元數(shù)據(jù)管理服務(wù):實(shí)現(xiàn)元數(shù)據(jù)的模型定義和存儲(chǔ),將功能層包裝成各種元數(shù)據(jù)功能,最終提供應(yīng)用和展示;提供元數(shù)據(jù)分類建模、血緣關(guān)系和影響分析,方便數(shù)據(jù)跟蹤和追溯。
4、元數(shù)據(jù)分析服務(wù):元數(shù)據(jù)的應(yīng)用一般包括數(shù)據(jù)地圖、血緣、影響分析、全鏈分析等。
三、元數(shù)據(jù)管理平臺(tái)對(duì)企業(yè)運(yùn)營(yíng)的價(jià)值
元數(shù)據(jù)管理平臺(tái)為用戶提供高質(zhì)量、準(zhǔn)確、易于管理的數(shù)據(jù),貫穿于數(shù)據(jù)中心建設(shè)、運(yùn)行和維護(hù)的整個(gè)生命周期。通過(guò)元數(shù)據(jù)管理,可以形成整個(gè)系統(tǒng)信息數(shù)據(jù)資本的準(zhǔn)確視圖,縮短數(shù)據(jù)清理周期,提高數(shù)據(jù)質(zhì)量。元數(shù)據(jù)管理有利于統(tǒng)一數(shù)據(jù)口徑,標(biāo)明數(shù)據(jù)方向,分析數(shù)據(jù)關(guān)系,管理數(shù)據(jù)變更,為企業(yè)級(jí)數(shù)據(jù)治理提供支持,是企業(yè)實(shí)現(xiàn)數(shù)據(jù)自我服務(wù),促進(jìn)企業(yè)數(shù)據(jù)運(yùn)營(yíng)的可行路線。
可見元數(shù)據(jù)管理對(duì)企業(yè)運(yùn)營(yíng)的重要性,當(dāng)然這一切都離不開元數(shù)據(jù)管理工具的推廣。萬(wàn)丈高樓平地起,所以小伙伴們?cè)谶M(jìn)行數(shù)據(jù)治理工作時(shí)也一定不能忽視元數(shù)據(jù)管理工具的選擇喔,可以多嘗試一下再選擇。
? ? ? ? ymf
?
評(píng)論