束 進(jìn),?!∮?,周巍偉
(中海網(wǎng)絡(luò)科技股份有限公司,上海 200135)
?
企業(yè)信息化建設(shè)中的主數(shù)據(jù)管理
束進(jìn),牛渝,周巍偉
(中海網(wǎng)絡(luò)科技股份有限公司,上海 200135)
為更好地解決企業(yè)信息化建設(shè)中業(yè)務(wù)系統(tǒng)相互獨(dú)立、數(shù)據(jù)缺乏統(tǒng)一規(guī)劃的問題,提出構(gòu)建企業(yè)主數(shù)據(jù)管理平臺(tái)。主數(shù)據(jù)管理平臺(tái)能夠?qū)崿F(xiàn)對企業(yè)信息化系統(tǒng)內(nèi)主數(shù)據(jù)的統(tǒng)一管理,保持各系統(tǒng)數(shù)據(jù)的一致性,便于進(jìn)行數(shù)據(jù)挖掘,為領(lǐng)導(dǎo)層作出決策提供正確的數(shù)據(jù)支持。該研究對于企業(yè)信息化數(shù)據(jù)的管理具有實(shí)用價(jià)值。
主數(shù)據(jù);主數(shù)據(jù)管理;企業(yè)信息化
企業(yè)的信息化系統(tǒng)是隨著企業(yè)業(yè)務(wù)的不斷拓展及IT技術(shù)的不斷發(fā)展從無到有、從簡單到復(fù)雜逐步形成的,如企業(yè)資源規(guī)劃(Enterprise Resource Planning,ERP)系統(tǒng)、人力資源(Human Resource,HR)系統(tǒng)、辦公自動(dòng)化(Office Automation,OA)系統(tǒng)、財(cái)務(wù)系統(tǒng)和供應(yīng)鏈管理(Supply Chain Management,SCM)系統(tǒng)等。然而,這些業(yè)務(wù)系統(tǒng)更多的是以當(dāng)時(shí)的需求為主、自下而上構(gòu)建的,缺乏對整個(gè)企業(yè)范圍內(nèi)數(shù)據(jù)的統(tǒng)一規(guī)劃,企業(yè)內(nèi)的重要數(shù)據(jù)分散在各個(gè)系統(tǒng)中。
分散在各個(gè)系統(tǒng)中的數(shù)據(jù)不僅重復(fù)冗余,而且編碼不統(tǒng)一、缺乏一致性,使得系統(tǒng)間的交互困難。這不僅影響了企業(yè)的生產(chǎn)力,而且無法通過分析、挖掘企業(yè)數(shù)據(jù)來給公司管理層提供決策支持。
為解決該問題,有必要建立企業(yè)主數(shù)據(jù)管理系統(tǒng),統(tǒng)一主數(shù)據(jù)的定義、輸入和審核,保證企業(yè)信息化系統(tǒng)內(nèi)數(shù)據(jù)的一致性,便于進(jìn)行數(shù)據(jù)挖掘,為領(lǐng)導(dǎo)層決策提供正確的數(shù)據(jù)支持。
主數(shù)據(jù)(Master Data,MD)用來描述企業(yè)核心業(yè)務(wù)實(shí)體(如客戶、合作伙伴、員工、產(chǎn)品、物料單、賬戶等),是企業(yè)應(yīng)用系統(tǒng)中最基本的業(yè)務(wù)單元。其是具有高業(yè)務(wù)價(jià)值的、可在企業(yè)內(nèi)跨越各個(gè)業(yè)務(wù)部門被重復(fù)使用的數(shù)據(jù),存在于多個(gè)異構(gòu)的應(yīng)用系統(tǒng)中,通常需要在整個(gè)企業(yè)范圍內(nèi)保持一致性、完整性和可控性。
依據(jù)數(shù)據(jù)分類模型,企業(yè)的系統(tǒng)數(shù)據(jù)可劃分為元數(shù)據(jù)、引用數(shù)據(jù)、主數(shù)據(jù)、企業(yè)結(jié)構(gòu)數(shù)據(jù)、交易活動(dòng)數(shù)據(jù)和交易審計(jì)數(shù)據(jù)等六大類,其中元數(shù)據(jù)和引用數(shù)據(jù)與主數(shù)據(jù)相關(guān),具體關(guān)系如下。
1) 元數(shù)據(jù):數(shù)據(jù)的數(shù)據(jù),設(shè)計(jì)數(shù)據(jù)表時(shí)大部分屬性字段都是元數(shù)據(jù),如性別、國籍、出生省份等,元數(shù)據(jù)是最接近自然意義的數(shù)據(jù)。
2) 引用數(shù)據(jù):元數(shù)據(jù)的可能取值范圍,設(shè)計(jì)數(shù)據(jù)表時(shí)的數(shù)據(jù)字典通常都是引用數(shù)據(jù),如性別中的男和女。
3) 主數(shù)據(jù):由元數(shù)據(jù)和引用數(shù)據(jù)實(shí)例的集合組成的最重要的一些實(shí)體,如客戶信息、產(chǎn)品信息等。
一般企業(yè)的主數(shù)據(jù)主要包括企業(yè)基本信息、項(xiàng)目信息、財(cái)務(wù)信息、供應(yīng)鏈信息和客戶信息等,具體分類見表1。
表1 主數(shù)據(jù)分類表
主數(shù)據(jù)管理(Master Data Management,MDM)是指一整套的用于生成和維護(hù)企業(yè)主數(shù)據(jù)的規(guī)范、技術(shù)和方案,可保證主數(shù)據(jù)的完整性、一致性和準(zhǔn)確性,保證系統(tǒng)協(xié)調(diào)和重用通用、正確的業(yè)務(wù)數(shù)據(jù)(主數(shù)據(jù))。
通常將主數(shù)據(jù)管理作為應(yīng)用流程的補(bǔ)充,通過從各個(gè)操作/事務(wù)型應(yīng)用和分析型應(yīng)用中分離出主要的信息,使其成為一個(gè)集中的、獨(dú)立于企業(yè)中其他各種應(yīng)用的核心資源,從而使企業(yè)的核心信息得以重用并確保各個(gè)操作/事務(wù)型應(yīng)用與分析型應(yīng)用間核心數(shù)據(jù)的一致性。通過主數(shù)據(jù)管理改變企業(yè)數(shù)據(jù)利用的現(xiàn)狀,從而更好地為企業(yè)信息集成做鋪墊。
主數(shù)據(jù)管理可幫助創(chuàng)建和維護(hù)整個(gè)企業(yè)內(nèi)主數(shù)據(jù)的單一視圖,保證單一視圖的準(zhǔn)確性、一致性和完整性,從而提高數(shù)據(jù)質(zhì)量、統(tǒng)一商業(yè)實(shí)體的定義、簡化和改進(jìn)商業(yè)流程并提供業(yè)務(wù)的響應(yīng)速度。從變化頻率看,主數(shù)據(jù)與日常交易數(shù)據(jù)不同,其變化相對緩慢;此外,主數(shù)據(jù)因跨各個(gè)系統(tǒng)而對數(shù)據(jù)的一致性、實(shí)時(shí)性和版本控制有很高要求。
實(shí)際實(shí)施中,企業(yè)信息化系統(tǒng)中的主數(shù)據(jù)一般分為基礎(chǔ)數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)。
1) 基礎(chǔ)數(shù)據(jù)主要來自于老系統(tǒng)的轉(zhuǎn)換和新系統(tǒng)的輸入,由系統(tǒng)管理人員負(fù)責(zé)維護(hù),由職能部門相關(guān)人員負(fù)責(zé)輸入、編輯和刪除,由系統(tǒng)管理人員負(fù)責(zé)審核。
圖1 主數(shù)據(jù)管理流程
2) 業(yè)務(wù)數(shù)據(jù)由各業(yè)務(wù)部門和職能管理部門負(fù)責(zé)輸入和修改,重要業(yè)務(wù)數(shù)據(jù)由職能部門的責(zé)任人員負(fù)責(zé)審核,由系統(tǒng)管理員負(fù)責(zé)維護(hù)。
為保證主數(shù)據(jù)的統(tǒng)一性和正確性,這些數(shù)據(jù)都要由指定部門/崗位統(tǒng)一輸入,由相關(guān)人員審核通過后方可納入主數(shù)據(jù)庫,供企業(yè)各系統(tǒng)和各部門統(tǒng)一使用。主數(shù)據(jù)管理具體流程見圖1,數(shù)據(jù)管理關(guān)系見表2。
表2 數(shù)據(jù)管理關(guān)系表
主數(shù)據(jù)管理系統(tǒng)架構(gòu)見圖2,可分為業(yè)務(wù)系統(tǒng)、主數(shù)據(jù)管理和數(shù)據(jù)層。
圖2 主數(shù)據(jù)管理系統(tǒng)架構(gòu)
1) 業(yè)務(wù)系統(tǒng)主要指ERP系統(tǒng)、HR系統(tǒng)、財(cái)務(wù)系統(tǒng)、SCM系統(tǒng)、OA系統(tǒng)等企業(yè)內(nèi)的各類信息系統(tǒng),是主數(shù)據(jù)管理系統(tǒng)的數(shù)據(jù)來源和主數(shù)據(jù)的使用者。
2) 主數(shù)據(jù)管理是銜接業(yè)務(wù)系統(tǒng)和主數(shù)據(jù)管理系統(tǒng)的接口,主要包括主數(shù)據(jù)處理服務(wù)和主數(shù)據(jù)查詢服務(wù)。
(1) 主數(shù)據(jù)處理服務(wù)是對業(yè)務(wù)系統(tǒng)的基礎(chǔ)數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)進(jìn)行清洗提煉,審核通過后插入到主數(shù)據(jù)存儲(chǔ)庫,供主數(shù)據(jù)查詢服務(wù)使用。主數(shù)據(jù)的清洗提煉和審核可根據(jù)需要設(shè)定為自動(dòng)處理或手動(dòng)處理。對于重要的基本數(shù)據(jù),須進(jìn)行人工手動(dòng)確認(rèn)審核;對于其他主數(shù)據(jù),可由系統(tǒng)進(jìn)行自動(dòng)清洗提煉、自動(dòng)審核,只有在自動(dòng)審核發(fā)現(xiàn)問題時(shí)才提交人工處理,以提高主數(shù)據(jù)處理的效率和及時(shí)性。
(2) 主數(shù)據(jù)查詢服務(wù)是給企業(yè)內(nèi)的各系統(tǒng)提供統(tǒng)一的主數(shù)據(jù),既要能便捷可靠地提供主數(shù)據(jù),又要能保證主數(shù)據(jù)系統(tǒng)的安全性。主數(shù)據(jù)查詢服務(wù)除了提供標(biāo)準(zhǔn)的查詢接口以外,還可根據(jù)需要為特定系統(tǒng)提供特殊接口,保證主數(shù)據(jù)使用的方便性。每個(gè)業(yè)務(wù)系統(tǒng)都有自己的訪問ID和密碼,可保證訪問的安全性。在設(shè)計(jì)主數(shù)據(jù)查詢服務(wù)時(shí),可考慮不直接將某些重要數(shù)據(jù)(如用戶密碼)提供給業(yè)務(wù)系統(tǒng),而是由業(yè)務(wù)系統(tǒng)提供用戶輸入的用戶名和密碼、主數(shù)據(jù)查詢服務(wù)提供判斷結(jié)果,這樣業(yè)務(wù)系統(tǒng)就無需存儲(chǔ)用戶名和密碼,避免了企業(yè)內(nèi)關(guān)鍵數(shù)據(jù)因擴(kuò)散而出現(xiàn)安全性風(fēng)險(xiǎn)。
3) 數(shù)據(jù)層主要存儲(chǔ)企業(yè)內(nèi)各系統(tǒng)提煉出來的主數(shù)據(jù),主數(shù)據(jù)庫應(yīng)做好熱備和災(zāi)備,保證企業(yè)主數(shù)據(jù)的安全性。在設(shè)計(jì)主數(shù)據(jù)時(shí),要根據(jù)企業(yè)的主數(shù)據(jù)量在保證性能的基礎(chǔ)上預(yù)留未來的空間。
在主數(shù)據(jù)管理系統(tǒng)設(shè)計(jì)中,最關(guān)鍵的是識(shí)別和消除重復(fù)的主數(shù)據(jù)。在新的主數(shù)據(jù)進(jìn)入系統(tǒng)時(shí),系統(tǒng)會(huì)自動(dòng)與現(xiàn)有主數(shù)據(jù)對比,識(shí)別出有可能重復(fù)的主數(shù)據(jù),根據(jù)設(shè)定的規(guī)則進(jìn)行自動(dòng)處理或提交人工判定。例如,供應(yīng)商信息一般包括供應(yīng)商名稱、銀行賬號、地址、電話號碼、郵箱、微信號及QQ號等,在新供應(yīng)商信息進(jìn)入主數(shù)據(jù)系統(tǒng)時(shí),系統(tǒng)會(huì)通過設(shè)定客戶屬性配置規(guī)則引擎進(jìn)行搜索以發(fā)現(xiàn)潛在匹配信息。
若主數(shù)據(jù)系統(tǒng)中已有標(biāo)識(shí)為“A123”的主數(shù)據(jù),則從某個(gè)源系統(tǒng)中識(shí)別出數(shù)據(jù)并在源系統(tǒng)中標(biāo)識(shí)為“S1511”,典型的匹配規(guī)則是檢查供應(yīng)商名稱、銀行賬號、地址、電話號碼、郵箱、微信號,若從前往后檢查發(fā)現(xiàn)其中有一個(gè)相同,則認(rèn)為可能同屬一家供應(yīng)商,進(jìn)行自動(dòng)處理或提交人工判定。有時(shí)盡管名字不一致,系統(tǒng)也能正確識(shí)別出其同屬一家供應(yīng)商,并將A123與源系統(tǒng)的S1511關(guān)聯(lián),但在主數(shù)據(jù)系統(tǒng)中保證了數(shù)據(jù)的唯一性。
企業(yè)主數(shù)據(jù)管理系統(tǒng)的建立使各業(yè)務(wù)系統(tǒng)有了統(tǒng)一的主數(shù)據(jù)訪問平臺(tái),能夠提供一致、完整的信息共享平臺(tái),為企業(yè)業(yè)務(wù)流程和決策系統(tǒng)提供了真實(shí)的數(shù)據(jù)訪問通道。
[1]和軼東,張怡,曹乃剛. SAP、MDM主數(shù)據(jù)管理[M].北京:清華大學(xué)出版社,2013.
[2]趙飛. 基于全生命周期的主數(shù)據(jù)管理-MDM詳解與實(shí)踐[M].北京:清華大學(xué)出版社,2015.
The Master Data Management in Enterprise Informatization
SHU Jin,NIU Yu,ZHOU Weiwei
(ChinaShippingTechnologyCo.Ltd,ShangHai200135,China)
To set up a Master data management platform is proposed to facilitate the integration of the business systems of the subordinate companies and the unification of data planning. The Master data management platform will undertake the tasks of unifying management of the main data in the information system of the enterprise and maintaining the consistency of the system data. This platform will provide the management with data support for them to making decisions and allow the data mining to be performed.
master data; master data management; enterprise informatization
2015-12-07
束進(jìn)(1974—),男,安徽桐城人,高級工程師,碩士,主要從事軟件開發(fā)和信息化管理。
1674-5949(2016)01-081-04
F270.7;TP311.13