芮忠
摘? 要:為解決數(shù)據(jù)問題,數(shù)據(jù)治理技術(shù)開始進(jìn)入各企業(yè)的視野,諸多相關(guān)的數(shù)據(jù)治理產(chǎn)品也隨之涌現(xiàn)。但當(dāng)前市場(chǎng)已有的相關(guān)數(shù)據(jù)治理系統(tǒng)均存在一定的不足:數(shù)據(jù)管理的方法、流程和策略等方面缺乏統(tǒng)一的標(biāo)準(zhǔn);數(shù)據(jù)的質(zhì)量、合規(guī)性和安全性難以得到保障;數(shù)據(jù)管理的范圍較為狹窄,且管理的流程較為復(fù)雜化,需要輔助大量的人工操作,增加了使用成本。
關(guān)鍵詞:數(shù)據(jù)中臺(tái);信息技術(shù);數(shù)據(jù)治理;大數(shù)據(jù)
中圖分類號(hào):TP311.13 文獻(xiàn)標(biāo)志碼:A? ? ? ? ?文章編號(hào):2095-2945(2020)26-0039-02
Abstract: In order to solve the problems, data governance technology began to enter the vision of enterprises, and many related data governance products emerged. However, there are some deficiencies in the existing data governance systems in current market: the methods, processes and strategies of data management are lack of unified standards; the quality, compliance and security of data are difficult to be guaranteed; the scope of data management is relatively narrow, and the management process is complex. It requires much manual operations and increases the cost of use.
Keywords: data middleground; information technology; data management; big data
引言
當(dāng)前,信息化建設(shè)工作一直在火熱持續(xù)進(jìn)行中,《教育信息化2.0行動(dòng)計(jì)劃》標(biāo)志著智能時(shí)代教育教學(xué)創(chuàng)新發(fā)展新時(shí)代的到來,“體驗(yàn)、開放、融合、數(shù)據(jù)、連接、服務(wù)、創(chuàng)新、引領(lǐng)、變革、智慧”是2.0行動(dòng)計(jì)劃創(chuàng)新引領(lǐng)和生態(tài)變革的主要特征。但事與愿違的是,當(dāng)前高校的信息化建設(shè)在開放、數(shù)據(jù)、服務(wù)、智慧等方面仍與實(shí)際需求有著較大的差距,而且高校的基礎(chǔ)業(yè)務(wù)較為匱乏,數(shù)據(jù)來源也有一定的限制,相較于《中國(guó)教育現(xiàn)代化2035》中要求的“統(tǒng)籌建設(shè)一體化智能化教學(xué)、管理與服務(wù)平臺(tái)”的目標(biāo)而言不過才剛起步而已。這勢(shì)必要求我們?cè)谥蟮闹腔坌@建設(shè)過程中進(jìn)一步革新理念、統(tǒng)一認(rèn)識(shí)、放眼未來、大膽創(chuàng)新,實(shí)現(xiàn)將云計(jì)算、人工智能、物聯(lián)網(wǎng)、大數(shù)據(jù)等高新技術(shù)與高校教育教學(xué)的進(jìn)一步深度融合,讓信息技術(shù)真正地、有效地融入到企業(yè)發(fā)展的每個(gè)環(huán)節(jié)當(dāng)中,為企業(yè)管理、創(chuàng)新跨越式發(fā)展提供信息化深度支撐,實(shí)現(xiàn)“持續(xù)的創(chuàng)新”“智慧的場(chǎng)景”“智慧的數(shù)據(jù)”“智慧的教學(xué)”等信息化、一體化的智慧目標(biāo)。
本課題的研究意義在于開發(fā)并設(shè)計(jì)一個(gè)基于數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理系統(tǒng),結(jié)合國(guó)內(nèi)外最新的相關(guān)課題研究?jī)?nèi)容,幫助用戶了解數(shù)據(jù)的真實(shí)情況并做出合理決策,從根源幫助解決數(shù)據(jù)處理過程中遭遇的數(shù)據(jù)問題,可視化數(shù)據(jù)治理各步操作環(huán)節(jié),使數(shù)據(jù)管理與運(yùn)維人員充分認(rèn)識(shí)到數(shù)據(jù)治理工作帶來的巨大價(jià)值,更好地挖掘和發(fā)揮數(shù)據(jù)的隱含價(jià)值。因此,基于數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理系統(tǒng)是值得去設(shè)計(jì)和開發(fā)的。
1 數(shù)據(jù)中臺(tái)相關(guān)理論
1.1 數(shù)據(jù)中臺(tái)基本概念
數(shù)據(jù)中臺(tái)并非指大數(shù)據(jù)平臺(tái),而是指通過數(shù)據(jù)技術(shù)對(duì)海量的數(shù)據(jù)進(jìn)行采集、計(jì)算、存儲(chǔ)和加工,并統(tǒng)一標(biāo)準(zhǔn)和口徑。數(shù)據(jù)中臺(tái)完成數(shù)據(jù)統(tǒng)一后會(huì)形成標(biāo)準(zhǔn)數(shù)據(jù),然后再對(duì)數(shù)據(jù)進(jìn)行存儲(chǔ),進(jìn)而形成大數(shù)據(jù)資產(chǎn)層,為用戶提供高效的優(yōu)質(zhì)服務(wù)[1-2]。
在數(shù)據(jù)的開發(fā)過程中,核心數(shù)據(jù)模型的變化相對(duì)緩慢,但維護(hù)數(shù)據(jù)的工作量卻特別大,而業(yè)務(wù)創(chuàng)新的速度以及對(duì)數(shù)據(jù)產(chǎn)生新需求的變化卻是十分快速的。因此,數(shù)據(jù)中臺(tái)的出現(xiàn)彌補(bǔ)了數(shù)據(jù)開發(fā)和應(yīng)用開發(fā)之間由于開發(fā)速度不匹配而出現(xiàn)的響應(yīng)力不足等缺陷問題。
數(shù)據(jù)中臺(tái)解決的問題大致可分為三點(diǎn):效率問題、協(xié)作問題和能力問題,這三類問題會(huì)影響開發(fā)團(tuán)隊(duì)的開發(fā)速度,而這一點(diǎn)恰恰是中臺(tái)的關(guān)鍵——讓前臺(tái)的開發(fā)團(tuán)隊(duì)的開發(fā)速度不受后臺(tái)數(shù)據(jù)開發(fā)的影響。
簡(jiǎn)而言之,數(shù)據(jù)中臺(tái)是聚合和治理跨域數(shù)據(jù),將數(shù)據(jù)抽象封裝成服務(wù),提供給前臺(tái)以業(yè)務(wù)價(jià)值的邏輯概念。
1.2 數(shù)據(jù)中臺(tái)的建設(shè)原則
數(shù)據(jù)中臺(tái)的建立并非一蹴而就的事情,企業(yè)應(yīng)基于自身的實(shí)際情況出發(fā),打造獨(dú)有的中臺(tái)能力[1,3],數(shù)據(jù)中臺(tái)在建設(shè)時(shí)需遵循一些建設(shè)原則,具體如下:(1)企業(yè)的組織架構(gòu)和機(jī)制應(yīng)順勢(shì)而變。(2)工作方式需做出改變,數(shù)據(jù)人員需深入研究業(yè)務(wù)、數(shù)據(jù)和模型,端到端的實(shí)踐,這樣打造出數(shù)據(jù)中臺(tái)才是最大的價(jià)值創(chuàng)造。(3)數(shù)據(jù)中臺(tái)的團(tuán)隊(duì)需從傳統(tǒng)支撐角色向運(yùn)營(yíng)角色轉(zhuǎn)變,不僅是數(shù)據(jù)上,業(yè)務(wù)上也需努力,中臺(tái)人員不僅僅是接受需求的角色,更能夠提出合理建議,為業(yè)務(wù)帶來新的增長(zhǎng)點(diǎn)。(4)中臺(tái)的建設(shè)需適合企業(yè)特點(diǎn)。IT時(shí)代整個(gè)社會(huì)將進(jìn)入數(shù)據(jù)開放、共享的時(shí)代,致力于大數(shù)據(jù)變現(xiàn)的企業(yè)最大的價(jià)值就是將這些核心數(shù)據(jù)能力進(jìn)行對(duì)外開放運(yùn)營(yíng),到那時(shí),數(shù)據(jù)中臺(tái)將成為企業(yè)最為寶貴的資產(chǎn)[4]。
2 系統(tǒng)總體架構(gòu)
基于數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理系統(tǒng)以全數(shù)據(jù)鏈路管理為基礎(chǔ)[5],以元數(shù)據(jù)驅(qū)動(dòng)數(shù)據(jù)生產(chǎn)、加工、管理及可視化輸出,進(jìn)而實(shí)現(xiàn)高校數(shù)據(jù)的智能化管理體系。圖1給出了基于數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理系統(tǒng)架構(gòu)圖。
3 系統(tǒng)功能結(jié)構(gòu)
基于數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理系統(tǒng)主要可劃分為數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)監(jiān)測(cè)查詢幾個(gè)功能模塊[6]。
由系統(tǒng)的功能結(jié)構(gòu)圖可以看出,系統(tǒng)主要可分為元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理以及數(shù)據(jù)監(jiān)測(cè)與查詢四個(gè)功能模塊。其中,元數(shù)據(jù)管理主要負(fù)責(zé)數(shù)據(jù)元的配置、數(shù)據(jù)模型的管理以及元數(shù)據(jù)屬性模型的管理;主數(shù)據(jù)模塊主要負(fù)責(zé)以服務(wù)的方式將統(tǒng)一、完整、準(zhǔn)確且具有權(quán)威性的主數(shù)據(jù)傳給企業(yè)內(nèi)需要使用到這些數(shù)據(jù)的應(yīng)用系統(tǒng);數(shù)據(jù)質(zhì)量管理模塊則主要針對(duì)數(shù)據(jù)質(zhì)量的校驗(yàn)與管理;數(shù)據(jù)監(jiān)測(cè)模塊可對(duì)全局?jǐn)?shù)據(jù)進(jìn)行異常監(jiān)測(cè),也可實(shí)現(xiàn)全局?jǐn)?shù)據(jù)的檢索功能。
4 數(shù)據(jù)底層設(shè)計(jì)
4.1 數(shù)據(jù)梳理規(guī)劃
數(shù)據(jù)梳理和數(shù)據(jù)規(guī)劃服務(wù)是數(shù)據(jù)治理服務(wù)中不可或缺的一部分,同時(shí)也是數(shù)據(jù)治理實(shí)際應(yīng)用的關(guān)鍵所在。通過數(shù)據(jù)梳理與規(guī)劃可形成規(guī)范的業(yè)務(wù)模型,通過標(biāo)準(zhǔn)化的設(shè)計(jì)理念對(duì)數(shù)據(jù)資產(chǎn)進(jìn)行頂層設(shè)計(jì)和規(guī)范控制,從全局的角度來管理高校各業(yè)務(wù)領(lǐng)域內(nèi)的數(shù)據(jù)資源,對(duì)數(shù)據(jù)源進(jìn)行統(tǒng)一化的管理,進(jìn)而提供可信的數(shù)據(jù)來源與標(biāo)準(zhǔn),形成企業(yè)業(yè)務(wù)的數(shù)據(jù)架構(gòu),為后續(xù)的高校數(shù)據(jù)治理工作提供前期的工作基礎(chǔ)。
4.2 數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)
企業(yè)信息標(biāo)準(zhǔn)建設(shè)是整個(gè)校園智慧建設(shè)的關(guān)鍵所在。信息標(biāo)準(zhǔn)的制定不僅需要考慮企業(yè)的實(shí)際建設(shè)情況與各業(yè)務(wù)領(lǐng)域的實(shí)際狀況,還需要考慮企業(yè)的當(dāng)前及后期發(fā)展規(guī)劃等客觀因素,通過提供完整的校園信息標(biāo)準(zhǔn)建設(shè),形成校區(qū)編碼、組織機(jī)構(gòu)等一系列的校級(jí)標(biāo)準(zhǔn),最大化地滿足企業(yè)的信息化建設(shè)與發(fā)展的應(yīng)用需求。
4.3 數(shù)據(jù)治理服務(wù)
數(shù)據(jù)治理服務(wù)對(duì)推動(dòng)企業(yè)發(fā)展、提高信息化服務(wù)水平等方面都具有重要意義。數(shù)據(jù)治理是一個(gè)不斷深入與迭代的過程,從建設(shè)的內(nèi)容與目標(biāo)來看可將數(shù)據(jù)治理劃分為不同階段,各階段均要完成不同的任務(wù)。除此之外,不同的企業(yè)所需要考慮的切入點(diǎn)與實(shí)際應(yīng)用需求也各有不同,需要做到具體情況具體分析,依據(jù)高校自身的建設(shè)特點(diǎn)與實(shí)際業(yè)務(wù)需求來考慮數(shù)據(jù)治理服務(wù)。根據(jù)數(shù)據(jù)的標(biāo)準(zhǔn)規(guī)范對(duì)企業(yè)現(xiàn)有的業(yè)務(wù)數(shù)據(jù),如教務(wù)管理系統(tǒng)、一卡通、辦事大廳等業(yè)務(wù),進(jìn)行整合關(guān)聯(lián),并按照業(yè)務(wù)模型對(duì)數(shù)據(jù)進(jìn)行抽取,抽取過后再對(duì)數(shù)據(jù)做標(biāo)準(zhǔn)化轉(zhuǎn)換與數(shù)據(jù)清洗,從而實(shí)現(xiàn)全校的基礎(chǔ)數(shù)據(jù)資產(chǎn)的有效管理。
5 結(jié)束語
本文設(shè)計(jì)并闡述了的數(shù)據(jù)中臺(tái)的在數(shù)據(jù)治理方面的實(shí)際需求,且取得了一定的工作成果,但系統(tǒng)也存在著一些不盡人意的地方需要改進(jìn)與完善。從理論依據(jù)與實(shí)際業(yè)務(wù)需求來看,由于數(shù)據(jù)治理系統(tǒng)仍處于新生狀態(tài),仍需要在不斷的發(fā)展過程中去探索和完善。
參考文獻(xiàn):
[1]李炳森,胡全貴,陳小峰,等.電網(wǎng)企業(yè)數(shù)據(jù)中臺(tái)的研究與設(shè)計(jì)[J].電力信息與通信技術(shù),2019,17(07):29-34.
[2]付威.東方金信數(shù)據(jù)中臺(tái)[J].軟件和集成電路,2019(08):98.
[3]高洪福.又到了打造“鐵腰”的時(shí)候!——“IT生存法則”之?dāng)?shù)據(jù)中臺(tái)初探[J].網(wǎng)絡(luò)安全和信息化,2019(09):24-25.
[4]王翔,鄭磊.面向數(shù)據(jù)開放的地方政府?dāng)?shù)據(jù)治理:?jiǎn)栴}與路徑[J].電子政務(wù),2019,194(02):32-38.
[5]翟軍,李曉彤,苗珍珍,等.我國(guó)開放政府?dāng)?shù)據(jù)“臟數(shù)據(jù)”問題研究及應(yīng)對(duì)——地方政府?dāng)?shù)據(jù)平臺(tái)數(shù)據(jù)質(zhì)量調(diào)查與分析[J].圖書館,
2019,292(01):46-55.
[6]韓旭,曹增義,王昭陽.企業(yè)數(shù)據(jù)資產(chǎn)治理與管理[J].電子世界,2018,557(23):97+99.