国产日韩欧美一区二区三区三州_亚洲少妇熟女av_久久久久亚洲av国产精品_波多野结衣网站一区二区_亚洲欧美色片在线91_国产亚洲精品精品国产优播av_日本一区二区三区波多野结衣 _久久国产av不卡

?

高校數(shù)據(jù)中心的智慧數(shù)據(jù)體系的規(guī)劃與設計

2016-01-14 11:28劉杰
電腦知識與技術(shù) 2015年19期
關(guān)鍵詞:數(shù)據(jù)倉庫數(shù)據(jù)管理大數(shù)據(jù)

劉杰

摘要:隨著高校的信息化建設水平的不斷提供,需要對學校的信息資源進行有效整合和深度應用。文章對高校智慧數(shù)據(jù)體系的規(guī)劃、設計和建設進行了初步研究和探討,界定了智慧數(shù)據(jù)體系規(guī)劃的內(nèi)容,明確了研究方法。通過對高校各業(yè)務系統(tǒng)的分析,規(guī)劃了高校信息資源體系架構(gòu),設計了數(shù)據(jù)管理和分析應用的技術(shù)平臺,用于指導高?;诖髷?shù)據(jù)技術(shù)的智慧數(shù)據(jù)體系平臺構(gòu)建。

關(guān)鍵詞:數(shù)據(jù)體系;數(shù)據(jù)倉庫;大數(shù)據(jù);數(shù)據(jù)管理

中圖分類號:TP311 文獻標識碼:A 文章編號:1009-3044(2015)19-0003-02

隨著高校信息化建設的逐步深入,各高校在建設過程中產(chǎn)生了大量的信息,如學生的學籍信息、選課信息、消費信息等;教師的教學信息、科研信息等;還包含涉及人、財、物等相關(guān)的校情信息。不少高校已建立了數(shù)據(jù)中心積累了大量的結(jié)構(gòu)化數(shù)據(jù),解決了“數(shù)據(jù)孤島”問題。數(shù)據(jù)中心里面的數(shù)據(jù)除了能提供簡單查詢和統(tǒng)計功能外,許多看似沒有關(guān)聯(lián)的數(shù)據(jù)之間常常暗含聯(lián)系,蘊藏更多的信息和知識,這就需要運用專業(yè)的工具和方法進行分析。因此,在當今智慧校園的大背景下,同時基于大數(shù)據(jù)、云計算等新技術(shù)快速發(fā)展和應用,各高校也需根據(jù)學校自身發(fā)展的需要,制定統(tǒng)一的數(shù)據(jù)標準體系,對學校的數(shù)據(jù)模型進行統(tǒng)一設計,這是推進學校數(shù)據(jù)中心建設的依據(jù),在此基礎(chǔ)上再進行數(shù)據(jù)采集、分析和挖掘,并最終展示出來,形成一套完整的智慧數(shù)據(jù)體系系統(tǒng)。智能數(shù)據(jù)體系是智能校園的一部分,它不但是簡單地從數(shù)據(jù)到信息,從信息到知識,從知識到智能這么理性,更重要的是從價值發(fā)現(xiàn)新價值。因此,智慧數(shù)據(jù)體系也將成為一座橋梁連接虛擬世界和現(xiàn)實世界。

1研究內(nèi)容

高校數(shù)據(jù)中心的智慧數(shù)據(jù)體系的研究包括四個部分組成:1)總體規(guī)劃??傮w規(guī)劃是對全校業(yè)務系統(tǒng)和數(shù)據(jù)進行梳理,形成學校信息化建設的頂層設計。2)數(shù)據(jù)采集。數(shù)據(jù)采集是通過制定策略,獲取學校各部門業(yè)務系統(tǒng)中產(chǎn)生的數(shù)據(jù),并對其進行清洗和存儲。3)數(shù)據(jù)分析。數(shù)據(jù)分析是運用專業(yè)工具對采集的數(shù)據(jù)進行專項的分析、提取和挖掘。4)信息服務。信息服務是指根據(jù)校園網(wǎng)各類用戶的需求,通過門戶或其他客戶端將數(shù)據(jù)分析的結(jié)果傳遞給用戶進行使用。

2總體規(guī)劃

信息資源體系的總體架構(gòu)規(guī)劃采用SOA架構(gòu)進行規(guī)劃,主要包括三層:網(wǎng)絡基礎(chǔ)設施層、數(shù)據(jù)平臺層、服務展現(xiàn)層。見圖1。

信息資源體系架構(gòu)設計是高校智慧數(shù)據(jù)體系規(guī)劃的基礎(chǔ),是對高校數(shù)據(jù)中心信息資源體系總體架構(gòu)和智慧數(shù)據(jù)體系技術(shù)架構(gòu)的梳理和規(guī)劃。信息資源體系架構(gòu)的設計過程就是從業(yè)務系統(tǒng)中抽象出數(shù)據(jù)體系的過程,按照學校信息化規(guī)劃中對數(shù)據(jù)集成及數(shù)據(jù)倉庫的建設要求,以及學校各部門對信息化的需求,分析各部門業(yè)務體系、數(shù)據(jù)管理和應用現(xiàn)狀,設計基于全校的數(shù)據(jù)體系,是智慧數(shù)據(jù)體系的基礎(chǔ)。

以上圖為例,采用面向?qū)ο蟮姆椒?,從業(yè)務和信息的視角,對學校各部門使用的業(yè)務系統(tǒng)的相關(guān)組成對象和業(yè)務過程進行抽取和分類,形成教學、人財物和科研、學生、公共服務四類信息的聚合體,描述各對象之間的業(yè)務關(guān)系,形成學校頂層業(yè)務視圖,為學校信息化建設、數(shù)據(jù)的管理和綜合應用建立了頂層框架。

通過對學校各部門使用的應用系統(tǒng)的分析,首先對學校各業(yè)務系統(tǒng)中產(chǎn)生和存儲的信息進行梳理,對業(yè)務數(shù)據(jù)進行分類、體系化,建立了學校信息資源體系架構(gòu),在信息資源體系框架下,根據(jù)各類業(yè)務系統(tǒng)中數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系,進行學校數(shù)據(jù)模型的設計;其次根據(jù)學校各部門數(shù)據(jù)應用需求和數(shù)據(jù)技術(shù)分類,規(guī)劃基于全校統(tǒng)一的數(shù)據(jù)體系框架,對數(shù)據(jù)的獲取、存儲、應用、管理需求進行分析,研究智慧數(shù)據(jù)體系建設中使用的關(guān)鍵技術(shù),設計各類技術(shù)架構(gòu),指導數(shù)據(jù)中心的建設。

3數(shù)據(jù)采集

教學和科研是高校的兩大重要工作,因此,教學信息和科研信息是高校的兩大核心功能的重要數(shù)據(jù),要提高學校的教學水平和科研能力,需要有效的從各業(yè)務系統(tǒng)中取得相關(guān)數(shù)據(jù)。高校的智慧數(shù)據(jù)體系架構(gòu)必須以學校現(xiàn)有的業(yè)務系統(tǒng)為基礎(chǔ),能夠應對未來信息化的發(fā)展以及各業(yè)務系統(tǒng)產(chǎn)生的數(shù)據(jù)管理需求,因此,業(yè)務系統(tǒng)中各階段產(chǎn)生的數(shù)據(jù)都是非常有意義的,對其進行采集,并按生命周期進行管理,既保證了數(shù)據(jù)的完整性又能提高學校數(shù)據(jù)的質(zhì)量。高校的智慧數(shù)據(jù)體系架構(gòu)的數(shù)據(jù)采集包括數(shù)據(jù)的產(chǎn)生、交換、存儲、管理等內(nèi)容。

3.1數(shù)據(jù)的獲取

在學校信息化發(fā)展過程中,大部分高校已經(jīng)基本建立了各類信息系統(tǒng)等,積累了大量的結(jié)構(gòu)化數(shù)據(jù),同時還有許多包括XML等半結(jié)構(gòu)化數(shù)據(jù),以及多種形式存在的非結(jié)構(gòu)化數(shù)據(jù)。數(shù)據(jù)的獲取通過使用ETL工具對多種來源的數(shù)據(jù)進行抽取,轉(zhuǎn)換和加載,并通過企業(yè)服務總線(Enterprise Service Bus,ESB)以及文件傳輸技術(shù),實現(xiàn)學校各部門業(yè)務系統(tǒng)之間數(shù)據(jù)的關(guān)聯(lián)和聚合,并采用統(tǒng)一的數(shù)據(jù)結(jié)構(gòu)進行數(shù)據(jù)的存儲。高校只有將各個業(yè)務充分整合,數(shù)據(jù)有效的獲取,以提高數(shù)據(jù)的質(zhì)量,才能將信息化對學校發(fā)展的推動作用發(fā)揮出來。根據(jù)數(shù)據(jù)類型和來源的不同,需要制定不同的數(shù)據(jù)抽取策略如抽取方式、抽取時間、抽取周期等,既要滿足數(shù)據(jù)分析的需要,又不能影響業(yè)務系統(tǒng)的性能。

3.2數(shù)據(jù)的存儲

學校近年來建設了各類業(yè)務系統(tǒng),產(chǎn)生大量的數(shù)據(jù),為保證不同系統(tǒng)之間的數(shù)據(jù)合理存儲和高效利用,避免共享時出現(xiàn)數(shù)據(jù)不一致的問題,需要合理規(guī)劃學校的數(shù)據(jù)存儲,建立統(tǒng)一的數(shù)據(jù)存儲標準。數(shù)據(jù)存儲架構(gòu)設計就是將清洗后的數(shù)據(jù)按計劃增量的方式導人到數(shù)據(jù)倉庫中,用于解決學校數(shù)據(jù)的存儲和管理難題。目前,在高效中各部門產(chǎn)生的業(yè)務數(shù)據(jù)分布總體成星型分布,因此數(shù)據(jù)存儲架構(gòu)采用數(shù)據(jù)集中存儲和數(shù)據(jù)分布存儲相結(jié)合的模式。學校數(shù)據(jù)中心存放的是各部門需要共享的交換數(shù)據(jù)、記錄生命周期的數(shù)據(jù)、歷史數(shù)據(jù),以及用于決策分析的數(shù)據(jù)。其他數(shù)據(jù)仍存放于原來的各業(yè)務系統(tǒng)的數(shù)據(jù)庫中,用以支持各業(yè)務系統(tǒng)的正常運行。另外,在數(shù)據(jù)存儲的時候還要考慮對非結(jié)構(gòu)化數(shù)據(jù)按照統(tǒng)一的標準進行有序、高效的存儲,以方便下一步數(shù)據(jù)的分析。

3.3數(shù)據(jù)的管理

學校數(shù)據(jù)中心的數(shù)據(jù)積累是個漫長的過程,數(shù)據(jù)從產(chǎn)生、交換、存儲到應用有完整的生命周期。在數(shù)據(jù)產(chǎn)生和積累過程中,要有效管理才能確保數(shù)據(jù)質(zhì)量,使學校數(shù)據(jù)具有更高的價值。數(shù)據(jù)管理的目的就是去尋找優(yōu)化手段,建立有效的數(shù)據(jù)生命周期管理,有效的控制數(shù)據(jù)資源,重視歷史數(shù)據(jù)積累,提升數(shù)據(jù)資源的利用率。高校數(shù)據(jù)管理架構(gòu)應以數(shù)據(jù)為中心,以需求主導服務方向,建立并實施數(shù)據(jù)管理標準規(guī)范(包括編碼標準化、數(shù)據(jù)標準化和維護數(shù)據(jù)標準化三方面),完善數(shù)據(jù)最優(yōu)化。

4數(shù)據(jù)分析

數(shù)據(jù)采集完成后的數(shù)據(jù)將作為數(shù)據(jù)分析的原始數(shù)據(jù)。數(shù)據(jù)分析是智慧數(shù)據(jù)體系中數(shù)據(jù)處理流程的重中之重,它將在這個環(huán)節(jié)體現(xiàn)數(shù)據(jù)價值之所在。數(shù)據(jù)分析技術(shù)可以從采集的大量的實際應用數(shù)據(jù)中找到真正有價值的信息和知識,為教師提供學生學習和教學相關(guān)的信息以提高教學質(zhì)量,為科研者提供,為高校管理者提供更科學的統(tǒng)計分析作為決策基礎(chǔ),從而有效的提高學校的教學質(zhì)量、科研水平等,這對于學校的發(fā)展非常重要。在宏觀上,高??梢栽趯W科規(guī)劃、合理設置課程、院系辦學評估、智慧化校園網(wǎng)絡建設等方面借助大數(shù)據(jù)分析技術(shù),挖掘數(shù)據(jù)中潛在的價值。也可以從一些特定的數(shù)據(jù)中分析挖掘某一方面信息,比如:上網(wǎng)行為分析、學生心理健康、就業(yè)情況分析、學習者特征挖掘。

5信息服務

信息服務是根據(jù)不同校園網(wǎng)用戶的需求,為用戶提供公共信息服務、專業(yè)信息服務、信息處理服務、決策信息服務等。由于信息服務面向最終用戶,因此它也是智慧數(shù)據(jù)體系的“窗口”。系統(tǒng)存儲的大量數(shù)據(jù)通過對數(shù)據(jù)分析體系有效、清晰、靈活地呈現(xiàn)給用戶,滿足不同決策層級用戶的決策需求。在高校,數(shù)據(jù)挖掘可用于學校教學、科研、管理等業(yè)務層面進行宏觀的挖掘和預測,還能用于評估和判斷在微觀方面的服務需求,為學校更早的發(fā)現(xiàn)問題。比如學習行為分析、干預師生行為、對上網(wǎng)行為分析進行心理干預等。

6總結(jié)

當今,云計算及大數(shù)據(jù)技術(shù)快速發(fā)展,我們可以利用此類技術(shù)及時方便的獲取需要的數(shù)據(jù),但隨著數(shù)據(jù)的大量累積,要將海量的數(shù)據(jù)轉(zhuǎn)換成有用的信息或知識,變得越來越難,必需運用許多專業(yè)工具進行挖掘和分析,發(fā)現(xiàn)數(shù)據(jù)之間暗含的信息。因此,在高校中建立基于全校范圍的智慧數(shù)據(jù)體系迫在眉睫,只有通過統(tǒng)一的規(guī)劃,自動的獲取和存儲存儲,有目的的分析與挖掘,給校園網(wǎng)各類用戶提供各種統(tǒng)計、分析和決策信息。因此,建立智慧數(shù)據(jù)體系是高校建設與發(fā)展的必由之路,也是智慧校園建設的一部分。本文從智慧數(shù)據(jù)體系架構(gòu)設計方面對高校當前和未來信息資源應用和管理的內(nèi)容和技術(shù)架構(gòu)進行了初步的探討,希望能對高校信息化建設,以及數(shù)據(jù)的應用和管理起到參考作用。

猜你喜歡
數(shù)據(jù)倉庫數(shù)據(jù)管理大數(shù)據(jù)
企業(yè)級BOM數(shù)據(jù)管理概要
定制化汽車制造的數(shù)據(jù)管理分析
海洋環(huán)境數(shù)據(jù)管理優(yōu)化與實踐
CTCS-2級報文數(shù)據(jù)管理需求分析和實現(xiàn)
基于數(shù)據(jù)倉庫的住房城鄉(xiāng)建設信息系統(tǒng)整合研究
分布式存儲系統(tǒng)在液晶面板制造數(shù)據(jù)倉庫中的設計
探析電力系統(tǒng)調(diào)度中數(shù)據(jù)倉庫技術(shù)的應用
基于大數(shù)據(jù)背景下的智慧城市建設研究
基于數(shù)據(jù)倉庫的數(shù)據(jù)分析探索與實踐
长岭县| 东安县| 砀山县| 攀枝花市| 长武县| 当阳市| 绥芬河市| 乡宁县| 武隆县| 顺义区| 惠安县| 桂平市| 夹江县| 健康| 金门县| 南康市| 沂南县| 扶绥县| 紫金县| 原阳县| 通许县| 余姚市| 正镶白旗| 若羌县| 改则县| 新田县| 青浦区| 曲水县| 靖西县| 彰武县| 双牌县| 清水县| 句容市| 浠水县| 渭源县| 桐庐县| 内黄县| 遂平县| 忻城县| 莲花县| 黄浦区|