張孟華
摘要:本文針對(duì)大數(shù)據(jù)在戰(zhàn)略思維層面、技術(shù)創(chuàng)新發(fā)展層面、社會(huì)創(chuàng)新發(fā)展層面的核心價(jià)值展開(kāi)分析,結(jié)合大數(shù)據(jù)分析平臺(tái)建設(shè)思路,包括平臺(tái)建設(shè)目標(biāo)、建設(shè)內(nèi)容分析、關(guān)鍵技術(shù)分析等,通過(guò)研究大數(shù)據(jù)分析平臺(tái)在制造領(lǐng)域、零售領(lǐng)域、電力運(yùn)輸領(lǐng)域、運(yùn)輸領(lǐng)域、銀行服務(wù)領(lǐng)域中的具體應(yīng)用,其目的在于加快大數(shù)據(jù)分析平臺(tái)建設(shè)速度,提升大數(shù)據(jù)分析平臺(tái)的應(yīng)用效果。
關(guān)鍵詞:戰(zhàn)略思維層面;平臺(tái)建設(shè)目標(biāo);制造領(lǐng)域;平臺(tái)層;功能層
1 大數(shù)據(jù)的核心應(yīng)用價(jià)值
1.1 戰(zhàn)略思維層面
從目前發(fā)展情況來(lái)看,數(shù)據(jù)已經(jīng)成為推動(dòng)社會(huì)經(jīng)濟(jì)穩(wěn)定發(fā)展的重要影響因素,大數(shù)據(jù)的發(fā)展可以追溯到2011年,麥肯錫公司發(fā)布了《大數(shù)據(jù):下一個(gè)競(jìng)爭(zhēng)、創(chuàng)新和生產(chǎn)力的前沿領(lǐng)域》的研究報(bào)告,這也意味著“大數(shù)據(jù)”正式進(jìn)入到了戰(zhàn)略發(fā)展階段。許多國(guó)家開(kāi)始著手進(jìn)行大數(shù)據(jù)發(fā)展戰(zhàn)略的研究,我國(guó)與2012年加入到了推動(dòng)大數(shù)據(jù)發(fā)展的行列當(dāng)中,大數(shù)據(jù)的重要性也在得到人們的認(rèn)可。尤其是在2015年,國(guó)務(wù)院出臺(tái)了《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》,明確了大數(shù)據(jù)在國(guó)家發(fā)展中的地位,同時(shí)還在《綱要》中提出了一些有關(guān)大數(shù)據(jù)發(fā)展的重要策略,這也進(jìn)一步凸顯出我國(guó)對(duì)于發(fā)展大數(shù)據(jù)的重視,也使得大數(shù)據(jù)發(fā)展進(jìn)入到了戰(zhàn)略推進(jìn)階段。
1.2 技術(shù)創(chuàng)新發(fā)展層面
大數(shù)據(jù)相比其他類型的數(shù)據(jù)信息,在發(fā)展應(yīng)用過(guò)程中,具備了發(fā)展類型多元化、總體量巨大、相互間關(guān)系復(fù)雜程度高等應(yīng)用特點(diǎn)。為了更好的完成價(jià)值數(shù)據(jù)信息提取,需要匹配相應(yīng)的科學(xué)技術(shù),這也加快了技術(shù)創(chuàng)新速度,進(jìn)而促進(jìn)了社會(huì)經(jīng)濟(jì)的快速發(fā)展。在技術(shù)創(chuàng)新過(guò)程中,其前提條件便是需要有足夠的數(shù)據(jù)信息進(jìn)行支持,而大數(shù)據(jù)所能夠提供的信息基數(shù)數(shù)量非常大,這也便于后續(xù)將與大數(shù)據(jù)相關(guān)的理論、已有的技術(shù)成果與創(chuàng)新框架結(jié)構(gòu)進(jìn)行融合,同時(shí)還可以依托于互聯(lián)網(wǎng)技術(shù),開(kāi)始推動(dòng)智能化體系的發(fā)展,這也會(huì)進(jìn)一步加快問(wèn)題的處理速度,為技術(shù)創(chuàng)新發(fā)展創(chuàng)造良好的應(yīng)用環(huán)境。
1.3 社會(huì)創(chuàng)新發(fā)展層面
社會(huì)經(jīng)濟(jì)的飛速發(fā)展,社會(huì)也開(kāi)始沿著智慧城市的建設(shè)方向推進(jìn),所謂智慧城市是指可以對(duì)城市各方面發(fā)展情況進(jìn)行統(tǒng)籌性規(guī)劃,并且將城市管轄區(qū)域的信息網(wǎng)并聯(lián)在一起,采用以點(diǎn)及面的方式來(lái)推進(jìn)城市經(jīng)濟(jì)的穩(wěn)定發(fā)展。建立該網(wǎng)絡(luò)平臺(tái)的基礎(chǔ)便是海量數(shù)據(jù)的支持,即大數(shù)據(jù)便是實(shí)現(xiàn)智慧城市戰(zhàn)略目標(biāo)的基礎(chǔ)內(nèi)容?,F(xiàn)階段,我國(guó)的很多城市已經(jīng)著手進(jìn)行智慧城市的建設(shè),而大數(shù)據(jù)在該環(huán)節(jié)中,充分發(fā)揮著業(yè)務(wù)協(xié)同與信息整合的作用,并且所搭建的數(shù)據(jù)平臺(tái)還可以為社會(huì)發(fā)展提供可靠的基礎(chǔ)設(shè)施支持,同時(shí)還降低了技術(shù)應(yīng)用門(mén)檻,加快了一站式服務(wù)的普及速度。這也意味著社會(huì)創(chuàng)新發(fā)展進(jìn)入到了多元化推進(jìn)階段,提高了社會(huì)經(jīng)濟(jì)結(jié)構(gòu)穩(wěn)固性。
2 大數(shù)據(jù)分析平臺(tái)建設(shè)思路分析
2.1 平臺(tái)建設(shè)目標(biāo)
進(jìn)行大數(shù)據(jù)分析平臺(tái)的建設(shè),其主要的應(yīng)用目標(biāo)便是構(gòu)建統(tǒng)一的數(shù)據(jù)資源庫(kù),同時(shí)還可以對(duì)數(shù)據(jù)進(jìn)行準(zhǔn)確篩選,提高數(shù)據(jù)內(nèi)容的精準(zhǔn)度。而且在應(yīng)用過(guò)程中,還可以對(duì)數(shù)據(jù)安全管理能力進(jìn)行提升,在確保數(shù)據(jù)信息應(yīng)用價(jià)值的基礎(chǔ)上,提高結(jié)構(gòu)運(yùn)行過(guò)程的可靠性。在實(shí)際應(yīng)用中,一般都會(huì)對(duì)數(shù)據(jù)信息的共享模式進(jìn)行調(diào)整,將虛擬數(shù)據(jù)沿著實(shí)體數(shù)據(jù)信息存儲(chǔ)的方式進(jìn)行調(diào)整,以此為基礎(chǔ)來(lái)搭建完善的數(shù)據(jù)管理框架,對(duì)于采集到的數(shù)據(jù)信息進(jìn)行預(yù)處理、數(shù)據(jù)清洗或數(shù)據(jù)分析等,此時(shí)的數(shù)據(jù)已經(jīng)開(kāi)始沿著“資產(chǎn)”的方向進(jìn)行發(fā)展,這也提升了數(shù)據(jù)信息提供的針對(duì)性,為行業(yè)經(jīng)濟(jì)發(fā)展提供了可靠的數(shù)據(jù)信息支持。
2.2 建設(shè)內(nèi)容分析
2.2.1 數(shù)據(jù)采集系統(tǒng)
這也是大數(shù)據(jù)平臺(tái)的基礎(chǔ)內(nèi)容,在實(shí)際應(yīng)用中,可以將現(xiàn)有業(yè)務(wù)系統(tǒng)中涉及到數(shù)據(jù)信息,集中匯集到大數(shù)據(jù)平臺(tái)結(jié)構(gòu)中,同時(shí)對(duì)于系統(tǒng)提供數(shù)據(jù)的格式進(jìn)行統(tǒng)一,這也為后續(xù)數(shù)據(jù)信息的順利提取奠定基礎(chǔ)。同時(shí)還會(huì)建立基礎(chǔ)算子,對(duì)于平臺(tái)中數(shù)據(jù)之間的關(guān)系進(jìn)行梳理,而且還會(huì)對(duì)數(shù)據(jù)信息潛在價(jià)值進(jìn)行研究,同時(shí)對(duì)于數(shù)據(jù)信息潛在價(jià)值進(jìn)行匯總整理,以此為依據(jù)對(duì)原有數(shù)據(jù)庫(kù)進(jìn)行重建,為一站式管理奠定基礎(chǔ)。另外,在實(shí)際應(yīng)用中,數(shù)據(jù)采集系統(tǒng)還需要具備較強(qiáng)的兼容性,可以對(duì)許多數(shù)據(jù)格式進(jìn)行兼容,以此來(lái)提高系統(tǒng)運(yùn)行本身的可靠性。
2.2.2 數(shù)據(jù)處理系統(tǒng)
在大數(shù)據(jù)時(shí)代,數(shù)據(jù)每天都處于不斷更新的狀態(tài),部分?jǐn)?shù)據(jù)信息在經(jīng)過(guò)一段時(shí)間后,會(huì)喪失原有的時(shí)效性,需要對(duì)其進(jìn)行更新,從而確保數(shù)據(jù)供給的可靠性。在數(shù)據(jù)處理系統(tǒng)建立過(guò)程中,需要對(duì)數(shù)據(jù)信息管理規(guī)范進(jìn)行確定,以此為基礎(chǔ)來(lái)進(jìn)行元數(shù)據(jù)信息的血緣分析,對(duì)其進(jìn)行精細(xì)化分類,以此來(lái)確保數(shù)據(jù)資源供給的可靠性。在數(shù)據(jù)處理環(huán)節(jié),主要應(yīng)包括數(shù)據(jù)細(xì)化分類、數(shù)據(jù)深度挖掘、數(shù)據(jù)糾錯(cuò)、數(shù)據(jù)存儲(chǔ)等多方面應(yīng)用內(nèi)容,這也是提高系統(tǒng)應(yīng)用價(jià)值的基礎(chǔ)環(huán)節(jié),以此為后續(xù)指令的下達(dá)奠定基礎(chǔ)。
2.2.3 數(shù)據(jù)安全管理系統(tǒng)
對(duì)于采集、處理后的數(shù)據(jù)信息進(jìn)行加密處理,同時(shí)在數(shù)據(jù)傳輸過(guò)程中也需要做好數(shù)據(jù)的加密工作,確保所有采集數(shù)據(jù)信息的可靠性。同時(shí)用戶在數(shù)據(jù)訪問(wèn)環(huán)節(jié)中,也需要對(duì)訪問(wèn)者的身份進(jìn)行認(rèn)證,根據(jù)等級(jí)劃分制度,對(duì)于訪問(wèn)者的身份進(jìn)行確定,而且還需要做好相關(guān)的記錄審查工作,確保數(shù)據(jù)審查的可靠性。另外,對(duì)于一些敏感性數(shù)據(jù)信息,還需要對(duì)其進(jìn)行脫敏處理,確保數(shù)據(jù)信息傳遞結(jié)果的完整性。
2.3 關(guān)鍵技術(shù)分析
2.3.1 平臺(tái)層
該結(jié)構(gòu)在大數(shù)據(jù)平臺(tái)建設(shè)中,屬于非常核心的系統(tǒng)結(jié)構(gòu),在實(shí)際建設(shè)中,該系統(tǒng)主要由以下幾部分內(nèi)容組成:第一,數(shù)據(jù)存儲(chǔ)系統(tǒng),大數(shù)據(jù)的信息總量龐大,在實(shí)際應(yīng)用中,需要構(gòu)建PB級(jí)存儲(chǔ)能力的系統(tǒng),以此來(lái)滿足數(shù)據(jù)存儲(chǔ)要求。第二,數(shù)據(jù)挖掘系統(tǒng),大數(shù)據(jù)在傳輸一般都會(huì)以數(shù)據(jù)包的方式進(jìn)行傳遞,其中蘊(yùn)含了非常多的數(shù)據(jù)信息,對(duì)此,平臺(tái)層在傳遞數(shù)據(jù)信息時(shí),也需要做好兼容性調(diào)整,并且在傳遞過(guò)程中,應(yīng)打破傳統(tǒng) MapReduce 技術(shù)的框架限制,對(duì)數(shù)據(jù)潛在價(jià)值進(jìn)行挖掘,從而提高系統(tǒng)運(yùn)行的可靠性。
2.3.2 功能層
在功能層結(jié)構(gòu)的建設(shè)過(guò)程中,主要由以下幾部分內(nèi)容構(gòu)成:(1)挖掘算法的確定,與平臺(tái)中數(shù)據(jù)挖掘系統(tǒng)相對(duì)應(yīng),其主要的工作內(nèi)容便是對(duì)數(shù)據(jù)信息進(jìn)行深入挖掘,以此來(lái)提高TB建模的穩(wěn)定性。(2)隱私保護(hù)技術(shù),所有采集到的數(shù)據(jù)信息需要進(jìn)行安全保護(hù),同時(shí)還需要一些數(shù)據(jù)信息進(jìn)行脫敏處理,使其能夠和其他普通信息內(nèi)容一樣,可以順利地進(jìn)行傳遞,減少了其他不確定因素帶來(lái)的干擾性,從而提高信息傳遞的可靠性。(3)可視化分析技術(shù),該技術(shù)主要用于輔助挖掘系統(tǒng)工作的順利開(kāi)展,從而提高了數(shù)據(jù)信息交互過(guò)程的穩(wěn)定性[1]。
2.3.3 服務(wù)層
服務(wù)層作為和用戶進(jìn)行直接對(duì)接的系統(tǒng),在該系統(tǒng)建立過(guò)程中,需要注意以下幾點(diǎn)內(nèi)容:第一,數(shù)據(jù)匹配技術(shù),在用戶提出請(qǐng)求之后,可以快速將指令傳遞到指定區(qū)域,從中篩選出和請(qǐng)求相匹配的數(shù)據(jù)內(nèi)容,數(shù)據(jù)的細(xì)化程度會(huì)根據(jù)用戶提供關(guān)鍵詞的細(xì)化程度不斷提高,以此來(lái)為用戶提供可靠的數(shù)據(jù)信息[2]。第二,顯示技術(shù),不同格式數(shù)據(jù)信息的顯示方式也存在著較大的不同,因此需要對(duì)數(shù)據(jù)格式進(jìn)行兼容性轉(zhuǎn)化,從而提高數(shù)據(jù)顯示后的可利用性。
3 結(jié)語(yǔ)
大數(shù)據(jù)分析與應(yīng)用平臺(tái),是大數(shù)據(jù)時(shí)代必備的基礎(chǔ)設(shè)施,也是突破當(dāng)前技術(shù)瓶頸的有效突破口。開(kāi)發(fā)和建設(shè)大數(shù)據(jù)分析與應(yīng)用平臺(tái)將帶來(lái)三個(gè)方面的價(jià)值:第一,有助于不斷匯集大數(shù)據(jù)技術(shù)創(chuàng)新成果,并用最先進(jìn)的技術(shù)為用戶提供一站式的應(yīng)用服務(wù);第二,有助于降低用戶技術(shù)門(mén)檻,為應(yīng)用開(kāi)發(fā)提供共性基礎(chǔ)設(shè)施與服務(wù),從而加快應(yīng)用創(chuàng)新;第三,有助于形成大數(shù)據(jù)技術(shù)產(chǎn)品和行業(yè)解決方案,促進(jìn)我國(guó)大數(shù)據(jù)產(chǎn)業(yè)加快形成。
參考文獻(xiàn):
[1]陳越,侯常敏.基于大數(shù)據(jù)分析的公立醫(yī)院運(yùn)營(yíng)信息化平臺(tái)建設(shè)及應(yīng)用[J].中國(guó)衛(wèi)生經(jīng)濟(jì),2020,39(03):80-82.
[2]葛飛飛.大數(shù)據(jù)分析平臺(tái)建設(shè)與應(yīng)用綜述[J].科技風(fēng),2019(25):54+59.