王超
【摘要】 首先,本文對大數(shù)據(jù)技術(shù)的基本概念和技術(shù)應用基礎(chǔ)進行了詳細的概述,對分布式云計算的核心功能進行了深入的說明和分析,同時指出在通信數(shù)據(jù)量持續(xù)上升的前提條件下,這一技術(shù)手段的優(yōu)勢所在;接下來,又對大數(shù)據(jù)技術(shù)應用分析進行了進一步的深入解讀,指出了原有處理策略的不足,并通過圖表和數(shù)據(jù),對新舊系統(tǒng)的處理能力進行了研究和對比。
【關(guān)鍵詞】 大數(shù)據(jù)技術(shù) 現(xiàn)代通信 移動終端 通信系統(tǒng)
隨著信息技術(shù)手段的推廣應用不斷深化,移動終端的普及程度已得到了明顯提高。在這樣的技術(shù)及需求背景下,通信技術(shù)所需的系統(tǒng)就必須面臨著巨大的計費話單量,給系統(tǒng)的處理能力提出了更高的要求。而傳統(tǒng)的處理策略主要包括兩種模式,即硬件升級和應用優(yōu)化,但這兩種模式具有較大的局限性,因而并不能在問題中發(fā)揮真正的實效。近幾年來,大數(shù)據(jù)技術(shù)取得了顯著的發(fā)展優(yōu)勢,為各個領(lǐng)域的變革做出了廣泛的貢獻。因此,為了更好地提升通信系統(tǒng)的能力,也可通過大數(shù)據(jù)技術(shù)的運用來切實解決,從而使現(xiàn)代移動通信獲得更好的發(fā)展前景。
一、大數(shù)據(jù)技術(shù)概述
隨著通信技術(shù)的應用逐漸擴大,所需處理的數(shù)據(jù)量始終處于不斷上升的趨勢,而傳統(tǒng)的處理技術(shù)在存儲,數(shù)據(jù)管理,以及數(shù)據(jù)分析等方面已無法適應當前的激烈競爭,更無法滿足廣大用戶的需求。在這樣的背景下,大數(shù)據(jù)技術(shù)便成為了技術(shù)應用領(lǐng)域的新生力量,并逐漸發(fā)展為最優(yōu)化的技術(shù)手段之一。大數(shù)據(jù)技術(shù)在通信領(lǐng)域的應用方面,是以分布式云計算為基本技術(shù)前提,并通過云計算來實現(xiàn)自身的應用價值,二者互為對方提供應用上的支持。云計算的最關(guān)鍵內(nèi)容在于虛擬化,Map Reduce編程模型,分布式存儲技術(shù),以及海量數(shù)據(jù)管理,這些功能都可為通信系統(tǒng)能力的增強提供可靠的技術(shù)支持[1]。涉及到大數(shù)據(jù)的核心技術(shù)層面,業(yè)界通常采用4V理論來加以說明,具體包括如下幾點:第一,量(Volume)。可用來計算數(shù)據(jù)量及存儲空間;第二,多樣性(Variety)。不僅來源廣泛,而且形式豐富多樣;第三,速度(Velocity)。大數(shù)據(jù)技術(shù)支持在線快速分析處理操作;第四,價值((Value)。具有低價值密度[2]。實際上,除了上述的4V,安全性同樣是大數(shù)據(jù)的另一大主要技術(shù)研討內(nèi)容。目前,移動通信產(chǎn)業(yè)已成為國家的核心行業(yè)之一,平均每天的通信使用者已超過上億的規(guī)模,通信用戶以移動終端為技術(shù)平臺,實現(xiàn)了大量的通信需求。在這樣龐大的需求體系中,將會同時帶來海量的計費話單,而在業(yè)務(wù)范圍進一步擴大的同時,其原有的巨大規(guī)模還將繼續(xù)擴大,且速度驚人。面臨巨大的系統(tǒng)處理壓力,曾長期使用的集中處理策略越來越暴露出嚴重的缺陷和不足,在業(yè)務(wù)處理過程中遇到了技術(shù)突破不力的瓶頸。但與此同時,這也同樣可以視作大數(shù)據(jù)時代來臨的良好契機,為分布式技術(shù)的全面架構(gòu)提供了條件和基礎(chǔ)。
二、大數(shù)據(jù)技術(shù)應用分析
為了有效解決系統(tǒng)在面臨業(yè)務(wù)峰值時出現(xiàn)的處理滯后,甚至系統(tǒng)癱瘓的問題,需從數(shù)據(jù)庫讀寫效率來作為切入點完成處理,從而克服因數(shù)據(jù)量過大而產(chǎn)生的遲緩現(xiàn)象。在經(jīng)過項目驗證之后可發(fā)現(xiàn),無論是程序優(yōu)化,還是硬件升級,都只能作為一種緩兵之計,而無法從根源上解決問題[3]。因此,通過從技術(shù)和經(jīng)濟兩方面進行分析后,可考慮引進Hadoop或HBase,完成對原有系統(tǒng)架構(gòu)的技術(shù)革新。在新系統(tǒng)架構(gòu)中,應用了HBase集群,從而使系統(tǒng)運行不必依賴于主處理數(shù)據(jù)庫,同時又可將查重,結(jié)果發(fā)布等大規(guī)模的數(shù)據(jù)負擔交由HBase集群來解決,這樣就能使數(shù)據(jù)庫用來存儲復雜結(jié)果相關(guān)的內(nèi)容,包括支持結(jié)算,統(tǒng)計查詢等等。從圖1可以看出,新舊系統(tǒng)在多進程業(yè)務(wù)峰值情形下的性能差距,水平向代表進程數(shù),垂直向代表耗時量,各個進程的寫入數(shù)據(jù)量均等[4]。觀察可知,Oracle的耗時與并發(fā)進程數(shù)密切相關(guān),這與其特性相一致;在未出現(xiàn)大規(guī)模進程量的情況下,HBase未顯示出優(yōu)越性。但因為各地話單是通過不同進程來處理的,因而恰恰可以證明分布式云計算在技術(shù)上更為先進。
結(jié)論:綜上所述,本文通過對基于大數(shù)據(jù)技術(shù)的現(xiàn)代移動通信研究進行深入的分析,指出了大數(shù)據(jù)技術(shù)的良好應用前景和顯著的技術(shù)優(yōu)勢。本文對目前通信數(shù)據(jù)量的大規(guī)模增加現(xiàn)象和當前通信業(yè)務(wù)處理能力進行了較為詳盡的論述,指出當前通信系統(tǒng)能力上的不足,在應對業(yè)務(wù)峰值時常常出現(xiàn)延時處理等一系列問題,而引進大數(shù)據(jù)的分布式計算,則能夠提高系統(tǒng)的處理能力,展現(xiàn)出明顯的技術(shù)優(yōu)勢。
參 考 文 獻
[1]劉莉,閻桂蘭.新一波科技浪潮——大數(shù)據(jù)技術(shù)引領(lǐng)“智慧城市”發(fā)展方向[J]. 海峽科技與產(chǎn)業(yè),2013,19(10):276-277.
[2]陳靜,孫中東,林磊明,徐曉鷗,郭育知,李捷,魏珺.大數(shù)據(jù)驅(qū)動金融業(yè)變革[J].金融電子化,2013,18(12):135-136.
[3]趙姝淳,孫曙輝.大數(shù)據(jù)技術(shù)及其在教育領(lǐng)域的應用[J].中小學信息技術(shù)教育,2014,11(03):165-166.
[4]金澈清,錢衛(wèi)寧,周敏奇,周傲英.數(shù)據(jù)管理系統(tǒng)評測基準:從傳統(tǒng)數(shù)據(jù)庫到新興大數(shù)據(jù)[J].計算機學報,2014,20(09):219-220.