劉慧斌
“小斌,你是學(xué)啥專業(yè)的???”“大數(shù)據(jù)?!薄笆茄芯亢艽蟮臄?shù)據(jù)的專業(yè)嗎?”“呃……”
當(dāng)朋友問起我所學(xué)的數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)(以下簡(jiǎn)稱“大數(shù)據(jù)專業(yè)”)時(shí),我們都避免不了上面的對(duì)話。那么,到底什么才是大數(shù)據(jù)呢?
啤酒和尿布的故事
有這樣一個(gè)故事,世界知名零售企業(yè)沃爾瑪需要提高收益,派分析師整理了超市幾大區(qū)域的商品銷售數(shù)據(jù),發(fā)現(xiàn)每到周末,啤酒和尿布的銷售量都會(huì)上升。為什么會(huì)出現(xiàn)這樣奇怪的現(xiàn)象呢?分析師繼續(xù)對(duì)購買這兩商品的人群進(jìn)行分析,發(fā)現(xiàn)大多數(shù)顧客都是新生兒的父親。這些爸爸們?cè)谥苣┎少徢?,夫人都?huì)囑咐他們要購買尿布,而他們?cè)谫徺I尿布的同時(shí)也會(huì)自發(fā)購買自己喜愛的啤酒。發(fā)現(xiàn)這一現(xiàn)象后,沃爾瑪公司決定將啤酒和尿布這兩個(gè)本來不相關(guān)的商品放在一起,而這一決策同時(shí)提高了這兩種商品的銷量。
隨著數(shù)據(jù)量的不斷積累,我們還能通過數(shù)據(jù)挖掘技術(shù)去發(fā)現(xiàn)更多潛在的信息。特別是最近幾年人工智能領(lǐng)域深度學(xué)習(xí)技術(shù)的突破,使得我們可以利用大數(shù)據(jù)技術(shù)做更多的事情?,F(xiàn)在,大家可能對(duì)大數(shù)據(jù)有一點(diǎn)了解了,那么要如何定義它呢?
目前“大數(shù)據(jù)”比較標(biāo)準(zhǔn)的定義是“一種規(guī)模大到在獲取、存儲(chǔ)、管理和分析方面超出了傳統(tǒng)數(shù)據(jù)庫軟件工具能力范圍的數(shù)據(jù)集合,具有數(shù)據(jù)規(guī)模龐大、數(shù)據(jù)流轉(zhuǎn)快、數(shù)據(jù)類型多樣和價(jià)值密度低四大特征”。大數(shù)據(jù)學(xué)科影響十分深遠(yuǎn),小到日常生活的交通出行,大到天文的研究都離不開它。如今手機(jī)中的很多軟件都使用到了大數(shù)據(jù)技術(shù),比如淘寶等電子購物軟件,能夠智能地給我們推薦適合我們的產(chǎn)品,可以說未來世界離不開大數(shù)據(jù)技術(shù)!
“搞數(shù)據(jù)”的人可不簡(jiǎn)單
大數(shù)據(jù)專業(yè)是一個(gè)學(xué)科綜合性相當(dāng)高的專業(yè),它主要涉及計(jì)算機(jī)科學(xué)、信息科學(xué)和統(tǒng)計(jì)學(xué)等知識(shí)。首先是大數(shù)據(jù)來源的問題,隨著移動(dòng)互聯(lián)網(wǎng)的迅猛發(fā)展,越來越多的人使用智能手機(jī),通過使用智能手機(jī)中的軟件,我們可以獲取大量的數(shù)據(jù),這主要涉及信息科學(xué)技術(shù);接下來就是大量數(shù)據(jù)的存儲(chǔ)傳輸問題,這主要涉及計(jì)算機(jī)科學(xué)技術(shù);最后是大量數(shù)據(jù)的挖掘分析過程,這主要涉及統(tǒng)計(jì)學(xué)和人工智能領(lǐng)域里的一些知識(shí)。
學(xué)習(xí)專業(yè)課程往往比較枯燥、乏味,但我們也可以利用學(xué)到的技術(shù)來做一些有意思的事情。通過分析數(shù)據(jù),我們可以得出一些比較有趣的結(jié)論,比如分析哪些人群喜歡哪種類型的明星或者電影,或者追溯商品的流通等。我們也會(huì)參加一些數(shù)據(jù)公司在互聯(lián)網(wǎng)上舉辦的各種各樣的大數(shù)據(jù)競(jìng)賽,比如國(guó)外比較著名的有Kaggle競(jìng)賽,還有國(guó)內(nèi)的阿里天池競(jìng)賽。我就參加過一次專業(yè)的競(jìng)賽,當(dāng)時(shí)我們小組有幸獲得了5萬元的獎(jiǎng)金。
朝陽專業(yè),預(yù)見未來
大家可能更關(guān)心的是大數(shù)據(jù)專業(yè)學(xué)子的就業(yè)前景,某位企業(yè)家曾經(jīng)說過,我們從IT(信息技術(shù))時(shí)代步入了DT(數(shù)據(jù)技術(shù))時(shí)代。未來的很多行業(yè)、很多工作都會(huì)與大數(shù)據(jù)產(chǎn)生關(guān)聯(lián),在未來這一新興學(xué)科是充滿發(fā)展活力的。
在政務(wù)方面,涉及大數(shù)據(jù)的工作如通過大數(shù)據(jù)技術(shù)來提高政府辦公效率,需要政府工作人員中有懂得數(shù)據(jù)科學(xué)和政務(wù)治理兩方面知識(shí)的復(fù)合型人才。在經(jīng)濟(jì)和金融方面,也需要使用統(tǒng)計(jì)學(xué)知識(shí)和大數(shù)據(jù)技術(shù)來研究分析經(jīng)濟(jì)形勢(shì)的變化;在工業(yè)領(lǐng)域,同樣需要將采集好的各種數(shù)據(jù)以特定的方式進(jìn)行組織,通過挖掘數(shù)據(jù)中潛在的價(jià)值來提升制造業(yè)的生產(chǎn)效率和產(chǎn)品質(zhì)量……
這是一個(gè)大數(shù)據(jù)的時(shí)代,你準(zhǔn)備好上場(chǎng)了嗎?