夏添

“我們學(xué)校的大數(shù)據(jù)專業(yè)已經(jīng)做了有幾年了，每年的招生名額都招不滿。一開始是因?yàn)槲覀儾恢酪淌裁矗瑢W(xué)生不知道要學(xué)什么；現(xiàn)在是缺乏與技術(shù)和用人方的聯(lián)系，學(xué)生不知道學(xué)了大數(shù)據(jù)專業(yè)有什么用?！?/p>

劉教授是國內(nèi)某知名大學(xué)的統(tǒng)計(jì)學(xué)院院長，近年來，她為學(xué)校大數(shù)據(jù)專業(yè)的成立和順利發(fā)展日夜操心，但這一寄托著重大希望的專業(yè)，發(fā)展歷程卻未盡如人意。

的確，誕生至今已有數(shù)年歷史的大數(shù)據(jù)作為產(chǎn)業(yè)早已為人所熟知，然而在這一產(chǎn)業(yè)誕生初期就產(chǎn)生的問題—人才的匱乏，卻至今仍未解決。一方面，隨著全球?qū)?shù)據(jù)科學(xué)家及大數(shù)據(jù)研究人員和分析師需求的持續(xù)增長，掌握大數(shù)據(jù)相關(guān)專業(yè)技能的人才往往能夠獲得高于平均水平的薪酬和更全面的職業(yè)發(fā)展方向，而另一方面，對于大數(shù)據(jù)人才的持續(xù)性需求，從目前來看還并沒有轉(zhuǎn)化為相應(yīng)人才儲備庫規(guī)模增大的持續(xù)發(fā)展動力。

原因么，從劉教授的例子我們就可以看出一二—產(chǎn)學(xué)研層面的結(jié)合工作，做起來太難了。在企業(yè)層面，對于數(shù)學(xué)、統(tǒng)計(jì)、計(jì)算機(jī)編程和行業(yè)知識融會貫通的高復(fù)雜性需求，讓找到一個(gè)合格的大數(shù)據(jù)人才難上加難；在高校層面，盡管對大數(shù)據(jù)已經(jīng)有了一個(gè)初步的了解，但在具體的技術(shù)環(huán)節(jié)，以及如何綜合提升自身知識層面，以適應(yīng)這一能力和素質(zhì)需求均極高的新行業(yè)需求，絕大部分高校仍缺乏足夠的能力。

人才的缺乏絕不僅僅是中國才有的問題。在全球范圍內(nèi)，大數(shù)據(jù)行業(yè)正在面臨數(shù)據(jù)專業(yè)人才短缺的困境。而這也是作為Hadoop之父的Cloudera首席架構(gòu)師Doug Cutting在近日的訪華活動中，想要幫助中國解決的重要問題之一。就在月初，Cloudera宣布將與清華大學(xué)合作，在Cloudera CAP學(xué)術(shù)合作項(xiàng)目的支持下，合力打造開源社區(qū)領(lǐng)先建設(shè)，解決中國大數(shù)據(jù)行業(yè)人才稀缺的困境。

“Hadoop正處于蓬勃的發(fā)展期，而且這樣的蓬勃至少還需要幾十年。自Hadoop創(chuàng)立之初至今已有十年，而Cloudera成立也有八年之久、進(jìn)入中國一年半了。與中國清華大學(xué)的合作，顯然會加速Cloudera在中國的發(fā)展。我們很榮幸能為中國大數(shù)據(jù)人才教育做出貢獻(xiàn)。”Doug Cutting表示。

根據(jù)IDC研究顯示，大數(shù)據(jù)解決方案將在未來四年中，幫助全球企業(yè)分享大約1.6萬億美元新增收入的數(shù)據(jù)紅利。在大數(shù)據(jù)產(chǎn)業(yè)發(fā)展中，以Hadoop為代表的開源大數(shù)據(jù)生態(tài)成為大數(shù)據(jù)和云計(jì)算的重要技術(shù)支撐，有效推動了開源社區(qū)的用戶和貢獻(xiàn)者，帶動了技術(shù)進(jìn)步與商業(yè)發(fā)展。

在Cloudera CAP學(xué)術(shù)合作項(xiàng)目的支持下，清華大學(xué)和Cloudera將聯(lián)合發(fā)布BASE （Big Analytics Skill Enablement）倡議，以解決中國大數(shù)據(jù)行業(yè)的人才稀缺困境。此次合作還將推動中國研究機(jī)構(gòu)與企業(yè)參與國際大數(shù)據(jù)開源社區(qū)建設(shè)，進(jìn)而推動企業(yè)大數(shù)據(jù)應(yīng)用開發(fā)與價(jià)值挖掘的行業(yè)繁榮。

“數(shù)據(jù)科學(xué)研究院堅(jiān)持走來自開源回歸開源的開放技術(shù)路線，以產(chǎn)業(yè)需求為拉動，將產(chǎn)學(xué)研用納入到開發(fā)體系中，堅(jiān)持國際合作，使源自中國的技術(shù)走向世界?！鼻迦A大學(xué)數(shù)據(jù)科學(xué)研究院管委會副主任、副院長王建民王建民介紹，“我們希望本次合作能打造國際化的開源生態(tài)，從而推動中國大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展。”

與傳統(tǒng)計(jì)算機(jī)科學(xué)和商業(yè)分析課程不同，通過Cloudera CAP，清華數(shù)科院將與Cloudera共同為教師與學(xué)生提供完整的免費(fèi)Hadoop課程，學(xué)生不僅能從基礎(chǔ)的Hadoop開始，也可以學(xué)到諸如Spark，Hive，Impala等在全球Hadoop社區(qū)最新的技術(shù)，這不僅為學(xué)生們提供全面的技能培訓(xùn)，優(yōu)秀的大數(shù)據(jù)人才將為公共事業(yè)和企業(yè)帶來創(chuàng)新，并在全球視野內(nèi)獲取有競爭力的優(yōu)勢。

此外，清華大學(xué)數(shù)科院與Cloudera的合作，還將著力推進(jìn)國際大數(shù)據(jù)開源社區(qū)的相關(guān)活動在本地的融合，提高本土團(tuán)隊(duì)對已有項(xiàng)目參與度，貢獻(xiàn)新的開源項(xiàng)目。雙方合作的愿景是推動大數(shù)據(jù)技術(shù)在中國的大范圍應(yīng)用，同時(shí)將中國本土創(chuàng)造的技術(shù)回饋國際開源社區(qū)。

同時(shí)，Cloudera還在活動現(xiàn)場發(fā)布了BASE （Big Analytics Skills Enablement，大數(shù)據(jù)分析賦能）倡議——它是一個(gè)以行業(yè)為主導(dǎo)的生態(tài)系統(tǒng)，用以培訓(xùn)未來的數(shù)據(jù)專業(yè)人才。作為為戰(zhàn)略性填補(bǔ)數(shù)據(jù)專業(yè)缺乏的鴻溝而誕生的生態(tài)系統(tǒng)，它將會帶動整個(gè)大數(shù)據(jù)行業(yè)的參與者以及學(xué)術(shù)機(jī)構(gòu)一起，為更多的人培訓(xùn)大數(shù)據(jù)和分析領(lǐng)域所需的技能，同時(shí)讓經(jīng)過訓(xùn)練的數(shù)據(jù)專家在相關(guān)領(lǐng)域和行業(yè)得到合適的工作機(jī)會。