簽約清華，Cloudera改善本土大數(shù)據(jù)人才生態(tài)

夏添

“我們學校的大數(shù)據(jù)專業(yè)已經(jīng)做了有幾年了，每年的招生名額都招不滿。一開始是因為我們不知道要教什么，學生不知道要學什么；現(xiàn)在是缺乏與技術(shù)和用人方的聯(lián)系，學生不知道學了大數(shù)據(jù)專業(yè)有什么用?！?/p>

劉教授是國內(nèi)某知名大學的統(tǒng)計學院院長，近年來，她為學校大數(shù)據(jù)專業(yè)的成立和順利發(fā)展日夜操心，但這一寄托著重大希望的專業(yè)，發(fā)展歷程卻未盡如人意。

的確，誕生至今已有數(shù)年歷史的大數(shù)據(jù)作為產(chǎn)業(yè)早已為人所熟知，然而在這一產(chǎn)業(yè)誕生初期就產(chǎn)生的問題—人才的匱乏，卻至今仍未解決。一方面，隨著全球?qū)?shù)據(jù)科學家及大數(shù)據(jù)研究人員和分析師需求的持續(xù)增長，掌握大數(shù)據(jù)相關(guān)專業(yè)技能的人才往往能夠獲得高于平均水平的薪酬和更全面的職業(yè)發(fā)展方向，而另一方面，對于大數(shù)據(jù)人才的持續(xù)性需求，從目前來看還并沒有轉(zhuǎn)化為相應人才儲備庫規(guī)模增大的持續(xù)發(fā)展動力。

原因么，從劉教授的例子我們就可以看出一二—產(chǎn)學研層面的結(jié)合工作，做起來太難了。在企業(yè)層面，對于數(shù)學、統(tǒng)計、計算機編程和行業(yè)知識融會貫通的高復雜性需求，讓找到一個合格的大數(shù)據(jù)人才難上加難；在高校層面，盡管對大數(shù)據(jù)已經(jīng)有了一個初步的了解，但在具體的技術(shù)環(huán)節(jié)，以及如何綜合提升自身知識層面，以適應這一能力和素質(zhì)需求均極高的新行業(yè)需求，絕大部分高校仍缺乏足夠的能力。

人才的缺乏絕不僅僅是中國才有的問題。在全球范圍內(nèi)，大數(shù)據(jù)行業(yè)正在面臨數(shù)據(jù)專業(yè)人才短缺的困境。而這也是作為Hadoop之父的Cloudera首席架構(gòu)師Doug Cutting在近日的訪華活動中，想要幫助中國解決的重要問題之一。就在月初，Cloudera宣布將與清華大學合作，在Cloudera CAP學術(shù)合作項目的支持下，合力打造開源社區(qū)領(lǐng)先建設(shè)，解決中國大數(shù)據(jù)行業(yè)人才稀缺的困境。

“Hadoop正處于蓬勃的發(fā)展期，而且這樣的蓬勃至少還需要幾十年。自Hadoop創(chuàng)立之初至今已有十年，而Cloudera成立也有八年之久、進入中國一年半了。與中國清華大學的合作，顯然會加速Cloudera在中國的發(fā)展。我們很榮幸能為中國大數(shù)據(jù)人才教育做出貢獻?！盌oug Cutting表示。

根據(jù)IDC研究顯示，大數(shù)據(jù)解決方案將在未來四年中，幫助全球企業(yè)分享大約1.6萬億美元新增收入的數(shù)據(jù)紅利。在大數(shù)據(jù)產(chǎn)業(yè)發(fā)展中，以Hadoop為代表的開源大數(shù)據(jù)生態(tài)成為大數(shù)據(jù)和云計算的重要技術(shù)支撐，有效推動了開源社區(qū)的用戶和貢獻者，帶動了技術(shù)進步與商業(yè)發(fā)展。

在Cloudera CAP學術(shù)合作項目的支持下，清華大學和Cloudera將聯(lián)合發(fā)布BASE （Big Analytics Skill Enablement）倡議，以解決中國大數(shù)據(jù)行業(yè)的人才稀缺困境。此次合作還將推動中國研究機構(gòu)與企業(yè)參與國際大數(shù)據(jù)開源社區(qū)建設(shè)，進而推動企業(yè)大數(shù)據(jù)應用開發(fā)與價值挖掘的行業(yè)繁榮。

“數(shù)據(jù)科學研究院堅持走來自開源回歸開源的開放技術(shù)路線，以產(chǎn)業(yè)需求為拉動，將產(chǎn)學研用納入到開發(fā)體系中，堅持國際合作，使源自中國的技術(shù)走向世界?！鼻迦A大學數(shù)據(jù)科學研究院管委會副主任、副院長王建民王建民介紹，“我們希望本次合作能打造國際化的開源生態(tài)，從而推動中國大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展?！?/p>

與傳統(tǒng)計算機科學和商業(yè)分析課程不同，通過Cloudera CAP，清華數(shù)科院將與Cloudera共同為教師與學生提供完整的免費Hadoop課程，學生不僅能從基礎(chǔ)的Hadoop開始，也可以學到諸如Spark，Hive，Impala等在全球Hadoop社區(qū)最新的技術(shù)，這不僅為學生們提供全面的技能培訓，優(yōu)秀的大數(shù)據(jù)人才將為公共事業(yè)和企業(yè)帶來創(chuàng)新，并在全球視野內(nèi)獲取有競爭力的優(yōu)勢。

此外，清華大學數(shù)科院與Cloudera的合作，還將著力推進國際大數(shù)據(jù)開源社區(qū)的相關(guān)活動在本地的融合，提高本土團隊對已有項目參與度，貢獻新的開源項目。雙方合作的愿景是推動大數(shù)據(jù)技術(shù)在中國的大范圍應用，同時將中國本土創(chuàng)造的技術(shù)回饋國際開源社區(qū)。

同時，Cloudera還在活動現(xiàn)場發(fā)布了BASE （Big Analytics Skills Enablement，大數(shù)據(jù)分析賦能）倡議——它是一個以行業(yè)為主導的生態(tài)系統(tǒng)，用以培訓未來的數(shù)據(jù)專業(yè)人才。作為為戰(zhàn)略性填補數(shù)據(jù)專業(yè)缺乏的鴻溝而誕生的生態(tài)系統(tǒng)，它將會帶動整個大數(shù)據(jù)行業(yè)的參與者以及學術(shù)機構(gòu)一起，為更多的人培訓大數(shù)據(jù)和分析領(lǐng)域所需的技能，同時讓經(jīng)過訓練的數(shù)據(jù)專家在相關(guān)領(lǐng)域和行業(yè)得到合適的工作機會。