大數(shù)據(jù)人才需求分析

【摘要】快速發(fā)展的大數(shù)據(jù)技術(shù)及其在各行各業(yè)的迅速普及應(yīng)用，使得大數(shù)據(jù)人才成為人力資源市場(chǎng)備受追捧的新寵。然而大數(shù)據(jù)技術(shù)的特點(diǎn)對(duì)相關(guān)人才提出的高要求，使得大數(shù)據(jù)人才缺口巨大成為現(xiàn)實(shí)。本文借助小象學(xué)院近兩年的研究成果，對(duì)大數(shù)據(jù)職業(yè)角色進(jìn)行了劃分和分析，并提出了大數(shù)據(jù)人才培養(yǎng)的途徑和初步策略，力圖為解決大數(shù)據(jù)人才嚴(yán)重不足的問(wèn)題提供一點(diǎn)幫助。

【關(guān)鍵字】大數(shù)據(jù)；人才需求；人才培養(yǎng)

【中圖分類(lèi)號(hào)】G642 【文獻(xiàn)標(biāo)識(shí)碼】 A 【文章編號(hào)】

前言

從Web 2.0的時(shí)代開(kāi)始，人們從數(shù)據(jù)的被動(dòng)接受者變成了主動(dòng)創(chuàng)造者。數(shù)據(jù)制造的能力向消費(fèi)者轉(zhuǎn)移，使得大數(shù)據(jù)的激增愈演愈烈。隨著云服務(wù)和移動(dòng)互聯(lián)的普及，大數(shù)據(jù)是必然結(jié)果。各行各業(yè)競(jìng)爭(zhēng)需要精細(xì)化運(yùn)營(yíng)，大數(shù)據(jù)分析是必然手段。馬云說(shuō)過(guò)：人類(lèi)正從IT時(shí)代走向DT時(shí)代。

大數(shù)據(jù)在政府公共服務(wù)、醫(yī)療服務(wù)、零售業(yè)、制造業(yè)、交通、電信、金融、以及涉及個(gè)人位置服務(wù)等領(lǐng)域得到廣泛應(yīng)用，并產(chǎn)生了巨大的社會(huì)價(jià)值和產(chǎn)業(yè)空間。未來(lái)優(yōu)秀企業(yè)里的數(shù)據(jù)相關(guān)從業(yè)人員占比應(yīng)該在20-30%。據(jù)Gartner宣稱(chēng)，大數(shù)據(jù)正在創(chuàng)造海量工作崗位，截至2015年，全球?qū)⒂?00萬(wàn)個(gè)與大數(shù)據(jù)相關(guān)的IT工作崗位。

一、大數(shù)據(jù)人才現(xiàn)狀

各行各業(yè)都在加速擁抱大數(shù)據(jù)，人才需求旺盛的態(tài)勢(shì)已經(jīng)明朗。據(jù)麥肯錫預(yù)測(cè)，至2018年，美國(guó)需要400萬(wàn)名具備基于大數(shù)據(jù)分析的經(jīng)理和分析師。至2018年將有60%的組織設(shè)置首席數(shù)據(jù)官，未來(lái)八年將有19%的大數(shù)據(jù)人才需求增長(zhǎng)，薪酬水平位居IT技能崗位類(lèi)之首。

一時(shí)間，大數(shù)據(jù)人才成為炙手可熱的IT界寵兒。但是，目前企業(yè)中并沒(méi)有足夠的適用人才。只有大約三分之一的崗位空缺能被填補(bǔ)，數(shù)據(jù)專(zhuān)家非常稀缺搶手。以中國(guó)為例，未來(lái)3年需要至少180萬(wàn)具備基于大數(shù)據(jù)分析的經(jīng)理和分析師，人才缺口達(dá)到150萬(wàn)。大數(shù)據(jù)人才嚴(yán)重缺乏已經(jīng)成為事實(shí)。

更令這一現(xiàn)象雪上加霜的是，近年來(lái)互聯(lián)網(wǎng)公司占據(jù)了技術(shù)創(chuàng)新的制高點(diǎn)，優(yōu)秀的新技術(shù)人才匯集在一線互聯(lián)網(wǎng)公司。相對(duì)而言，傳統(tǒng)行業(yè)缺乏吸引力，電信、金融、交通、醫(yī)療、電力、政府等行業(yè)很難吸引到合格的互聯(lián)網(wǎng)新技術(shù)人才，其中大數(shù)據(jù)分析及數(shù)據(jù)挖掘領(lǐng)域的人才缺口最大。

二、大數(shù)據(jù)職業(yè)角色劃分

目前，各大數(shù)據(jù)產(chǎn)品和服務(wù)提供商根據(jù)自己的產(chǎn)品平臺(tái)特點(diǎn)和架構(gòu)組成設(shè)置與大數(shù)據(jù)相關(guān)的工作崗位。因大數(shù)據(jù)技術(shù)的共同特點(diǎn)，各廠商的職業(yè)角色劃分共通之處較多。

小象學(xué)院通過(guò)跟蹤工業(yè)界所擁有的大數(shù)據(jù)團(tuán)隊(duì)的組織實(shí)踐，發(fā)現(xiàn)一個(gè)普遍現(xiàn)象——大數(shù)據(jù)專(zhuān)業(yè)人才已經(jīng)出現(xiàn)多層次的角色分類(lèi)，基本可以分為九大職業(yè)角色：大數(shù)據(jù)運(yùn)維工程師、大數(shù)據(jù)平臺(tái)研發(fā)工程師、大數(shù)據(jù)云端研發(fā)工程師、大數(shù)據(jù)前端應(yīng)用開(kāi)發(fā)工程師、大數(shù)據(jù)架構(gòu)師、大數(shù)據(jù)分析師、數(shù)據(jù)挖掘師、算法工程師、大數(shù)據(jù)可視化工程師。

大數(shù)據(jù)所涉及的關(guān)鍵技術(shù)包括6個(gè)方面，分別是數(shù)據(jù)采集與數(shù)據(jù)管理、分布式存儲(chǔ)和并行計(jì)算、大數(shù)據(jù)應(yīng)用開(kāi)發(fā)、數(shù)據(jù)分析與挖掘、大數(shù)據(jù)前端應(yīng)用、數(shù)據(jù)服務(wù)和展現(xiàn)。通過(guò)表1可以看出大數(shù)據(jù)關(guān)鍵技術(shù)與職業(yè)角色之間的關(guān)系。

在數(shù)據(jù)采集與數(shù)據(jù)管理技術(shù)領(lǐng)域，需要大數(shù)據(jù)運(yùn)維工程師，負(fù)責(zé)搭建大數(shù)據(jù)平臺(tái)集群，并維護(hù)、管理、優(yōu)化，負(fù)責(zé)平臺(tái)上的數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)存儲(chǔ)，數(shù)據(jù)維護(hù)及優(yōu)化。

在分布式存儲(chǔ)和并行計(jì)算以及大數(shù)據(jù)應(yīng)用開(kāi)發(fā)技術(shù)領(lǐng)域，需要大數(shù)據(jù)開(kāi)發(fā)工程師，又可以細(xì)分為大數(shù)據(jù)平臺(tái)研發(fā)和大數(shù)據(jù)云端研發(fā)工程師。平臺(tái)研發(fā)工程師主要是圍繞大數(shù)據(jù)系統(tǒng)的平臺(tái)研發(fā)人員，應(yīng)該掌握設(shè)計(jì)開(kāi)發(fā)分布式系統(tǒng)的功能擴(kuò)展、性能改進(jìn)、故障分析、OLAP（On-Line Analysis Processing，聯(lián)機(jī)分析處理）類(lèi)型的在線聯(lián)機(jī)分析開(kāi)發(fā)等知識(shí)和技能。大數(shù)據(jù)云端研發(fā)工程師是面向業(yè)務(wù)場(chǎng)景的大數(shù)據(jù)后臺(tái)服務(wù)開(kāi)發(fā)人員，負(fù)責(zé)基于大數(shù)據(jù)的業(yè)務(wù)應(yīng)用系統(tǒng)和產(chǎn)品的云端后臺(tái)服務(wù)開(kāi)發(fā)，如：廣告系統(tǒng)、搜索、個(gè)性化推薦及精準(zhǔn)營(yíng)銷(xiāo)系統(tǒng)、風(fēng)險(xiǎn)預(yù)測(cè)、防欺詐系統(tǒng)等。

上述3個(gè)領(lǐng)域中，大數(shù)據(jù)運(yùn)維和開(kāi)發(fā)工程師的未來(lái)職業(yè)發(fā)展方向是大數(shù)據(jù)平臺(tái)架構(gòu)師，負(fù)責(zé)研究與跟蹤大數(shù)據(jù)新技術(shù)發(fā)展方向，主持制定大數(shù)據(jù)平臺(tái)技術(shù)發(fā)展戰(zhàn)略規(guī)劃，如：平臺(tái)的設(shè)計(jì)、開(kāi)發(fā)、維護(hù)與優(yōu)化，不斷創(chuàng)新，滿(mǎn)足上層數(shù)據(jù)運(yùn)營(yíng)體系各項(xiàng)需求，核心數(shù)據(jù)模型的建立，同時(shí)參與應(yīng)用分析系統(tǒng)的系統(tǒng)分析、設(shè)計(jì)以及實(shí)施工作等；負(fù)責(zé)企業(yè)主數(shù)據(jù)，元數(shù)據(jù)管理及數(shù)據(jù)質(zhì)量；基于數(shù)據(jù)倉(cāng)庫(kù)的業(yè)務(wù)探索以及信息探索的工作。

在數(shù)據(jù)分析與挖掘技術(shù)領(lǐng)域，需要數(shù)據(jù)分析師、數(shù)據(jù)挖掘師、算法工程師等多種人才。大數(shù)據(jù)分析師負(fù)責(zé)項(xiàng)目的需求調(diào)研、數(shù)據(jù)分析、商業(yè)分析和數(shù)據(jù)挖掘模型等，通過(guò)對(duì)用戶(hù)的行為進(jìn)行分析了解用戶(hù)的需求；參與業(yè)務(wù)部門(mén)臨時(shí)數(shù)據(jù)分析需求的調(diào)研、分析及實(shí)現(xiàn)；參與數(shù)據(jù)挖掘模型的構(gòu)建、維護(hù)、部署和評(píng)估；整理編寫(xiě)商業(yè)數(shù)據(jù)分析報(bào)告，及時(shí)發(fā)現(xiàn)和分析其中隱含的變化和問(wèn)題，為業(yè)務(wù)發(fā)展提供決策支持。數(shù)據(jù)挖掘工程師負(fù)責(zé)具體項(xiàng)目的數(shù)據(jù)挖掘模型等，通過(guò)數(shù)據(jù)挖掘模型的構(gòu)建、維護(hù)、部署和評(píng)估實(shí)現(xiàn)數(shù)據(jù)處理，分析和挖掘的基礎(chǔ)性技術(shù)支撐。算法工程師負(fù)責(zé)對(duì)復(fù)雜算法實(shí)現(xiàn)原理的研究，通過(guò)算法的優(yōu)化在海量數(shù)據(jù)集中保證算法計(jì)算的效率和效果。這幾種崗位人才未來(lái)可以發(fā)展成為數(shù)據(jù)科學(xué)家。

在大數(shù)據(jù)前端應(yīng)用技術(shù)領(lǐng)域，需要大數(shù)據(jù)前端開(kāi)發(fā)工程師，就是面向業(yè)務(wù)場(chǎng)景的大數(shù)據(jù)前端開(kāi)發(fā)人員，負(fù)責(zé)設(shè)計(jì)實(shí)驗(yàn)良好的人機(jī)交互；進(jìn)行系統(tǒng)優(yōu)化，設(shè)計(jì)并完善前端基礎(chǔ)服務(wù)架構(gòu)；解決瀏覽器兼容問(wèn)題，進(jìn)行移動(dòng)應(yīng)用開(kāi)發(fā)，并與后臺(tái)技術(shù)開(kāi)發(fā)保持良好溝通，快速理解、消化各方需求，最終落實(shí)為具體的開(kāi)發(fā)工作。這種崗位人才未來(lái)可以發(fā)展成為前端架構(gòu)專(zhuān)家。

在數(shù)據(jù)服務(wù)和展現(xiàn)技術(shù)領(lǐng)域，需要數(shù)據(jù)可視化工程師，負(fù)責(zé)通過(guò)極具創(chuàng)造性和想象力的方式展示數(shù)據(jù)分析及挖掘后的知識(shí)發(fā)現(xiàn)，幫助用戶(hù)從大數(shù)據(jù)洞察中獲取直觀和感性的知識(shí)。這種崗位人才未來(lái)可以發(fā)展成為可視化專(zhuān)家。endprint

三、大數(shù)據(jù)人才培養(yǎng)

1. 人才培養(yǎng)途徑

目前，教育機(jī)構(gòu)不能滿(mǎn)足人才市場(chǎng)需求?，F(xiàn)有教育體系和市場(chǎng)需求嚴(yán)重脫節(jié)的問(wèn)題已經(jīng)是老生常談，大部分大學(xué)仍然以學(xué)科教育為主，培養(yǎng)研究型人才而不是職業(yè)技能人才。另外，互聯(lián)網(wǎng)新技術(shù)變化迅猛、生命周期短，高等院校難以及時(shí)培養(yǎng)師資力量。解決這一問(wèn)題的有效途徑是校企合作，通過(guò)引入相關(guān)技術(shù)人員，快速解決師資力量不足和師資培養(yǎng)的問(wèn)題。

有能力提供大數(shù)據(jù)人才培訓(xùn)的培訓(xùn)機(jī)構(gòu)數(shù)量和規(guī)模有限，同樣難以滿(mǎn)足市場(chǎng)需求。比較有效的途徑是充分發(fā)揮互聯(lián)網(wǎng)的優(yōu)勢(shì)，采取在線教育模式使大數(shù)據(jù)技術(shù)得以快速普及。

2.人才培養(yǎng)策略

在大數(shù)據(jù)分析和應(yīng)用中的各種數(shù)據(jù)與決策模型需要不斷測(cè)試和優(yōu)化，更需要高質(zhì)量的計(jì)劃和執(zhí)行力，對(duì)大數(shù)據(jù)人才的知識(shí)結(jié)構(gòu)與綜合能力提出了很高的要求。大數(shù)據(jù)人才培養(yǎng)的方案應(yīng)該包含3個(gè)維度。

維度一，職業(yè)角色劃分。如上所述，大致分為9大職業(yè)角色。

維度二，技術(shù)能力?？梢岳斫鉃橹R(shí)結(jié)構(gòu)，應(yīng)包括數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)算機(jī)和網(wǎng)絡(luò)、數(shù)據(jù)管理、編程和寫(xiě)腳本、數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)、分布式計(jì)算、機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘、數(shù)據(jù)分析、數(shù)據(jù)可視化等課程或?qū)W科。根據(jù)職業(yè)角色不同有所側(cè)重。

維度三，相關(guān)課程設(shè)置。據(jù)統(tǒng)計(jì)，大數(shù)據(jù)9大職業(yè)角色覆蓋的課程內(nèi)容有近50門(mén)，實(shí)際操作時(shí)，可以根據(jù)職業(yè)角色的目標(biāo)崗位不同，設(shè)置不同方向的相關(guān)課程。

3個(gè)維度分別對(duì)應(yīng)，形成面向職業(yè)角色的3維立體人才培養(yǎng)方案。

結(jié)論

面對(duì)風(fēng)起云涌的大數(shù)據(jù)時(shí)代，計(jì)算機(jī)相關(guān)專(zhuān)業(yè)課程亟待改革，擴(kuò)大視野，適應(yīng)日新月異的信息時(shí)代要求。當(dāng)代計(jì)算機(jī)專(zhuān)業(yè)學(xué)生不僅要有扎實(shí)的理論功底，還要有嫻熟的技術(shù)技能，以勝任大數(shù)據(jù)工作崗位的要求。

參考文獻(xiàn)

[1] 向沖. 高職“大數(shù)據(jù)”人才培養(yǎng)研究. 科教導(dǎo)刊. 2014.12

[2] 袁曉桂. 論“大數(shù)據(jù)時(shí)代”高職軟件技術(shù)專(zhuān)業(yè)人才培養(yǎng)的新理念. 計(jì)算機(jī)光盤(pán)軟件與應(yīng)用. 2014.11

[3] 李曉東. 大數(shù)據(jù)時(shí)代高校人才隊(duì)伍建設(shè)思考與探索. 江蘇高教. 2015.2

作者簡(jiǎn)介：朱立，女，（1970-），職務(wù)：教研組長(zhǎng)，職稱(chēng)：副教授，研究方向：軟件技術(shù)，高職教育教研endprint