大數(shù)據(jù)時代的機遇與挑戰(zhàn)

莫建華

摘要：大數(shù)據(jù)時代已經(jīng)來臨，并且開始深入到各個行業(yè)中，帶來7很多的機遇，也帶來了很多的挑戰(zhàn)。在文中主要就大數(shù)據(jù)時代的機遇與挑戰(zhàn)進行分析，為更好的在大數(shù)據(jù)時代中發(fā)展提供支持。

關(guān)鍵詞：大數(shù)據(jù)機遇挑戰(zhàn)

時至今日，大數(shù)據(jù)時代的來臨已經(jīng)毋庸置疑，你的每一個習(xí)慣動作、你的每次通話過程、你的每一次消費行為、你的每一份就診記錄，都正在被巨大的數(shù)字網(wǎng)絡(luò)記錄下來、串聯(lián)起來。大數(shù)據(jù)正悄悄包圍著我們不管你有無感受到，它都在影響和改變著我們的生活，甚至連世界經(jīng)濟格局也在醞釀著巨大變革。

一、認(rèn)識大數(shù)據(jù)

大數(shù)據(jù)，簡單說，就是把所有的海量的數(shù)據(jù)放到一起分析，找到關(guān)聯(lián)，實現(xiàn)預(yù)測。大數(shù)據(jù)是一個寬泛的概念，見仁見智?！按蟆笔谴髷?shù)據(jù)的一個重要特征，但遠遠不是全部，其核心能力，是發(fā)現(xiàn)規(guī)律和預(yù)測未來。它主要有四個特征，即海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和巨大的數(shù)據(jù)價值。

二、大數(shù)據(jù)主要來源

（一）傳感器數(shù)據(jù)：分布在不同地理位置上的傳感器，對所處環(huán)境進行感知，不斷生成數(shù)據(jù)。

（二）網(wǎng)站點擊流數(shù)據(jù)：為了進行有效的市場營銷和推廣，用戶在網(wǎng)上的每個點擊及其時間都被記錄下來，利用這些數(shù)據(jù)，服務(wù)提供商可以對用戶存取模式進行仔細(xì)的分析，從而提供更加具有針對性的服務(wù)。

（三）移動設(shè)備數(shù)據(jù)：通過移動電子設(shè)備包括移動電話和PDA、導(dǎo)航設(shè)備等，我們可以獲得設(shè)備和人員的位置、移動、用戶行為等信息，對這些信息進行及時的分析，可以幫助我們進行有效的決策，比如交通監(jiān)控和疏導(dǎo)系統(tǒng)。

（四）射頻ID數(shù)據(jù)：RFID 可以嵌入到產(chǎn)品中，實現(xiàn)物體的跟蹤，從而產(chǎn)生大量數(shù)據(jù)。

三、大數(shù)據(jù)的廣泛應(yīng)用

電子政務(wù)領(lǐng)域：大數(shù)據(jù)的發(fā)展，將極大地改變政府的管理模式，有利于節(jié)約政府投資、加強市場監(jiān)管能力、提高政府決策能力、提升公共服務(wù)能力，實現(xiàn)區(qū)域化管理。目前，我國有很多個城市，正構(gòu)建“智慧城市”，即利用大數(shù)據(jù)的整合和分析來治理社會。

金融領(lǐng)域：大數(shù)據(jù)可大大助力推進高頻金融交易和小額信貸，協(xié)助金融企業(yè)精準(zhǔn)營銷。未來大數(shù)據(jù)可能成為最大的金融交易產(chǎn)品。未來金融大數(shù)據(jù)將會如基礎(chǔ)設(shè)施一樣，有金融數(shù)據(jù)提供方、金融監(jiān)管者，金融大數(shù)據(jù)的交叉復(fù)用等，最終將成為金融業(yè)進行重要活動的基礎(chǔ)設(shè)施。

教育領(lǐng)域：現(xiàn)在，大數(shù)據(jù)分析已經(jīng)被應(yīng)用到美國的公共教育中，成為教學(xué)改革的重要力量。在加拿大，教育科技公司“渴望學(xué)習(xí)”已經(jīng)面向高等教育領(lǐng)域的學(xué)生，推出了基于過去的學(xué)習(xí)成績數(shù)據(jù)預(yù)測并改善未來學(xué)習(xí)成績的大數(shù)據(jù)服務(wù)項目。

生活娛樂領(lǐng)域：在春運這場堪稱人類歷史上最大規(guī)模的短期遷徙中，人群從哪兒去了哪兒？哪些線路最熱門？在以往，這些問題可能難以精確回答。但隨著技術(shù)進步，通過應(yīng)用“大數(shù)據(jù)”這一技術(shù)利器，人們已經(jīng)接近“在迷宮中感受全局”地看見春運的全景

國內(nèi)有2億手機用戶使用百度地圖，用戶每次位置變化，百度都能得到數(shù)據(jù)。把手機網(wǎng)民的定位信息匯總成大數(shù)據(jù)進行分析，就能勾勒出人們的遷徙軌跡。

從上面各種事例中，可以得出以下結(jié)論：第一，數(shù)據(jù)是無價之寶;第二，價值雖有，但確如沙灘中的黃金;第三，數(shù)據(jù)融合的價值，要遠遠大于種類單一的數(shù)據(jù)價值。

四、大數(shù)據(jù)時代的機遇和挑戰(zhàn)

今天，大數(shù)據(jù)似乎成了“靈丹妙藥”，“包治百病”，無所不能。但千萬別把“大數(shù)據(jù)”用做解決世界上所有問題的全能辦法，無論是管理城市到消除貧困，制止恐怖襲擊、疾病流行到拯救地球環(huán)境等，以為有了“大數(shù)據(jù)”，就沒有解決不了的問題，這也是一種誤解。人類的思想、個k的文化和行為模式、不同國家及社會的存在發(fā)展都非常復(fù)雜、曲折和獨特，顯然不能全部由計算機來“數(shù)字自己說話：

（一）面臨的機遇

1.大數(shù)據(jù)技術(shù)促進國家和社會發(fā)展

大數(shù)據(jù)技術(shù)的運用前景是十分光明的。當(dāng)前，我國正處在全面建設(shè)期，建設(shè)任務(wù)很重，建設(shè)下一代信息基礎(chǔ)設(shè)施，發(fā)展現(xiàn)代信息技術(shù)產(chǎn)業(yè)體系，健全信息安全保障體系，推進信息網(wǎng)絡(luò)技術(shù)廣泛運用，是實現(xiàn)同步發(fā)展的保證。大數(shù)據(jù)分析對我們深刻領(lǐng)會世情和國情，把握規(guī)律，實現(xiàn)科學(xué)發(fā)展，做出科學(xué)決策具有重要意義，我們必須重新認(rèn)識數(shù)據(jù)的重要價值。

2.大數(shù)據(jù)藍海成為企業(yè)競爭的新焦點

大數(shù)據(jù)所能帶來的巨大商業(yè)價值，被認(rèn)為將引領(lǐng)一場足以與20世紀(jì)計算機革命匹敵的巨大變革。大數(shù)據(jù)正在對每個領(lǐng)域都造成影響，包括商業(yè)、經(jīng)濟等領(lǐng)域。大數(shù)據(jù)正在促生新的藍海，催生新的經(jīng)濟增長點，正在成為企業(yè)競爭的新焦點。

在今天的大數(shù)據(jù)時代，商業(yè)的生態(tài)環(huán)境在不經(jīng)意間發(fā)生了巨大的變化：網(wǎng)民和消費者的界限正在變得模糊，無處不在的智能終端，隨時在線的網(wǎng)絡(luò)傳輸，互動頻繁的社交網(wǎng)絡(luò)讓以往只是網(wǎng)頁瀏覽者的網(wǎng)民的面孔從模糊變得清晰，對于企業(yè)來說，他們第一次有機會進行大規(guī)模的精準(zhǔn)化的消費者行為研究。作為保持著持續(xù)變革欲望的企業(yè)，主動地?fù)肀н@種變化，從戰(zhàn)略到戰(zhàn)術(shù)層而開始自我的蛻變和進化將會讓他們更加適應(yīng)這個新的時代，大數(shù)據(jù)藍海成為未來競爭的制高點。

3.大數(shù)據(jù)時代呼喚創(chuàng)新型人才

蓋特納咨詢公司預(yù)測大數(shù)據(jù)將為全球帶600萬個IT新崗位和上千萬個非IT崗位。中國是人才大國，但能理解與應(yīng)用大數(shù)據(jù)的創(chuàng)新人才更是稀缺資源。 （二）面臨挑戰(zhàn)

1.大數(shù)據(jù)技術(shù)的運用仍有困難。目前，大數(shù)據(jù)技術(shù)的運用仍存在一些困難與挑戰(zhàn)，體現(xiàn)在大數(shù)據(jù)挖掘的四個環(huán)節(jié)中。

（1）數(shù)據(jù)收集：要對來自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)和機構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時空標(biāo)志，去偽存真，盡可能收集異源甚至是異構(gòu)的數(shù)據(jù)，還可與歷史數(shù)據(jù)對照，多角度驗證數(shù)據(jù)的全面性和可信性。

（2）數(shù)據(jù)存儲：要達到低成本、低能耗、高可靠性目標(biāo)，要用到冗余配置、分布化和云計算技術(shù)，存儲時對數(shù)據(jù)進行分類，通過過濾和去重，減少存儲量，并加入便于檢索的標(biāo)簽。

（3）數(shù)據(jù)處理：大數(shù)據(jù)的復(fù)雜性使得難以用傳統(tǒng)的方法描述與度量，需要將高維圖像等多媒體數(shù)據(jù)降維后度量與處理，利用上下文關(guān)聯(lián)進行語義分析，從大量動態(tài)及可能模棱兩可的數(shù)據(jù)中綜合信息，并導(dǎo)出可理解的內(nèi)容。

（4）結(jié)果的可視化呈現(xiàn)：使結(jié)果更直觀以便于洞察，目前，盡管計算機智能化有了很大進步，但還只能針對小規(guī)模、有結(jié)構(gòu)或類結(jié)構(gòu)的數(shù)據(jù)進行分析，談不上深層次的數(shù)據(jù)挖掘，現(xiàn)有的數(shù)據(jù)挖掘算法在不同行業(yè)中難以通用。

2.大數(shù)據(jù)給信息安全帶來新挑戰(zhàn)

（1）加大隱私泄露風(fēng)險。一是大量數(shù)據(jù)的集中存儲增加了其泄露的風(fēng)險;二是一些敏感數(shù)據(jù)的所有權(quán)和使用權(quán)并沒有清晰界定。

（2）對現(xiàn)有存儲和安防措施提出挑戰(zhàn)。一是復(fù)雜的數(shù)據(jù)存儲在一起可能造成企業(yè)安全管理不合規(guī)二是安全防護手段更新升級慢，存在漏洞。

（3）被運用到攻擊手段中。黑客可收集更多有用信息，大數(shù)據(jù)分析讓攻擊更精準(zhǔn)，同時大數(shù)據(jù)為黑客發(fā)起攻擊提供了更多的機會。

在大數(shù)據(jù)時代，一方面我們通過對大量用戶數(shù)據(jù)的分析，公司、企業(yè)、政府都可以更好的了解用戶行為、消費習(xí)慣的等等，從而可以提供更好的服務(wù)。但是另外一方面，這又不可避免的對用戶的隱私構(gòu)成威脅、挑戰(zhàn)。很多人已經(jīng)意識到，在數(shù)據(jù)的應(yīng)用方面，相關(guān)法律法規(guī)的制定變得越來越重要。作為用戶，需要明確界定自己在數(shù)據(jù)的使用方面具有什么權(quán)力和義務(wù);作為企業(yè)和政府，需要逐漸的定位清楚，在多大程度上可以并且用什么樣的方式來使用用戶的數(shù)據(jù)。