大數(shù)據(jù)技術(shù)應(yīng)用現(xiàn)狀及發(fā)展趨勢研究

唐俊林

（貴州師范大學(xué)大數(shù)據(jù)與計算機(jī)科學(xué)學(xué)院貴州貴陽 550001）

1 引言

大數(shù)據(jù)是指通過傳統(tǒng)技術(shù)手段難以有效獲取、存儲、管理和分析能力的數(shù)據(jù)集。國際數(shù)據(jù)公司用四個維度的特征來定義大數(shù)據(jù)，即數(shù)據(jù)集的規(guī)模、數(shù)據(jù)流動的速度、數(shù)據(jù)類型的多少和數(shù)據(jù)價值的大小[1]來進(jìn)行判別。

大數(shù)據(jù)概念的提出催生了大量新技術(shù)的提出與發(fā)展，目前，大數(shù)據(jù)涉及到的關(guān)鍵技術(shù)主要包括：大數(shù)據(jù)采集技術(shù)、大數(shù)據(jù)預(yù)處理技術(shù)、大數(shù)據(jù)存儲與管理技術(shù)、大數(shù)據(jù)安全技術(shù)和大數(shù)據(jù)挖掘技術(shù)，其中，大數(shù)據(jù)挖掘技術(shù)是技術(shù)的最終需求，是大數(shù)據(jù)主要的目的，通過數(shù)據(jù)挖掘技術(shù)，可以對被監(jiān)控對象進(jìn)行預(yù)測、估計與健康管理。

2 大數(shù)據(jù)技術(shù)應(yīng)用現(xiàn)狀

基于大數(shù)據(jù)技術(shù)的廣泛適用性，許多國家已經(jīng)將其與人工智能技術(shù)一起提升到國家戰(zhàn)略層面。中國、美國、英國，德國和日本等國家都相繼提出了想過政策來支持對大數(shù)據(jù)技術(shù)的研究和應(yīng)用。

目前，大數(shù)據(jù)技術(shù)發(fā)展迅猛，相關(guān)技術(shù)已經(jīng)應(yīng)用在能源、教育、科研、制造、金融、電子政務(wù)、企業(yè)經(jīng)營管理、信息管理等領(lǐng)域，為這些領(lǐng)域賦能與變革[2]。

2.1 大數(shù)據(jù)技術(shù)在工業(yè)物聯(lián)網(wǎng)中的應(yīng)用現(xiàn)狀

工業(yè)物聯(lián)網(wǎng)顧名思義是指將工業(yè)生產(chǎn)中涉及的設(shè)備、已服役的產(chǎn)品等進(jìn)行數(shù)據(jù)的采集與管理。其中數(shù)據(jù)的管理一般是遠(yuǎn)程的形式，包括設(shè)備的運(yùn)行狀態(tài)監(jiān)控以及設(shè)備歷史數(shù)據(jù)的處理。設(shè)備長時間運(yùn)行所捕獲到的大量數(shù)據(jù)正是工廠分析產(chǎn)能，獲取設(shè)備故障率、產(chǎn)品合格率等信息的來源。大量的數(shù)據(jù)，即工業(yè)大數(shù)據(jù)需要借助大數(shù)據(jù)技術(shù)進(jìn)行采集、存儲、預(yù)處理、分析、挖掘等。這些數(shù)據(jù)一方面需要用專業(yè)的平臺來存儲、分析和展現(xiàn)，另一方面要通過數(shù)據(jù)驅(qū)動技術(shù)，實現(xiàn)對設(shè)備的故障預(yù)測、健康診斷和優(yōu)化等。

濰柴公司利用工業(yè)大數(shù)據(jù)技術(shù)實現(xiàn)了工程機(jī)械的定位和遠(yuǎn)程監(jiān)控服務(wù)，包括工作時長計算、故障預(yù)警等服務(wù)；上海隧道工程公司與北方重工公司通過與高校合作均實現(xiàn)了盾構(gòu)機(jī)掘進(jìn)過程中的故障預(yù)警；美的集團(tuán)建立了空調(diào)生產(chǎn)車間的DigitalTwin，可以對設(shè)備狀態(tài)實時監(jiān)控。此外，工業(yè)大數(shù)據(jù)還可應(yīng)用于對鋼鐵和風(fēng)電等行業(yè)的設(shè)備監(jiān)控和能耗分析等。

2.2 大數(shù)據(jù)技術(shù)在用戶畫像中的應(yīng)用

隨著移動互聯(lián)網(wǎng)的發(fā)展，人們在手機(jī)上的耗時越來越多，購物平臺，資訊平臺、音樂與視頻平臺等層出不窮。以購物為例，人們在挑選商品的時候，實則是為消費(fèi)數(shù)據(jù)填空，在下次登錄時該應(yīng)用終端都會推送類似的事物。這就是大數(shù)據(jù)的作用，一旦采集到用戶在購物、新聞、搜索、音視頻等平臺的使用數(shù)據(jù)，通過挖掘技術(shù)就可以得出用戶的“畫像”，可以推斷出用戶的性格，年齡，消費(fèi)等級等信息。

大數(shù)據(jù)可以分析出的數(shù)據(jù)包括人口屬性、資產(chǎn)情況、興趣特征、消費(fèi)特征、位置特征、常駐城市等。

2.3 大數(shù)據(jù)在醫(yī)療上的應(yīng)用現(xiàn)狀

大數(shù)據(jù)的分析和挖掘技術(shù)的運(yùn)用可以在一定程度上幫助醫(yī)療行業(yè)提高生產(chǎn)力，改進(jìn)護(hù)理水平，增強(qiáng)競爭力。表現(xiàn)在：

（1）利用大數(shù)據(jù)技術(shù)可以將各種疾病進(jìn)行分類總結(jié)，形成專家?guī)?，從而提高醫(yī)務(wù)人員的效率，降低病人的看病成本和身體損害；

（2）利用大數(shù)據(jù)還可以實現(xiàn)醫(yī)生對病人的遠(yuǎn)程監(jiān)控，從而減少病人的住院，省時省地，實現(xiàn)醫(yī)療資源的最優(yōu)化配置。

2.4 大數(shù)據(jù)在生態(tài)系統(tǒng)上的應(yīng)用現(xiàn)狀

生態(tài)系統(tǒng)涉及到的數(shù)據(jù)囊括了大氣、海洋、土壤、植被等生態(tài)數(shù)據(jù)；數(shù)據(jù)構(gòu)成上多樣復(fù)雜，龐大，分析起來不便，借助大數(shù)據(jù)技術(shù)進(jìn)行存儲和分析就可以滿足需求[3]。

以人們感受頗多的天氣預(yù)報為例，目前氣象觀測己經(jīng)由過去相對的標(biāo)準(zhǔn)、預(yù)測范圍籠統(tǒng)發(fā)展到如今海量的非常規(guī)觀測，觀測精度和定義指標(biāo)也日益提高[4]。黃剛等分析了大氣科學(xué)數(shù)據(jù)的特點(diǎn)，構(gòu)建了一套新的大氣科學(xué)數(shù)據(jù)的分析和可視化系統(tǒng)，并提出數(shù)據(jù)處理算法與數(shù)據(jù)分析系統(tǒng)結(jié)合的可行方案[5]。

2.5 大數(shù)據(jù)技術(shù)在教育中的應(yīng)用現(xiàn)狀

大數(shù)據(jù)在教育中的應(yīng)用主要體現(xiàn)在適應(yīng)性教學(xué)、教學(xué)規(guī)律發(fā)現(xiàn)以及校園信息化管理三個方面。

Learnsprout系統(tǒng)能夠?qū)鋺?zhàn)高考的學(xué)術(shù)進(jìn)行評價，對存在問題的學(xué)生進(jìn)行早期干預(yù)，以輔助學(xué)術(shù)發(fā)現(xiàn)問題及時更改，取得了很好的效果[5]。

3 大數(shù)據(jù)技術(shù)發(fā)展趨勢

3.1 由單一分析轉(zhuǎn)向多樣融合分析

目前，深度學(xué)習(xí)已經(jīng)圖像分類、語音識別和自然語言理解中得到了廣泛應(yīng)用，并已初步市場化。隨著計算機(jī)硬件計算能力的提升以及人們對事物精確程度的要求，大數(shù)據(jù)技術(shù)的應(yīng)用越來越向多樣化數(shù)據(jù)融合的方向發(fā)展，中國綜合分析達(dá)到更精準(zhǔn)的效果。

3.2 由數(shù)據(jù)封閉轉(zhuǎn)向開源、共享

數(shù)據(jù)的采集是極為繁重的一件事，不同行業(yè)公司都有自己專屬的一些數(shù)據(jù)，這些數(shù)據(jù)的分享必將加速大數(shù)據(jù)的應(yīng)用。目前開放平臺和開源平臺受到了百度、騰訊、阿里和科大訊飛等公司的推崇，而且這種趨勢似乎可能會持續(xù)下去。開源平臺趨勢也將改進(jìn)大數(shù)據(jù)處理的方式。

3.3 由云計算轉(zhuǎn)向邊緣計算

邊緣計算可以減少企業(yè)的網(wǎng)絡(luò)數(shù)據(jù)流量，提高性能，節(jié)省云計算成本。此外，邊緣計算還可以加快分析過程，使決策者能夠比以前更快地采取行動。也是大數(shù)據(jù)技術(shù)發(fā)展的一個趨勢。

4 結(jié)論

本文首先對大數(shù)據(jù)技術(shù)的概念與關(guān)鍵技術(shù)進(jìn)行了闡述，并以案例的形式對大數(shù)據(jù)在工業(yè)、用戶畫像、醫(yī)療、教育、生態(tài)環(huán)境等方面的應(yīng)用進(jìn)行了闡述。最后通過對關(guān)鍵技術(shù)的分析得出了大數(shù)據(jù)技術(shù)由單一分析轉(zhuǎn)向多樣融合分析，由數(shù)據(jù)封閉轉(zhuǎn)向開源、共享以及由云計算轉(zhuǎn)向邊緣計算的趨勢。