田鐵剛
(黑龍江工業(yè)學院,黑龍江 雞西 158100)
在互聯(lián)網、云計算之后,大數(shù)據(jù)是又一項備受熱議的信息技術。隨著信息技術的快速發(fā)展,大數(shù)據(jù)為人們的生活與工作帶來極大的便利。人們生活中的事物經過數(shù)據(jù)化處理后,通過數(shù)據(jù)格式存儲于分析,呈現(xiàn)出更大的價值。
隨著云時代的到來,大數(shù)據(jù)備受關注,其不再只是停留于字面意義的非結構化和半結構化的數(shù)據(jù),而是慢慢成為一種新的觀察世界的方法和手段。通過數(shù)據(jù)化思維與先進處理技術,探索和分析巨大數(shù)據(jù)資源之間的關系,構建出一個透明化的世界。
大數(shù)據(jù)是互聯(lián)網發(fā)展到現(xiàn)在的一種現(xiàn)象,通過云計算創(chuàng)新技術,越來越多的數(shù)據(jù)被人們輕松地收集和利用,在社會各個行業(yè)之中,大數(shù)據(jù)也發(fā)揮著重要作用,創(chuàng)造出巨大的價值。
關于大數(shù)據(jù)的特點,業(yè)界將其主要分為4個層面:(1)巨大的數(shù)據(jù)量。大數(shù)據(jù)已經從TB級別快速地升到了PB級別。(2)繁多的數(shù)據(jù)類型。大數(shù)據(jù)的類型包括網絡日志、音頻、圖片、地理位置等。(3)價值密度低。例如在一些視頻監(jiān)控中,能夠發(fā)揮價值的視頻可能只是很短的一兩秒時間。(4)處理速度快,對時效性要求高。這些特點也是當前大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的本質不同[1]。
并不是所有的數(shù)據(jù)都是為了長遠利益而被記錄,很多數(shù)據(jù)記錄下來只是一種操作的基礎,如若脫離記錄,導致后續(xù)操作的難以開展與進行。
1.2.2 備份和監(jiān)督價值
數(shù)據(jù)放入記錄是相對于之前的操作過程,提供了一個虛擬備份,記錄著不同方的操作過程、操作次序,甚至詳細記錄了不同環(huán)節(jié)的操作內容。大數(shù)據(jù)的這種作用也是被人們所認可的最初始價值。
1.2.3 糾正偏離的價值
一個系統(tǒng)在運行中,往往出現(xiàn)不同于以往的差異性,當代表差異的數(shù)據(jù)通過極值或者其他的方式表現(xiàn)出來,就會打破系統(tǒng)原有的平衡,內部環(huán)節(jié)或者資源跟不上。為確保系統(tǒng)的正常運轉,適當采用外力十分有必要。
1.2.4 預測價值
預測價值是當前業(yè)界對大數(shù)據(jù)最為重視的價值。基于以往記錄的數(shù)據(jù)信息,開展深入的研究分析,挖掘數(shù)據(jù)的規(guī)律,進行系統(tǒng)性的優(yōu)化升級。其決定著系統(tǒng)未來的長期成長與演變能力[2]。
隨著信息技術的快速發(fā)展,大數(shù)據(jù)技術被廣泛應用在社會生活的各個方面,而每個領域都朝著智能化、科技化方向發(fā)展。由此,像Hadoop,Hbase,MongoDb和CounchDB等這些各具特點功能的開源軟件,在社會各行業(yè)中被廣泛應用。
中國現(xiàn)代民俗學大致經歷了從事象研究到事件研究的范式轉換,但這是遠遠不夠的,王霄冰從民眾群體(民)與知識體系(俗)之間的關系入手,提倡關注“民俗事件中的社會關系”,這相比“語境中的民俗”的提法而言指向更加明確。不過還應注意的是,“熟人社會”內部借助民俗活動對已有社會關系的刷新或調整,與“生人社會”借助民俗活動而達成的開放式的社會關系,雖然都屬于多主體之間的民俗關系,但其差異甚為明顯,加以區(qū)別是必要的。民俗在“熟人社會”與“生人社會”所承擔的不同角色,啟發(fā)我們應在更廣泛的社會視野中體認民俗。
大數(shù)據(jù)技術是從巨大的數(shù)據(jù)資源中獲取有價值的數(shù)據(jù),并對其進行分析處理。特別是在信息化爆炸的時代,人們每天接觸著各種各樣的信息,因而智能處理大數(shù)據(jù),提高處理數(shù)據(jù)的水平能,顯得尤為重要。在大數(shù)據(jù)的管理、分析及可視化等方面,都與人有著密切的關系。由此,大數(shù)據(jù)技術不斷引進人工智能技術,通過機器學習、數(shù)據(jù)挖掘、模式識別等人工智能技術處理大數(shù)據(jù)。
隨著科技的不斷發(fā)展,傳統(tǒng)的數(shù)據(jù)處理難以滿足客戶的數(shù)據(jù)需求,在人們的不斷探索中,在大數(shù)據(jù)技術的處理過程中,分布式處理架構式成為大數(shù)據(jù)處理的主要模式。此外,分布式文件系統(tǒng)、分布式編程環(huán)境等技術都得到廣泛應用。
此外,大數(shù)據(jù)技術包含豐富的數(shù)據(jù)處理技術,與傳統(tǒng)文本信息不同的是非結構化處理數(shù)據(jù),指的是通過圖片、文檔及視頻等形式。隨著云計算技術的發(fā)展,在大數(shù)據(jù)處理中非結構化數(shù)據(jù)采集技術也發(fā)展得越來越快[3-4]。
當前,大數(shù)據(jù)在幫助政府實現(xiàn)市場經濟調控、預警災難、防范公共衛(wèi)生安全及監(jiān)督社會輿論等方面發(fā)揮著重要的作用,提升緊急及應變能力,提升企業(yè)服務質量等。大數(shù)據(jù)技術不僅在各個領域得到廣泛應用,而且未來有著良好的發(fā)展前景[5-7]。
大數(shù)據(jù)分析的目的就是為了從數(shù)據(jù)資源中挖掘出有價值的信息。為更準確更深層次地挖掘信息資料,而不是單純地統(tǒng)計和分析數(shù)據(jù),所以需要不斷提高計算機的智能計算能力,以促使提高計算機系統(tǒng)分析數(shù)據(jù)的能力,從而做出準確的推理及決策。實現(xiàn)這些最核心的技術能力就是人工智能。由此,人工智能研究也成為近年來學術界與企業(yè)界備受重視的課題,一方面為提升計算機硬件性能,另一方面是適應時代需求,滿足不斷快速發(fā)展的計算機技術,更快更準確地處理巨大的數(shù)據(jù)。
在大數(shù)據(jù)時代,許多學科的研究表面看來存在差異,但是從數(shù)據(jù)研究的角度來看,學科之間存在共通點,因此,隨著數(shù)字信息時代的到來,以數(shù)據(jù)科學為基礎,多學科呈現(xiàn)數(shù)據(jù)一致性,因此可采用統(tǒng)一的思想進行統(tǒng)一研究。
在數(shù)據(jù)處理中,數(shù)據(jù)分析占據(jù)著重要的作用。隨著時代的發(fā)展,其也會成為大數(shù)據(jù)技術的核心。大數(shù)據(jù)的價值表現(xiàn)為,對大規(guī)模數(shù)據(jù)資源的智能處理,從中獲取相關有價值的信息。若要逐步實現(xiàn)大數(shù)據(jù)的這個功能,就必須分析和挖掘數(shù)據(jù)。其中數(shù)據(jù)分析步驟的基礎就是采集、存儲于管理,從而經過分析后得出結果,并應用在相關的行業(yè)領域。由此,未來大數(shù)據(jù)技術的發(fā)展,數(shù)據(jù)分析也將是一個重要的發(fā)展趨勢。
當前人們生活中獲取信息速度快,對此為滿足生活需求,大數(shù)據(jù)系統(tǒng)的處理方式也應不斷創(chuàng)新發(fā)展,傳統(tǒng)的批量化處理方式,對大數(shù)據(jù)處理存在局限性,通常適用于處理數(shù)據(jù)報告這種對頻率無需達到分鐘級別的場景,但是如若遇到要求高的場合,傳統(tǒng)的數(shù)據(jù)處理方式難以滿足需求。
同時,傳統(tǒng)的數(shù)據(jù)倉庫系統(tǒng)、鏈路挖掘等應用,往往一小時或者天為單位計算數(shù)據(jù)處理時間。因為未來大數(shù)據(jù)發(fā)展主要強調時效性與實效性,所以未來數(shù)據(jù)處理也要突出這兩點。例如股票交易處理,數(shù)據(jù)處理時間要以分鐘,甚至用秒計算,這些行業(yè)對數(shù)據(jù)處理的要求很高。因而,未來發(fā)展中,實時性的數(shù)據(jù)處理也將成為一個發(fā)展趨勢,從而不斷促進大數(shù)據(jù)技術的發(fā)展和創(chuàng)變。
未來隨著云技術的不斷發(fā)展和廣泛應用,云計算也將為大數(shù)據(jù)技術發(fā)展提供一個廣闊的數(shù)據(jù)處理平臺和技術支持。未來在大數(shù)據(jù)技術中,分布式計算方法、存儲空間和計算資資源等,這些重要內容都來源于云計算。同時,云計算豐富的IT資源成為大數(shù)據(jù)的技術支持。未來隨著云計算技術和平臺的日益完善與成熟,大數(shù)據(jù)技術也將得到快速提升與發(fā)展,處理數(shù)據(jù)的水平能力也得到顯著提高。
此外,未來大數(shù)據(jù)將與互聯(lián)網、物聯(lián)網等技術領域相互交叉融合,產生更多融合不同行業(yè)、不同領域數(shù)據(jù)的綜合性應用。
大數(shù)據(jù)的安全和隱私問題一直備受國內外關注,未來這個問題依然是學術界和企業(yè)界的重點研究與探索的方向。大數(shù)據(jù)及相關核心資源,不僅關系到商業(yè)機密,而且甚至涉及國家主權,因此,如何保護大數(shù)據(jù)的安全及相關用戶的隱私,成為備受社會各界關注和亟待解決的社會問題。但是當前大數(shù)據(jù)應用所產生的隱私問題和體系自身存在的安全防范問題,尚未取得實質性進展和突破,由此,未來大數(shù)據(jù)的安全與隱私問題依然是一個重要的發(fā)展趨勢。
隨著大數(shù)據(jù)技術的快速發(fā)展,為滿足相關行業(yè)對高水平大數(shù)據(jù)技術人才的需求,政府、高校及相關單位應當加快建立大數(shù)據(jù)技術人才教育培養(yǎng)體系,融合計算機、數(shù)學分析統(tǒng)計及人才培養(yǎng)等相關學科,培養(yǎng)滿足社會市場需求的大數(shù)據(jù)技術人才。
綜上所述,隨著信息技術的快速發(fā)展,在人們的工作生活中,大數(shù)據(jù)技術占據(jù)著重要地位,對社會各個行業(yè)領域的發(fā)展發(fā)揮著重要作用。本文簡單分析大數(shù)據(jù)的概況、特點,指出在互聯(lián)網、云計算的發(fā)展推動下,未來大數(shù)據(jù)將朝著更智能化、先進化、廣泛化的方向發(fā)展,方便人們的生活、為科技發(fā)展提供準確的數(shù)據(jù)決策,最終推動社會經濟的快速發(fā)展。
[參考文獻]
[1]郭麗娟.大數(shù)據(jù)的特點及未來發(fā)展趨勢[J].信息通信,2014(10):195.
[2]郭帥.淺析大數(shù)據(jù)特點及發(fā)展趨勢[J].信息與電腦(理論版),2016(2):25-26.
[3]錢志森.淺析大數(shù)據(jù)的應用及發(fā)展前景[J].信息通信,2014(5):168.
[4]劉瑞玲.淺談大數(shù)據(jù)應用現(xiàn)狀及發(fā)展趨勢[J].科技展望,2017(15):56-59.
[5]胡茹.淺談大數(shù)據(jù)應用現(xiàn)狀及發(fā)展前景[J].科學技術創(chuàng)新,2014(32):19.
[6]劉琳.淺談大數(shù)據(jù)技術發(fā)展趨勢[J].計算機光盤軟件與應用,2014(24):40-41.
[7]王臻,賀小培,張楠.大數(shù)據(jù)背景下公共信息服務供給與運營機制的困局與對策—“智慧朝陽服務網”案例分析[J].電子政務,2014(2):54-59.