大數(shù)據(jù)管理：概念、技術(shù)與挑戰(zhàn)

武非 河南省鄭州市第十一中學(xué)

大數(shù)據(jù)管理：概念、技術(shù)與挑戰(zhàn)

武非 河南省鄭州市第十一中學(xué)

所謂大數(shù)據(jù)，具體來說是指將不同數(shù)據(jù)匯集，從而形成數(shù)量極大的數(shù)據(jù)組，從本質(zhì)屬性分析和計算機之間的關(guān)系極為密切，特別是隨著互聯(lián)網(wǎng)技術(shù)的快速發(fā)展，促使大數(shù)據(jù)時代的到來，這不僅提升人民生活水平，帶動消費，還在某種程度上緩解就業(yè)壓力。文章中簡要分析了目前大數(shù)據(jù)時代大數(shù)據(jù)管理的相關(guān)內(nèi)容，以促進大數(shù)據(jù)管理獲得良好的效果。

大數(shù)據(jù) 概念 技術(shù) 挑戰(zhàn)

現(xiàn)階段社會發(fā)展可謂是日新月異，這與科技創(chuàng)新有著密切的關(guān)聯(lián)，促使人與人之間的交流不斷強化，這些都需要大數(shù)據(jù)的有效管理才能最終實現(xiàn)，對于數(shù)據(jù)進行有效的分析整理，能夠幫助企業(yè)掌握市場銷售規(guī)律，滿足大眾不同的消費需求，以消費拉動經(jīng)濟增長，本文中簡要分析了大數(shù)據(jù)時代到來如何強化大數(shù)據(jù)管理，從而促使大數(shù)據(jù)管理能夠真正體現(xiàn)價值性。

一、大數(shù)據(jù)基本概念闡述

針對大數(shù)據(jù)本身來說，其并不屬于具體概念，從本質(zhì)層面分析，數(shù)據(jù)規(guī)模相對較大，根據(jù)最新的研究定義，所謂大數(shù)據(jù)，其實質(zhì)上是指規(guī)模較大的數(shù)據(jù)，以至于傳統(tǒng)軟件工具并不能對其進行采集，也無法進行存儲與管理。而從另一個角度分析，大數(shù)據(jù)還可以是借助現(xiàn)有理論與方法，加之技術(shù)與工具，都無法實現(xiàn)短時間數(shù)據(jù)分析計算，更無法談得上復(fù)雜數(shù)據(jù)集合。大數(shù)據(jù)時代的到來給我們的生活帶來極大的改變，也對社會經(jīng)濟的發(fā)展起到極大的促進作用。

二、大數(shù)據(jù)關(guān)鍵技術(shù)分析

大數(shù)據(jù)技術(shù)的應(yīng)用在某種程度上能夠?qū)Υ髷?shù)據(jù)進行有效的整理，并且是從不同數(shù)據(jù)中快速獲取有效信息，目前大數(shù)據(jù)技術(shù)種類多樣，這使得大數(shù)據(jù)的收集、存儲、處理，再到呈現(xiàn)都更加便捷。通常來說，大數(shù)據(jù)關(guān)鍵技術(shù)主要包含以下幾個方面：首先，收集技術(shù)。所謂大數(shù)據(jù)收集，主要是通過大數(shù)據(jù)智能感知層，對其進行數(shù)據(jù)的智能化識別，并進行定位、跟蹤，再進行連接與傳輸，而針對基礎(chǔ)支持層，其作用在于為數(shù)據(jù)給予所需虛擬服務(wù)器，還有數(shù)據(jù)庫，以及網(wǎng)絡(luò)資源等等。在這一過程中，則需要優(yōu)化數(shù)據(jù)網(wǎng)絡(luò)傳輸，完善信息壓縮技術(shù)，并且還能做好數(shù)據(jù)隱私保護。其次，大數(shù)據(jù)處理技術(shù)。針對上述環(huán)節(jié)中所獲取的數(shù)據(jù)，實施抽取與清洗。對大數(shù)據(jù)抽取具有重要意義，能夠最大限度大數(shù)據(jù)繁雜的弊端，解決種類繁多弊端，從而能夠讓繁雜的數(shù)據(jù)逐漸單一化，并且能夠快速分解，處理相關(guān)信息；而清洗的目的則非常明確，就是將大數(shù)據(jù)中無用的數(shù)據(jù)進行處理，或是篩出錯誤的信息，這樣讓數(shù)據(jù)的提取更有效。最后，存儲挖掘技術(shù)。對大數(shù)據(jù)進行有效的存儲，并且形成特定的數(shù)據(jù)庫，這樣能夠便于管理與使用。數(shù)據(jù)庫種類繁多，具體來說主要有：鍵值、文檔及圖存等等，此外還需要突破以下技術(shù)：數(shù)控鑒別真?zhèn)巍㈦[私保護、數(shù)據(jù)完整驗證等等。而對于數(shù)據(jù)挖掘來說，能夠讓人獲得直觀的感受，提高效率，這樣才能讓專家獲取精準(zhǔn)的推測，對于現(xiàn)實生活具有極大的促進作用。

三、大數(shù)據(jù)面臨的挑戰(zhàn)

（一）國家重視度較低

大數(shù)據(jù)管理對我國經(jīng)濟發(fā)展起到極大的促進作用，然而其在發(fā)展過程中重視度相對較低，大數(shù)據(jù)的發(fā)展是為了更好的發(fā)展國民經(jīng)濟，滿足時代需求。但是從目前情況分析，大數(shù)據(jù)在我國并未受到極高的關(guān)注度，針對部分重要信息利用率相對較低，特別是相關(guān)部門，他們基本上就是各自為營，不能進行信息溝通與共享，從某種程度來說，在信息收集方面存在不健全的情況，同時還存在重復(fù)性及缺乏時效性。而對于國外相關(guān)企業(yè)來說，他們彼此相互信任、互利共贏，并且進行適當(dāng)?shù)馁Y源共享，相較于我國大數(shù)據(jù)管理具有絕對的優(yōu)勢。這就需要我國政府部門做好相應(yīng)的宏觀調(diào)控，完善相關(guān)體制建設(shè)，關(guān)注信息公開化，從而防止數(shù)據(jù)分裂形式的產(chǎn)生，并且要求其構(gòu)建信息網(wǎng)，提升社會服務(wù)水平，優(yōu)化社會服務(wù)能力。

（二）缺乏創(chuàng)新型人才

大數(shù)據(jù)時代的到來促使創(chuàng)新型人才出現(xiàn)缺失情況，而且相關(guān)體制建設(shè)存在不健全的情況。從人口分布情況分析，我國屬于世界人口大國，但是對于大數(shù)據(jù)應(yīng)用人才而言缺乏，這就需要針對于此提出積極有效的人才隊伍建設(shè)，從而打破理論型人才的壟斷，逐步向?qū)嵺`型人才靠攏，這樣才能將所學(xué)知識應(yīng)用到實踐?，F(xiàn)階段網(wǎng)絡(luò)暴露的弊端越來越顯著，特別是安全性問題日益突出，所以國家相關(guān)法律法規(guī)也在不斷完善，改革也勢在必行，這樣才能防止數(shù)據(jù)信息流失，被濫用，或是被惡意篡改，避免被不法分子竊取，還能最大限度保障客戶信息的安全性，避免私人信息泄露帶來的不便，保障大眾個人信息安全，同時也能保障信息的安全。

（三）數(shù)據(jù)管理安全性

在大數(shù)據(jù)時代，數(shù)據(jù)管理的安全性是非常重要的任務(wù)，現(xiàn)階段數(shù)據(jù)安全威脅非常常見，基本隨時可以發(fā)生，信息網(wǎng)承擔(dān)著極為重要的職責(zé)，一旦出現(xiàn)不法分子破壞，應(yīng)當(dāng)引起警覺，這樣才能減少對國家發(fā)展安全威脅，這期間需要嚴(yán)格關(guān)注大數(shù)據(jù)空氣氣囊，由此判別大數(shù)據(jù)的安全是否受到威脅，以便采取相應(yīng)的措施避免數(shù)據(jù)管理的安全性受到威脅。

四、結(jié)語

總體來說，大數(shù)據(jù)時代的到來對國民經(jīng)濟的發(fā)展起到一定的促進作用，并且能夠優(yōu)化人民的生活狀態(tài)，改善生活質(zhì)量，提升大眾的生活水平。文章簡要闡述了大數(shù)據(jù)的基本概念，分析了大數(shù)據(jù)管理涉及到的關(guān)鍵技術(shù)，并且重點剖析了大數(shù)據(jù)管理迎接的挑戰(zhàn)，以便更好的認(rèn)知大數(shù)據(jù)管理內(nèi)容，獲得更好的管理效果，帶動經(jīng)濟的發(fā)展。

[1]黎建輝,沈志宏,孟小峰.科學(xué)大數(shù)據(jù)管理:概念、技術(shù)與系統(tǒng)[J].計算機研究與發(fā)展,2017,54(02)：235-247.

[2]王欽,蔣懷光,文福拴,梅天華.智能電網(wǎng)中大數(shù)據(jù)的概念、技術(shù)與挑戰(zhàn)[J].電力建設(shè),2016,37(12)：1-10.

[3]郭長亮.探析大數(shù)據(jù)技術(shù)對財務(wù)管理的機遇與挑戰(zhàn)[J].財經(jīng)界(學(xué)術(shù)版),2016,(09)：186+188.

[4]劉銘.大數(shù)據(jù)管理面臨的挑戰(zhàn)及技術(shù)新趨勢[J].信息安全與通信保密,2014,(10)：42-43.

[5]孟小峰,慈祥.大數(shù)據(jù)管理:概念、技術(shù)與挑戰(zhàn)[J].計算機研究與發(fā)展,2013,50(01)：146-169.