分析大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)

于 沙

（建設(shè)職業(yè)技術(shù)學(xué)院,新疆,830054）

計(jì)算機(jī)信息處理技術(shù)的發(fā)展以及應(yīng)用，對(duì)于人們的生活以及社會(huì)各領(lǐng)域的發(fā)展都有著十分重要的影響。它不僅改變了人們傳統(tǒng)的生活與工作方式，使工作與生活變得簡單高效，同時(shí)，計(jì)算機(jī)信息處理技術(shù)的應(yīng)用，也給很多領(lǐng)域的科技創(chuàng)新，以及人們創(chuàng)造性思維的發(fā)揮提供了有利的條件。電子信息技術(shù)的進(jìn)步與社會(huì)發(fā)展的需求共同作用下，大數(shù)據(jù)時(shí)代已然到來，這也對(duì)計(jì)算機(jī)信息處理技術(shù)提出了更高的要求，加強(qiáng)對(duì)其的研究與開發(fā)有著極大的必要性。

1 “大數(shù)據(jù)”的定義

在當(dāng)今時(shí)代中，“大數(shù)據(jù)”已成為一個(gè)十分重要并且受到廣泛關(guān)注的概念，其之所以能夠稱之為“大數(shù)據(jù)”，必然包含著十分巨大的數(shù)據(jù)量，并且在數(shù)據(jù)的處理上也不能以常規(guī)的方式或處理工具來進(jìn)行。對(duì)于“大數(shù)據(jù)”，一些不同機(jī)構(gòu)給出了不同的定義，以研究機(jī)構(gòu)Gartner為例，這一機(jī)構(gòu)對(duì)于“大數(shù)據(jù)”的定義為：需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。而維基百科上對(duì)于“大數(shù)據(jù)”也做出了稍有不同的定義，即“大數(shù)據(jù)”是指無法在可承受的時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合。兩個(gè)機(jī)構(gòu)雖然對(duì)大數(shù)據(jù)的定義有所不同，但從中我們可以找出一些共同點(diǎn)，也就是對(duì)于數(shù)據(jù)處理方式的較高要求，這也是“大數(shù)據(jù)”的特征之一。

2 “大數(shù)據(jù)”的特點(diǎn)

“大數(shù)據(jù)”區(qū)別于以往我們所認(rèn)知到的數(shù)據(jù)形式與概念，有著其獨(dú)有的特點(diǎn)，具體表現(xiàn)為數(shù)據(jù)量巨大化、信息處理快速化、數(shù)據(jù)種類多樣化、處理技術(shù)復(fù)雜化等。

（1）數(shù)據(jù)量的巨大化是“大數(shù)據(jù)”的最基本特征，在大數(shù)據(jù)時(shí)代中，待處理的計(jì)算機(jī)信息數(shù)據(jù)量十分巨大，并且隨著社會(huì)各領(lǐng)域發(fā)展的需要，以及國家宏觀調(diào)控對(duì)數(shù)據(jù)的大量需求，需要進(jìn)行整合、分析、處理的數(shù)據(jù)量還在飛速增加，原有TB級(jí)別已經(jīng)無法滿足數(shù)據(jù)量的需求，而是跨越了兩個(gè)數(shù)量級(jí)，躍升至ZB的數(shù)量級(jí)別，ZB的數(shù)據(jù)量有多大，我們可以從下面的公式中進(jìn)行了解：1TB=1024GB；1PB=1024TB；1EB=1024PB；1ZB=1024EB；由此計(jì)算1ZB=1024×1024×1024TB，可見大數(shù)據(jù)時(shí)代數(shù)據(jù)量的增長的飛躍性，也正由于這一特點(diǎn)使得“大數(shù)據(jù)”的處理必須要區(qū)別于以往的數(shù)據(jù)信息處理模式，進(jìn)行處理技術(shù)的創(chuàng)新。

（2）信息處理快速化的特點(diǎn)是由“大數(shù)據(jù)”的龐大數(shù)據(jù)量決定的，如果沒有高速化的信息處理技術(shù)支撐，如此龐大的數(shù)據(jù)量根本無法在常規(guī)的時(shí)間范圍內(nèi)實(shí)現(xiàn)有效的運(yùn)算與處理分析，如使用傳統(tǒng)的常規(guī)數(shù)據(jù)處理軟件與設(shè)備進(jìn)行ZB數(shù)量級(jí)別的數(shù)據(jù)處理，恐怕數(shù)據(jù)信息處理時(shí)間要以年為單位計(jì)算，根本無法實(shí)現(xiàn)數(shù)據(jù)的及時(shí)整合分析，更不可能實(shí)現(xiàn)對(duì)“大數(shù)據(jù)”信息的有效應(yīng)用，也正是因此“大數(shù)據(jù)”信息處理工具、系統(tǒng)以及相應(yīng)的軟件不斷地進(jìn)行研發(fā)與更新，通過大量的先進(jìn)電子信息技術(shù)的融入，使之能夠滿足“大數(shù)據(jù)”海量數(shù)據(jù)信息處理的要求，也形成了“大數(shù)據(jù)”所特有的數(shù)據(jù)信息處理高速化的特點(diǎn)，既能夠保障數(shù)據(jù)信息的及時(shí)性與有效性，也使數(shù)據(jù)信息分析、處理的結(jié)果具有更高的價(jià)值。

（3）數(shù)據(jù)類型的多樣化也是“大數(shù)據(jù)”的一大主要特點(diǎn)。在大數(shù)據(jù)時(shí)代中，數(shù)據(jù)的種類早已不再是單一的數(shù)字、文本、圖表的形式，聲、像、圖、文相結(jié)合的數(shù)據(jù)形式已經(jīng)十分普遍。同時(shí)在各類數(shù)據(jù)的格式種類上也是十分豐富繁雜，僅以圖片存儲(chǔ)格式為例，就 包 括 jpg、bmp、tga、tiff、gif、svg、pcx、exif、fpx、psd、cdr、pcd、dxf、ufo、eps、ai、raw等，而其他類型的信息也都有著很多的格式種類，這使“大數(shù)據(jù)”中所包含的數(shù)據(jù)信息類型十分豐富多樣，有著突出的多樣化特征。

（4）處理技術(shù)復(fù)雜化的特點(diǎn)是基于“大數(shù)據(jù)”數(shù)據(jù)量龐大，數(shù)據(jù)類型繁雜多樣，對(duì)數(shù)據(jù)信息處理技術(shù)要求高的特性而形成的。“大數(shù)據(jù)”的海量數(shù)據(jù)信息在傳輸、分析、儲(chǔ)存、處理等方面都具有著巨大的難度，龐大的數(shù)據(jù)量與繁雜的數(shù)據(jù)種類對(duì)于計(jì)算機(jī)信息處理技術(shù)有著極高的要求，針對(duì)不同信息類別以及不同處理要求也要采取相應(yīng)的不同處理技術(shù)，這也就使得針對(duì)大數(shù)據(jù)的計(jì)算機(jī)信息處理技術(shù)呈現(xiàn)出復(fù)雜化發(fā)展的趨勢，并且一些針對(duì)性較強(qiáng)的“大數(shù)據(jù)”任務(wù)，也需要專門的高性能處理軟件系統(tǒng)以及處理技術(shù)予以完成，基于“大數(shù)據(jù)”信息處理需求的各種處理技術(shù)也在不斷的進(jìn)行著研發(fā)，計(jì)算機(jī)信息處理技術(shù)的復(fù)雜化與多樣化已經(jīng)成為了“大數(shù)據(jù)”時(shí)代的一大特征。

3 大數(shù)據(jù)時(shí)代計(jì)算機(jī)信息處理技術(shù)分析

3.1 信息采集技術(shù)

在大數(shù)據(jù)時(shí)代背景下，信息采集技術(shù)變得越來越重要。信息處理與應(yīng)用的基礎(chǔ)與必要條件就是信息的有效采集，大數(shù)據(jù)時(shí)代的龐大信息量要通過先進(jìn)的信息采集技術(shù)進(jìn)行采集與整理，然后才能進(jìn)行其他環(huán)節(jié)的信息處理，并最終被人們所應(yīng)用，因此對(duì)于信息采集技術(shù)的要求也相對(duì)較高。應(yīng)對(duì)龐大的數(shù)據(jù)信息量，計(jì)算機(jī)信息采集技術(shù)不但需要良好的信息采集能力，同時(shí)在對(duì)數(shù)據(jù)信息的篩選與動(dòng)態(tài)監(jiān)控方面也要具有較強(qiáng)的能力，以此來過濾掉“大數(shù)據(jù)”中的無用信息，采集重要相關(guān)數(shù)據(jù)信息，從而提高信息采集的有效性。計(jì)算機(jī)信息采集技術(shù)經(jīng)過不斷的研發(fā)與升級(jí)，已經(jīng)逐漸適應(yīng)了大數(shù)據(jù)時(shí)代信息采集的需求，同時(shí)，也將隨著大數(shù)據(jù)時(shí)代的發(fā)展變化，不斷進(jìn)行技術(shù)改良與優(yōu)化，使其為信息的加工傳輸以及分析處理提供數(shù)據(jù)保障。

3.2 信息加工與傳輸技術(shù)

在信息采集環(huán)節(jié)之后接下來就要進(jìn)行對(duì)數(shù)據(jù)信息的加工處理，并將經(jīng)過加工處理的數(shù)據(jù)信息進(jìn)行傳輸。“大數(shù)據(jù)”的特征也決定了對(duì)信息的加工與傳輸技術(shù)的高要求，在大數(shù)據(jù)時(shí)代下，計(jì)算機(jī)信息加工與傳輸技術(shù)，都必須要有能力適應(yīng)龐大的數(shù)據(jù)信息的運(yùn)算量，要能夠?qū)崿F(xiàn)超大批量的加工以及數(shù)據(jù)傳輸，信息加工的效率與數(shù)據(jù)傳輸?shù)乃俣?，決定著信息的及時(shí)性與有效性，也直接關(guān)系著數(shù)據(jù)的分析與應(yīng)用效果，以及數(shù)據(jù)使用者以數(shù)據(jù)分析結(jié)果為基礎(chǔ)的重要決策的準(zhǔn)確性與科學(xué)性。只有充分保障對(duì)采集到的大量數(shù)據(jù)的高效加工與傳輸，才能夠使其他環(huán)節(jié)的計(jì)算機(jī)信息處理技術(shù)充分發(fā)揮出作用，確保大數(shù)據(jù)的有效應(yīng)用。

3.3 信息存儲(chǔ)技術(shù)

在大數(shù)據(jù)時(shí)代的帶動(dòng)下，互聯(lián)網(wǎng)中的信息資源更加的豐富化、多元化，其中還包括大量的虛擬化的信息，這些都導(dǎo)致數(shù)據(jù)的容量不斷增大，也對(duì)計(jì)算機(jī)的信息存儲(chǔ)技術(shù)提出了更高的要求。在傳統(tǒng)的計(jì)算機(jī)信息存儲(chǔ)過程中，由于數(shù)據(jù)的容量比較小，信息存儲(chǔ)技術(shù)能夠?qū)崿F(xiàn)足夠的存儲(chǔ)量和存儲(chǔ)速度來滿足用戶的需求。但大數(shù)據(jù)的到來已經(jīng)超過了原有的信息存儲(chǔ)技術(shù)的負(fù)荷量，如果繼續(xù)沿用普通的信息存儲(chǔ)技術(shù)，只會(huì)造成資源的大量損耗。因此，現(xiàn)階段應(yīng)當(dāng)結(jié)合大數(shù)據(jù)的特點(diǎn)，研發(fā)新的計(jì)算機(jī)信息存儲(chǔ)技術(shù)，保證計(jì)算機(jī)信息存儲(chǔ)能夠快速、高效的完成。

4 未來計(jì)算機(jī)信息處理技術(shù)的發(fā)展方向

大數(shù)據(jù)時(shí)代的前進(jìn)步伐不可阻擋，同時(shí)以大數(shù)據(jù)為基礎(chǔ)的經(jīng)濟(jì)與社會(huì)的發(fā)展速度也將不斷加快，因此未來計(jì)算機(jī)信息處理技術(shù)的發(fā)展也要充分結(jié)合大數(shù)據(jù)時(shí)代發(fā)展的特征，在加強(qiáng)技術(shù)研發(fā)的同時(shí)也要逐漸擺脫計(jì)算機(jī)硬件設(shè)備對(duì)信息處理技術(shù)的限制，使網(wǎng)絡(luò)數(shù)據(jù)信息脫離于計(jì)算機(jī)硬件，通過云計(jì)算技術(shù)的發(fā)展，形成云計(jì)算機(jī)網(wǎng)絡(luò)，使大數(shù)據(jù)的信息處理不在依賴于硬件設(shè)備。此外，在大數(shù)據(jù)時(shí)代下，計(jì)算機(jī)與信息網(wǎng)絡(luò)的不斷融合也將是一個(gè)必然的發(fā)展趨勢，當(dāng)計(jì)算機(jī)和信息網(wǎng)絡(luò)融合成為一個(gè)整體的大數(shù)據(jù)網(wǎng)絡(luò)系統(tǒng)時(shí)，計(jì)算機(jī)信息處理技術(shù)也將不再是以分散的形式發(fā)展，目前各個(gè)公司獨(dú)立進(jìn)行技術(shù)研發(fā)的形式將被打破，而轉(zhuǎn)變?yōu)橐源髷?shù)據(jù)網(wǎng)絡(luò)系統(tǒng)為中心，多家公司共同合作進(jìn)行技術(shù)的研發(fā)，這也將大大提高未來計(jì)算機(jī)信息處理技術(shù)發(fā)展的速度，使計(jì)算機(jī)信息處理技術(shù)變得更加高效，進(jìn)而更有力的推動(dòng)大數(shù)據(jù)時(shí)代的發(fā)展。

5 總結(jié)

大數(shù)據(jù)時(shí)代的來臨是不可阻擋發(fā)展潮流，為應(yīng)對(duì)大數(shù)據(jù)時(shí)代所帶來的種種變化，以及大數(shù)據(jù)時(shí)代背景下的社會(huì)各領(lǐng)域的發(fā)展需求，加強(qiáng)計(jì)算機(jī)信息處理技術(shù)的研發(fā)與應(yīng)用已經(jīng)成為了必然的選擇，在大數(shù)據(jù)時(shí)代背景下，計(jì)算機(jī)信息處理技術(shù)，不但要應(yīng)對(duì)龐大的數(shù)據(jù)量的采集、加工與處理，同時(shí)還要不斷提高相應(yīng)的信息處理軟硬件的性能，以滿足“大數(shù)據(jù)”發(fā)展的需求，使大數(shù)據(jù)真正發(fā)揮出強(qiáng)大的作用，為社會(huì)的發(fā)展提供巨大的動(dòng)力。

[1]馮瀟婧.“大數(shù)據(jù)”時(shí)代背景下計(jì)算機(jī)信息處理技術(shù)的分析[J].計(jì)算機(jī)光盤軟件與應(yīng)用.2014(05)

[2]陳明兵.大數(shù)據(jù)時(shí)代非物質(zhì)文化遺產(chǎn)資源數(shù)據(jù)庫建設(shè)的思考[J].科技情報(bào)開發(fā)與經(jīng)濟(jì).2014(21)