大數(shù)據(jù)技術(shù)在計算機(jī)網(wǎng)絡(luò)信息管理中的應(yīng)用研究

高文博

摘 要：在當(dāng)前的計算機(jī)網(wǎng)絡(luò)信息管理中，大數(shù)據(jù)技術(shù)具有廣闊的應(yīng)用前景，文章通過分析大數(shù)據(jù)技術(shù)要點，結(jié)合計算機(jī)網(wǎng)絡(luò)信息管理要求，對大數(shù)據(jù)技術(shù)的應(yīng)計算機(jī)網(wǎng)絡(luò)信息管理的應(yīng)用方案、應(yīng)用領(lǐng)域等進(jìn)行討論，最后對未來大數(shù)據(jù)技術(shù)的發(fā)展方向進(jìn)行研究，希望為進(jìn)一步強(qiáng)化計算機(jī)網(wǎng)絡(luò)信息管理能力奠定基礎(chǔ)。

關(guān)鍵詞：大數(shù)據(jù)技術(shù);計算機(jī)網(wǎng)絡(luò)信息管理;數(shù)據(jù)挖掘

0引言

在當(dāng)前信息技術(shù)快速發(fā)展的背景下，計算機(jī)網(wǎng)絡(luò)信息管理已經(jīng)成為內(nèi)部管理控制的重要組成部分。從信息管理的角度來看，大數(shù)據(jù)是指公司在運營期間所產(chǎn)生的結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)，隨著大數(shù)據(jù)技術(shù)手段的完善，企業(yè)計算機(jī)網(wǎng)絡(luò)信息管理有了新的發(fā)展。為適應(yīng)這一發(fā)展要求，需要深入了解不同大數(shù)據(jù)技術(shù)的應(yīng)用方案，增強(qiáng)對大數(shù)據(jù)技術(shù)的適應(yīng)能力，這也是本文研究的主要目的。

1 大數(shù)據(jù)技術(shù)分析

大數(shù)據(jù)技術(shù)的核心是指數(shù)據(jù)采集、數(shù)據(jù)存取、數(shù)據(jù)統(tǒng)計、數(shù)據(jù)處理等幾方面內(nèi)容，其中的主要技術(shù)包括：（1）數(shù)據(jù)采集。在整個大數(shù)據(jù)技術(shù)的生命周期中，數(shù)據(jù)采集是其中的首要環(huán)節(jié)，按照MapReduce（映射規(guī)約）對大數(shù)據(jù)采集的運行特征可以發(fā)現(xiàn)，在大數(shù)據(jù)采集期間需要運用Web信息系統(tǒng)、科學(xué)管理、物理信息系統(tǒng)等幾個功能模塊。（2）數(shù)據(jù)存取技術(shù)。結(jié)合大數(shù)據(jù)的類型，數(shù)據(jù)存取技術(shù)中主要包括以下幾種類型，如大規(guī)模的數(shù)據(jù)信息、半結(jié)構(gòu)化與非結(jié)構(gòu)化信息、非結(jié)構(gòu)化的混合數(shù)據(jù)。（3）數(shù)據(jù)處理技術(shù)。按照不同數(shù)據(jù)集合的特征以及結(jié)構(gòu)，在處理環(huán)節(jié)可結(jié)合文件、關(guān)系表、XML樹等架構(gòu)，突出各類數(shù)據(jù)信息的異構(gòu)性。其中針對異構(gòu)數(shù)據(jù)集可實現(xiàn)對各類數(shù)據(jù)的整合與集成數(shù)據(jù)處理等，能夠?qū)⒍鄻踊臄?shù)據(jù)整合為一個完整的數(shù)據(jù)平臺，方便相關(guān)人員進(jìn)行查詢與分析。（4）數(shù)據(jù)的統(tǒng)計與分析。在大數(shù)據(jù)技術(shù)的支持下，各類信息的統(tǒng)計處理包含特征檢驗、假設(shè)檢驗、卡方分析、逐級回歸以及因子分析等。這些功能能夠進(jìn)一步理清各類數(shù)據(jù)的關(guān)系。（5）數(shù)據(jù)挖掘。數(shù)據(jù)挖掘需要通過開放的群組，并以用戶為基準(zhǔn)進(jìn)行數(shù)據(jù)連接，確保通過大數(shù)據(jù)能夠?qū)Ω鞣N網(wǎng)絡(luò)行為進(jìn)行識別，總結(jié)數(shù)據(jù)之間的關(guān)系。

2 大數(shù)據(jù)技術(shù)在計算機(jī)網(wǎng)絡(luò)信息管理的應(yīng)用方案

2.1 數(shù)據(jù)獲取技術(shù)在計算機(jī)網(wǎng)絡(luò)信息管理中的應(yīng)用

目前在計算機(jī)網(wǎng)絡(luò)管理中，大數(shù)據(jù)的數(shù)據(jù)技術(shù)主要包括：（1）Hadoop技術(shù)。Hadoop技術(shù)可以對大數(shù)據(jù)分布做開源軟件框架，在計算機(jī)網(wǎng)絡(luò)信息管理中，Hadoop技術(shù)能夠完成數(shù)據(jù)密集型分布，使用Apache2.0許可協(xié)議發(fā)布，并能夠滿足商品硬件構(gòu)建大規(guī)模集群應(yīng)用架構(gòu)。所以在網(wǎng)絡(luò)信息管理中，借助Hadoop技術(shù)可以進(jìn)一步提高各類數(shù)據(jù)的處理能力，并且當(dāng)大數(shù)據(jù)管理平臺構(gòu)建之后，可以完成批量化的數(shù)據(jù)處理，并由此獲得最大化吞吐率，并滿足信息處理過程中數(shù)據(jù)遷移的要求，為提高數(shù)據(jù)計算效率奠定基礎(chǔ)。（2）HBase技術(shù)。作為一種非關(guān)系型的分布式數(shù)據(jù)庫，HBase技術(shù)可以直接處理HDFS文件，并提供“Big Table”規(guī)模的服務(wù)，確保在計算機(jī)網(wǎng)絡(luò)管理中能夠快速獲取海量的數(shù)據(jù)并在最短時間內(nèi)分析數(shù)據(jù)庫中的信息，保證數(shù)據(jù)處理效率。

從技術(shù)應(yīng)用現(xiàn)狀來看，本文所介紹的兩種技術(shù)均具有拓展性強(qiáng)、成本滿意等優(yōu)點，在很多領(lǐng)域都得到了充分的運用，例如在鐵路貨運期間，因為具有冗雜的數(shù)據(jù)，各類數(shù)據(jù)資源的整合難度較大，而借助大數(shù)據(jù)的Hadoop技術(shù)，可以充分協(xié)調(diào)鐵路貨運期間的各種信息，可以充分整合鐵路運輸數(shù)據(jù)倉庫，并由此打造貨運大數(shù)據(jù)平臺，對整個鐵路貨運過程、結(jié)果進(jìn)行實時監(jiān)測，降低了各類數(shù)據(jù)的處理難度。

2.2 數(shù)據(jù)挖掘技術(shù)

在計算機(jī)網(wǎng)絡(luò)信息管理中，大數(shù)據(jù)技術(shù)的數(shù)據(jù)挖掘是較為常見的功能，結(jié)合企業(yè)的信息管理要求，大數(shù)據(jù)的數(shù)據(jù)挖掘技術(shù)應(yīng)用方案包括：（1）定義數(shù)據(jù)挖掘的問題。在計算網(wǎng)絡(luò)信息管理中，數(shù)據(jù)挖掘首先要定義業(yè)務(wù)與數(shù)據(jù)，即確定本次大數(shù)據(jù)處理中需要解決的問題，例如很多企業(yè)為了能夠提高市場營銷能力，則需要將“客戶滿意度”等作為大數(shù)據(jù)挖掘的主要方向。（2）形成數(shù)據(jù)挖掘庫。數(shù)據(jù)挖掘庫是指導(dǎo)網(wǎng)絡(luò)信息管理的關(guān)鍵，通過建立數(shù)據(jù)挖掘庫，能夠?qū)?shù)據(jù)內(nèi)容進(jìn)行編輯，并完成數(shù)據(jù)的整合與合并。（3）數(shù)據(jù)分析。按照計算機(jī)網(wǎng)絡(luò)信息管理的要求，數(shù)據(jù)分析的主要目的是尋找到對預(yù)測輸出結(jié)果影響最大的因素，對于企業(yè)而言，信息管理中需要通過大數(shù)據(jù)對海量字段信息進(jìn)行識別，依托相應(yīng)的功能軟件來提取其中的關(guān)鍵信息。

3 大數(shù)據(jù)技術(shù)的應(yīng)用領(lǐng)域

3.1 在農(nóng)業(yè)領(lǐng)域的應(yīng)用

農(nóng)業(yè)作為基礎(chǔ)性產(chǎn)業(yè)之一，計算機(jī)網(wǎng)絡(luò)信息管理中的農(nóng)業(yè)信息能夠推動現(xiàn)代化農(nóng)業(yè)建設(shè)。我國的實際情況來看，政府部門也在嘗試將大數(shù)據(jù)技術(shù)管理平臺用于服務(wù)農(nóng)業(yè)領(lǐng)域生產(chǎn)，如引入大數(shù)據(jù)技術(shù)能夠?qū)r(nóng)業(yè)生產(chǎn)前、生產(chǎn)中以及生產(chǎn)后的各種數(shù)據(jù)進(jìn)行分析。例如在農(nóng)業(yè)生產(chǎn)之前，整合計算機(jī)網(wǎng)絡(luò)信息之后，依托大數(shù)據(jù)技術(shù)能夠獲取詳細(xì)的農(nóng)業(yè)網(wǎng)絡(luò)信息，幫助種植戶了解農(nóng)業(yè)市場行情、各種農(nóng)產(chǎn)品的收益等。

3.2 在工業(yè)領(lǐng)域的應(yīng)用

在大數(shù)據(jù)時代下，計算機(jī)網(wǎng)絡(luò)信息總量不斷增加，這也對大數(shù)據(jù)信息處理效果提出了更高的要求[1]。在工業(yè)領(lǐng)域，大數(shù)據(jù)技術(shù)的出現(xiàn)能夠滿足工業(yè)制造自動化與制動化的需求。例如在大數(shù)據(jù)的管理平臺上，工業(yè)領(lǐng)域的計算機(jī)網(wǎng)絡(luò)信息管理可以完成工業(yè)產(chǎn)前市場分析、產(chǎn)前產(chǎn)品設(shè)計、信息管理以及產(chǎn)后質(zhì)量檢驗等，并形成供應(yīng)鏈。在大數(shù)據(jù)支持下，可針對工業(yè)制造生產(chǎn)中的在線數(shù)據(jù)查詢、數(shù)據(jù)綜合分析等，為未來工業(yè)生產(chǎn)決策奠定基礎(chǔ)。同時計算機(jī)應(yīng)用技術(shù)以及信息管理與工業(yè)領(lǐng)域之間的融合能夠為工業(yè)生產(chǎn)綜合化管理奠定基礎(chǔ)，例如很多工業(yè)企業(yè)還能實現(xiàn)數(shù)控制造向自動化方向發(fā)展，通過信息管理系統(tǒng)，可在大數(shù)據(jù)平臺的基礎(chǔ)上進(jìn)行人機(jī)交互，用于設(shè)備參數(shù)調(diào)控以及生產(chǎn)線信息管理等。

3.3 在教育領(lǐng)域的應(yīng)用

現(xiàn)階段計算機(jī)網(wǎng)絡(luò)信息管理與教育領(lǐng)域的融合已經(jīng)成為不可阻擋的趨勢，在這種技術(shù)環(huán)境下，大數(shù)據(jù)技術(shù)能夠推動網(wǎng)絡(luò)信息管理智能化進(jìn)程，主要表現(xiàn)在以下兩方面： （1）應(yīng)用大數(shù)據(jù)技術(shù)能夠打造新媒體教育平臺，這是因為新媒體教育平臺對網(wǎng)絡(luò)信息數(shù)據(jù)識別有較高的要求，通過網(wǎng)絡(luò)信息管理，能夠?qū)崟r記錄學(xué)生與教師之間的交流信息，教師也能在平臺上點評學(xué)生的作業(yè)情況，滿足現(xiàn)代網(wǎng)絡(luò)教育下的要求。（2）大數(shù)據(jù)為遠(yuǎn)程網(wǎng)絡(luò)課程奠定基礎(chǔ)，例如通過計算機(jī)網(wǎng)絡(luò)信息能夠為學(xué)生提供交流討論環(huán)節(jié)，使學(xué)生能夠在大數(shù)據(jù)的支持下進(jìn)行經(jīng)驗交流。

4 大數(shù)據(jù)技術(shù)的未來發(fā)展方向

在大數(shù)據(jù)時代到來之后，人們的日常生活發(fā)生了明顯變化，依托大數(shù)據(jù)技術(shù)能夠使人們的日常生活變得更加高效[2]。未來大數(shù)據(jù)技術(shù)將會在技術(shù)應(yīng)用中實現(xiàn)創(chuàng)新與發(fā)展，例如中小企業(yè)可以借助大數(shù)據(jù)技術(shù)進(jìn)行多樣化的技術(shù)支持，從海量數(shù)據(jù)中篩選與行業(yè)服務(wù)有關(guān)的數(shù)據(jù)，并借助大數(shù)據(jù)技術(shù)保證客戶安全、公司機(jī)密等信息安全。因此大數(shù)據(jù)的發(fā)展將會變得更加安全，如防護(hù)系統(tǒng)自我更新等，能夠?qū)⒋髷?shù)據(jù)信息上傳到數(shù)據(jù)中，依托防護(hù)系統(tǒng)完成自我更新，并增強(qiáng)邏輯防護(hù)能力。同時，未來大數(shù)據(jù)技術(shù)與虛擬技術(shù)也會成為主要發(fā)展方向，通過虛擬技術(shù)對網(wǎng)絡(luò)上的各種虛擬資產(chǎn)信息進(jìn)行數(shù)據(jù)分析，并按照使用者提出的要求，充分利用各類數(shù)據(jù)，避免計算機(jī)數(shù)據(jù)系統(tǒng)因為大量處理無用數(shù)據(jù)而出現(xiàn)運行效率低下的問題。

5 結(jié)語

在計算機(jī)網(wǎng)絡(luò)信息管理中，大數(shù)據(jù)技術(shù)具有廣闊的發(fā)展前景，為了更好地迎合市場發(fā)展要求，相關(guān)企業(yè)需要進(jìn)一步優(yōu)化大數(shù)據(jù)技術(shù)的實施路徑，采用多種方法完成網(wǎng)絡(luò)信息資源分配，認(rèn)識到大數(shù)據(jù)技術(shù)在網(wǎng)絡(luò)信息管理中的功能，進(jìn)一步拓展大數(shù)據(jù)技術(shù)的應(yīng)用方向，并將大數(shù)據(jù)技術(shù)作為挖掘有用數(shù)據(jù)的關(guān)鍵，這樣才能為進(jìn)一步促進(jìn)企業(yè)發(fā)展奠定基礎(chǔ)。

[參考文獻(xiàn)]

[1]李丹.大數(shù)據(jù)時代下計算機(jī)網(wǎng)絡(luò)信息安全問題分析[J].無線互聯(lián)科技，2020（11）：15-16.

[2]孫景蓮.云技術(shù)應(yīng)用于農(nóng)機(jī)網(wǎng)絡(luò)信息管理的探索實踐思考[J].農(nóng)業(yè)開發(fā)與裝備，2020（2）：158.

（編輯 何 琳）