大數(shù)據(jù)技術(shù)在能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)管理中的應(yīng)用

羅慶璇

（國(guó)網(wǎng)寧夏電力公司寧東供電公司，寧夏銀川 750001）

0 引言

大數(shù)據(jù)技術(shù)是在科技不斷進(jìn)步與發(fā)展中，提出的一種用于對(duì)數(shù)據(jù)進(jìn)行實(shí)時(shí)分析、對(duì)數(shù)據(jù)進(jìn)行價(jià)值挖掘的綜合技術(shù)。隨著大數(shù)據(jù)技術(shù)在市場(chǎng)內(nèi)的推進(jìn)，傳統(tǒng)的數(shù)據(jù)處理手段、數(shù)據(jù)運(yùn)維方式、數(shù)據(jù)管理工具便逐漸被淘汰。而產(chǎn)生此種現(xiàn)象的原因主要是傳統(tǒng)的數(shù)據(jù)處理技術(shù)在實(shí)際應(yīng)用中，極易出現(xiàn)運(yùn)維死角、大批量數(shù)據(jù)處理卡頓等問(wèn)題，無(wú)法在根本層面對(duì)數(shù)據(jù)信息的安全性、結(jié)構(gòu)穩(wěn)定性給予保障[1]。而新技術(shù)的引進(jìn)，解決了傳統(tǒng)技術(shù)存在的不足與漏洞，改變了原有落后的數(shù)據(jù)處理技術(shù)，實(shí)現(xiàn)基于智能化層面達(dá)到對(duì)信息的高效率處理需求。盡管這項(xiàng)技術(shù)的引進(jìn)基于某種層面為社會(huì)企業(yè)的建設(shè)與發(fā)展帶來(lái)了新的指導(dǎo)方向，但與此同時(shí)企業(yè)在經(jīng)濟(jì)市場(chǎng)內(nèi)的競(jìng)爭(zhēng)趨勢(shì)也越發(fā)顯著。為了確保大數(shù)據(jù)技術(shù)的應(yīng)用可在真正意義上做到對(duì)企業(yè)發(fā)展的推動(dòng)，文章以能源互聯(lián)網(wǎng)企業(yè)為例，對(duì)其在市場(chǎng)內(nèi)運(yùn)營(yíng)所產(chǎn)生的數(shù)據(jù)進(jìn)行獲取[2]。并結(jié)合大數(shù)據(jù)技術(shù)在此過(guò)程中的應(yīng)用，設(shè)計(jì)一種可真正應(yīng)用于企業(yè)的數(shù)據(jù)管理方法，避免企業(yè)運(yùn)營(yíng)中過(guò)多的冗余數(shù)據(jù)對(duì)其造成影響，降低企業(yè)人工管理大批量數(shù)據(jù)所需要投入的資金，全面落實(shí)對(duì)企業(yè)數(shù)據(jù)管理結(jié)構(gòu)的優(yōu)化，有效提升企業(yè)數(shù)據(jù)管理效率。

1 基于大數(shù)據(jù)技術(shù)的能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)管理方法

1.1 基于大數(shù)據(jù)技術(shù)的企業(yè)價(jià)值數(shù)據(jù)挖掘

以能源互聯(lián)網(wǎng)企業(yè)為例，引進(jìn)大數(shù)據(jù)技術(shù)對(duì)企業(yè)內(nèi)部?jī)r(jià)值數(shù)據(jù)與信息進(jìn)行挖掘定位。在此過(guò)程中，應(yīng)先明確能源互聯(lián)網(wǎng)企業(yè)內(nèi)部數(shù)據(jù)信息的構(gòu)成，采用建立企業(yè)內(nèi)部多個(gè)工作部門之間聯(lián)系的方式，對(duì)企業(yè)數(shù)據(jù)進(jìn)行概述（圖1）[3]。

圖1 能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)構(gòu)成

按照?qǐng)D1 所示的企業(yè)數(shù)據(jù)構(gòu)成，結(jié)合大數(shù)據(jù)在此過(guò)程中可支撐的分布式結(jié)構(gòu)，將數(shù)據(jù)N 與信息M 按照HDFS 的方式，存儲(chǔ)在企業(yè)內(nèi)部計(jì)算機(jī)指定空間內(nèi)。在這一過(guò)程中采用Python 編程語(yǔ)言構(gòu)建系統(tǒng)數(shù)據(jù)存儲(chǔ)模塊。

在此基礎(chǔ)上，需要識(shí)別高風(fēng)險(xiǎn)數(shù)據(jù)在Python 編程過(guò)程中的編碼隊(duì)列特征，使用大數(shù)據(jù)技術(shù)定位并掌握不同類型數(shù)據(jù)集合潛在的某種規(guī)律性[4]。結(jié)合約減算法實(shí)現(xiàn)對(duì)大批量數(shù)據(jù)呈現(xiàn)的特征進(jìn)行有效識(shí)別。并使用計(jì)算機(jī)在此過(guò)程中作為終端設(shè)備，建立面向能源互聯(lián)網(wǎng)企業(yè)的文本資源庫(kù)。將存在某種特征的企業(yè)數(shù)據(jù)進(jìn)行深度處理，處理過(guò)程可參照深度學(xué)習(xí)理論執(zhí)行。對(duì)企業(yè)數(shù)據(jù)的深度處理過(guò)程可用式（1）表示。

式中，si表示為企業(yè)價(jià)值數(shù)據(jù)潛在規(guī)律；d 表示為對(duì)企業(yè)數(shù)據(jù)的深度處理行為；i 表示為大批量數(shù)據(jù)集合在編碼過(guò)程中的排列規(guī)則；s 表示為數(shù)據(jù)在Python 編碼器中的字符長(zhǎng)度；T 表示為對(duì)數(shù)據(jù)的一個(gè)處理周期；t 表示為數(shù)據(jù)單次執(zhí)行過(guò)程。

在完成對(duì)能源互聯(lián)網(wǎng)企業(yè)的初步計(jì)算與處理后，輸出s 數(shù)據(jù)集合，并將s 集合數(shù)據(jù)進(jìn)行疊加處理，刪除數(shù)據(jù)組中的冗余數(shù)據(jù)內(nèi)容，將剩余數(shù)據(jù)按照規(guī)模導(dǎo)出，以此作為企業(yè)的價(jià)值數(shù)據(jù)。

1.2 基于層次結(jié)構(gòu)劃分企業(yè)市場(chǎng)運(yùn)營(yíng)管理項(xiàng)目

在完成對(duì)企業(yè)價(jià)值數(shù)據(jù)的挖掘基礎(chǔ)上，以能源互聯(lián)網(wǎng)企業(yè)為例，基于層次結(jié)構(gòu)的指示下，對(duì)能源互聯(lián)網(wǎng)企業(yè)在市場(chǎng)中的運(yùn)營(yíng)與組織項(xiàng)目進(jìn)行劃分[5]。在此過(guò)程中，可參照柯克帕特里克層次評(píng)估模型結(jié)構(gòu)，將能源互聯(lián)網(wǎng)企業(yè)內(nèi)部運(yùn)營(yíng)與組織管理項(xiàng)目按照實(shí)際內(nèi)容劃分為4 個(gè)部分（表1）。

如表1 所示，通過(guò)多渠道與多手段，對(duì)能源互聯(lián)網(wǎng)企業(yè)的管理項(xiàng)目層次結(jié)構(gòu)進(jìn)行劃分，以實(shí)現(xiàn)對(duì)企業(yè)數(shù)據(jù)中心管理項(xiàng)目的高效率輸出。

表1 基于層次結(jié)構(gòu)劃分人力資源管理項(xiàng)目

1.3 高效率企業(yè)數(shù)據(jù)集成管理

在對(duì)能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)信息集成管理的過(guò)程中，考慮到很多管理數(shù)據(jù)在類型以及格式方面存在不統(tǒng)一的現(xiàn)象，因此，基于大數(shù)據(jù)的集成功能，將高績(jī)效人力資源信息相關(guān)管理數(shù)據(jù)統(tǒng)一集成管理[6]。通過(guò)此種方式，保證數(shù)據(jù)信息之間能夠相互調(diào)用，滿足企業(yè)對(duì)數(shù)據(jù)提出的綜合管理現(xiàn)實(shí)需求。

不僅如此，還能夠基于大數(shù)據(jù)，在眾多信息中提取數(shù)據(jù)源信息，將其作為核心數(shù)據(jù)，以HTTY 的統(tǒng)一格式歸類到能源互聯(lián)網(wǎng)企業(yè)內(nèi)部數(shù)據(jù)庫(kù)中。完成上述操作后，相關(guān)管理人員便可以直接通過(guò)數(shù)據(jù)庫(kù)，對(duì)企業(yè)數(shù)據(jù)信息執(zhí)行相應(yīng)的添加、修改、刪除等管理行為。

在研究過(guò)程中，考慮到計(jì)算機(jī)數(shù)據(jù)運(yùn)行存在的內(nèi)存問(wèn)題，對(duì)此，采用分布式存儲(chǔ)方式，在保證數(shù)據(jù)存儲(chǔ)完成性的同時(shí)，最大限度地降低其內(nèi)存[7]。與此同時(shí)，在集成管理企業(yè)數(shù)據(jù)的過(guò)程中，應(yīng)為數(shù)據(jù)信息提供相關(guān)的安全保護(hù)功能，在數(shù)據(jù)庫(kù)的信息能夠有效避免由于惡意入侵導(dǎo)致信息丟失以及被篡改的問(wèn)題。以此，完成基于大數(shù)據(jù)技術(shù)的能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)管理方法的綜合設(shè)計(jì)。

2 對(duì)比實(shí)驗(yàn)

至此，在理論層面上已完成了針對(duì)能源互聯(lián)網(wǎng)企業(yè)的數(shù)據(jù)管理方法理論設(shè)計(jì)，為進(jìn)一步實(shí)現(xiàn)以能源互聯(lián)網(wǎng)企業(yè)為導(dǎo)向的數(shù)據(jù)綜合管理，將所提設(shè)計(jì)的數(shù)據(jù)管理方法與傳統(tǒng)數(shù)據(jù)管理方法，同時(shí)應(yīng)用于同一能源互聯(lián)網(wǎng)企業(yè)當(dāng)中，并在完成對(duì)企業(yè)內(nèi)大批量數(shù)據(jù)的綜合管理后，驗(yàn)證兩種管理方法的實(shí)際應(yīng)用效果。

實(shí)驗(yàn)中，選擇能源互聯(lián)網(wǎng)企業(yè)作為對(duì)比實(shí)驗(yàn)的實(shí)驗(yàn)條件，分別利用兩種數(shù)據(jù)管理方法執(zhí)行對(duì)數(shù)據(jù)的管理，該企業(yè)在市場(chǎng)運(yùn)行中產(chǎn)生的數(shù)據(jù)量較大，且該單位在經(jīng)濟(jì)市場(chǎng)內(nèi)的成立時(shí)間較長(zhǎng)，主要經(jīng)營(yíng)業(yè)務(wù)為：提供各類信息技術(shù)開(kāi)發(fā)方案、技術(shù)咨詢方案、通信問(wèn)題解決方案等。針對(duì)該企業(yè)的實(shí)際運(yùn)行情況，利用HPWS 繪制企業(yè)內(nèi)部運(yùn)營(yíng)數(shù)據(jù)變化趨勢(shì)指標(biāo)圖，并給出相應(yīng)的待管理數(shù)據(jù)集合及數(shù)據(jù)管理要求，以此為后續(xù)兩種方法在管理過(guò)程中提供執(zhí)行管理行為的目標(biāo)條件。能源互聯(lián)網(wǎng)企業(yè)的運(yùn)營(yíng)數(shù)據(jù)量在同行業(yè)當(dāng)中處于相對(duì)領(lǐng)先的地位，也正由于如此，企業(yè)才能夠在市場(chǎng)內(nèi)保持相對(duì)穩(wěn)定的發(fā)展。通過(guò)訪談、實(shí)踐等方式更加深入地了解該企業(yè)，并以此為例，深入開(kāi)展對(duì)能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)管理的研究。為確保對(duì)比實(shí)驗(yàn)的公正性，將兩種方法的運(yùn)行環(huán)境均設(shè)置成圖2形式。

除圖2 運(yùn)行條件以外，兩種方法在執(zhí)行中的硬件環(huán)境均設(shè)置為550 G 容量硬盤、55 G 內(nèi)存服務(wù)器和4 G 內(nèi)存客戶端。軟件環(huán)境設(shè)置為Windows Server 18.6 服務(wù)器、瀏覽器客戶端。結(jié)合圖1 中的系統(tǒng)運(yùn)行環(huán)境，在確保能源互聯(lián)網(wǎng)企業(yè)內(nèi)部數(shù)據(jù)可有效傳輸?shù)那疤嵯?，使用兩種方法進(jìn)行數(shù)據(jù)的集成管理，并在其運(yùn)行過(guò)程中由企業(yè)內(nèi)部管理部門人員完成對(duì)相關(guān)數(shù)據(jù)信息的記錄。為方便對(duì)兩種方法進(jìn)行對(duì)比，將數(shù)據(jù)信息的管理效率作為評(píng)價(jià)指標(biāo)，其計(jì)算公式為：完成管理的信息/需要進(jìn)行管理的信息總量×100%。通過(guò)計(jì)算得出相應(yīng)的實(shí)驗(yàn)結(jié)果，并將其記錄如表2 所示（本次研究以企業(yè)一個(gè)工作日為例）。

圖2 企業(yè)內(nèi)部數(shù)據(jù)運(yùn)行環(huán)境示意

表2 兩種方法實(shí)驗(yàn)結(jié)果對(duì)比 %

從表2 的實(shí)驗(yàn)結(jié)果可以看出，所提方法的管理效率均在95.0%以上，而傳統(tǒng)方法的管理效率最高僅為78.4%，因此所提方法的管理效率明顯高于傳統(tǒng)方法。通過(guò)對(duì)比實(shí)驗(yàn)進(jìn)一步證明，針對(duì)能源互聯(lián)網(wǎng)企業(yè)設(shè)計(jì)的基于大數(shù)據(jù)技術(shù)的數(shù)據(jù)管理方法，在實(shí)際應(yīng)用中，具有更高的管理效率，能夠有效提高能源互聯(lián)網(wǎng)企業(yè)內(nèi)部信息資源的管理效率，促進(jìn)新能源企業(yè)的可持續(xù)發(fā)展。

3 結(jié)論

提出一種基于大數(shù)據(jù)技術(shù)的能源互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)管理方法，并在完成方法的理論設(shè)計(jì)后，采用設(shè)計(jì)對(duì)比實(shí)驗(yàn)的方式，對(duì)方法的有效性進(jìn)行驗(yàn)證。經(jīng)檢驗(yàn)，所提方法在進(jìn)行企業(yè)數(shù)據(jù)管理中具備更高的執(zhí)行效率，可滿足企業(yè)對(duì)于數(shù)據(jù)管理的綜合需求。