大數(shù)據(jù)技術在煉化企業(yè)的應用分析及研究

唐曉平

摘 要 本文首先分析了目前大數(shù)據(jù)技術在煉化企業(yè)應用中出現(xiàn)的問題，然后結(jié)合目前大數(shù)據(jù)技術在煉化企業(yè)中的應用問題進行了詳細的總結(jié)，煉化企業(yè)信息化的發(fā)展和工業(yè)化的轉(zhuǎn)變?nèi)诤鲜菬捇髽I(yè)發(fā)展的主要趨勢，需要提高大數(shù)據(jù)技術在煉化企業(yè)中的應用比重，旨在為煉化企業(yè)的發(fā)展提供理論保障，同時為提高煉化企業(yè)的核心競爭力奠定基石。

關鍵詞 大數(shù)據(jù)技術；煉化企業(yè)；應用

1 目前大數(shù)據(jù)技術在煉化企業(yè)應用中出現(xiàn)的問題

1.1 還沒有形成數(shù)據(jù)管理模式

目前大數(shù)據(jù)技術在煉化企業(yè)中的應用還處于初級階段，所以在決策者方面還沒有形成系統(tǒng)的數(shù)據(jù)管理模式，還不能夠利用數(shù)據(jù)進行理性思維的運用和發(fā)展，很多煉化企業(yè)在遇到問題還沒有形成針對數(shù)據(jù)進行理性分析，絕大多數(shù)還停留在根據(jù)自己的經(jīng)驗和直覺來解決問題，在解決問題上沒有根據(jù)數(shù)據(jù)之間的關聯(lián)性以及邏輯性進行分析，同時在管理方面也沒有依靠數(shù)據(jù)去進行邏輯思維的分析，僅僅依靠業(yè)務驅(qū)動管理，所以大數(shù)據(jù)技術僅僅停留在理論層面，而沒有考慮到實踐方面的問題。

1.2 收集數(shù)據(jù)缺少非結(jié)構(gòu)化數(shù)據(jù)

非結(jié)構(gòu)化數(shù)據(jù)再大數(shù)據(jù)技術中屬于比較重要的一種數(shù)據(jù)類型，主要包含的形式有視頻、語音、圖片以及文檔等，但是在目前的煉化企業(yè)中，針對大數(shù)據(jù)的收集與整理主要涉及的是結(jié)構(gòu)化的數(shù)據(jù)，針對非機構(gòu)化數(shù)據(jù)的采集與收集比較匱乏，并且很多文件沒有實行電子化，這就導致數(shù)據(jù)再保存的過程中容易遺失，然而進行數(shù)據(jù)的重建需要消耗大量的時間，甚至有些數(shù)據(jù)可能無法恢復[1]。

1.3 大數(shù)據(jù)技術相關的信息基礎設施滯后

大數(shù)據(jù)技術的發(fā)展需要依靠相關的信息基礎設施來保障，煉化企業(yè)中信息化技術也處于不斷發(fā)展的階段，目前在煉化企業(yè)中信息基礎設施建設也在不斷發(fā)展，但是大數(shù)據(jù)時代的到來，需要依靠更加先進的基礎設施建設，但是目前針對大數(shù)據(jù)技術的相關基礎設施建設還比較落后，信息采集設備的傳感器、海量數(shù)據(jù)信息的存儲都還是目前比較重要的問題，同時針對數(shù)據(jù)分析的軟件還比較落后，針對數(shù)據(jù)的儲存還沒有形成規(guī)?；脑破脚_，這些都導致大數(shù)據(jù)技術在煉化企業(yè)中的發(fā)展受到限制。

1.4 大數(shù)據(jù)技術相關人才缺乏

大數(shù)據(jù)技術針對人才的綜合素質(zhì)要求更高，目前煉化企業(yè)中的工作人員針對大數(shù)據(jù)技術的專業(yè)知識認識較低，同時針對相關數(shù)據(jù)處理和分析沒有專業(yè)技術能力，煉化企業(yè)中缺少能夠?qū)Υ髷?shù)據(jù)進行分析與管理的復合型人才，所以導致煉化企業(yè)中即使收集到海量的數(shù)據(jù)，但是沒有相關的專業(yè)人才能夠?qū)?shù)據(jù)進行充分的處理與分析，這就導致大數(shù)據(jù)技術的發(fā)展緩慢。

1.5 數(shù)據(jù)共享還不能實現(xiàn)

大數(shù)據(jù)技術在煉化企業(yè)中的應用需要依靠大量的數(shù)據(jù)，這些數(shù)據(jù)的處理與分析需要許多相關的技術部分和企業(yè)的數(shù)據(jù)，但是目前很對部門或者企業(yè)針對自己的信息沒有進行開放，數(shù)據(jù)還處于保密的階段，所以大數(shù)據(jù)技術在運用的過程中得不到海量的數(shù)據(jù)來支撐，這就導致大數(shù)據(jù)技術不能充分發(fā)揮自己的功能，所以大數(shù)據(jù)技術收集的數(shù)據(jù)缺乏完整性，數(shù)據(jù)分析的結(jié)果也存在一定的片面化[2]。

2 大數(shù)據(jù)技術在煉化企業(yè)中的應用

2.1 數(shù)據(jù)庫技術（NoSQL）

傳統(tǒng)的數(shù)據(jù)庫屬于關系型的數(shù)據(jù)庫，但是NoSQL主要是指非關系型的數(shù)據(jù)庫，數(shù)據(jù)類型屬于非結(jié)構(gòu)化的數(shù)據(jù)形式，和原來傳統(tǒng)的數(shù)據(jù)庫相比，這種非結(jié)構(gòu)化的數(shù)據(jù)庫主要是是根據(jù)列的模式來進行數(shù)據(jù)的存儲，在橫向上具有更高的擴展性，數(shù)據(jù)可以不用保持一致，但是在結(jié)果上需要保持匹配，并且它能夠在很多臺服務器上進行工作，展開工作的形式主要是分布協(xié)作，這種數(shù)據(jù)庫能夠保障多種SQL語言的應用，處理數(shù)據(jù)的能力比較強。

2.2 分布式并行處理技術（MapReduce）

這種基數(shù)主要是將需要解決的問題進行自動分割，將其拆分成map和reduce的形式，map主要是指映射，reduce是指化簡，分割后的數(shù)據(jù)在Map函數(shù)的處理下被映射成許多不同的區(qū)塊，然后這些區(qū)塊會被分配給計算機中的不同處理節(jié)點進行處理，得到一種結(jié)果，然后這種結(jié)果經(jīng)過Reduce函數(shù)的處理得出最后的結(jié)果。這種形式的數(shù)據(jù)處理能夠?qū)?shù)據(jù)進行分割處理，準確性更高。煉化企業(yè)利用這種數(shù)據(jù)技術，能夠在原先服務器和園區(qū)網(wǎng)基礎上進行信息化建設成本的有效控制[3]。

2.3 預處理技術（ETL）

大數(shù)據(jù)的預處理技術主要為了保障數(shù)據(jù)挖掘的質(zhì)量以及數(shù)據(jù)處理的效率，再進行數(shù)據(jù)的采集之后，需要對數(shù)據(jù)進行填補、平滑、合并以及規(guī)格化的與處理工作，這些數(shù)據(jù)分散在不同的數(shù)據(jù)庫系統(tǒng)中，然后通過提取、轉(zhuǎn)換以及加載數(shù)據(jù)達到預處理的效果。ETL只要是將數(shù)據(jù)提取到臨時中間層，然后進行數(shù)據(jù)的清洗、轉(zhuǎn)換以及集成工作，最后將數(shù)據(jù)放到目標數(shù)據(jù)庫和相對應的文件存儲系統(tǒng)中，這些數(shù)據(jù)為數(shù)據(jù)挖掘提供基礎。

2.4 可視化技術

目前大數(shù)據(jù)在煉化企業(yè)中提供的交互方式主要分為五種形式，分別是數(shù)據(jù)挖掘和統(tǒng)計之間的交互、任意分析和查詢之間的交互、企業(yè)報表、立方體分析以及報表分析和預警之間的交互等五種形式，這五種形式的交互的程度和規(guī)模上各不相同，C/S架構(gòu)和B/S架構(gòu)是大數(shù)據(jù)可視化技術的數(shù)據(jù)分析結(jié)果展現(xiàn)的兩種形式，在這兩種形式中，C/S更趨向于可操作性，B/S更趨向于智能化，主要是針對管理決策層。在煉化企業(yè)的合同管理系統(tǒng)中，面向企業(yè)的決策者合同查詢界面就屬于比較靈活多樣的商業(yè)智能化形式[4]。

3 結(jié)束語

綜上所述，大數(shù)據(jù)技術在煉化企業(yè)的發(fā)展過程中占據(jù)著重要的位置，特別是大數(shù)據(jù)技術的相關技術的應用對煉化企業(yè)的發(fā)展具有重要的意義，但是目前大數(shù)據(jù)技術在煉化企業(yè)的應用中仍然存在較多的問題，所以需要加強對大數(shù)據(jù)技術的研究與推廣，促進大數(shù)據(jù)技術在煉化企業(yè)發(fā)展中的應用，為煉化企業(yè)的發(fā)展打下堅實的基礎。

參考文獻

[1] 李德芳，蔣白樺，王宏安，等.煉化企業(yè)MES體系結(jié)構(gòu)的分析與設計[J].現(xiàn)代化工，2004，24（z2）：48-52.

[2] 姜頑強，張靜淑.GIS在煉化企業(yè)廠區(qū)外管道安全管理中的應用研究[J].中國管理信息化，2014，（11）：57-58，59.

[3] 韓廣新.大數(shù)據(jù)技術助力煉化企業(yè)智能工廠建設[J].設備管理與維修，2015，（12）：10-12.

[4] 路世忠，朱理琛，蔣白樺，等.煉化企業(yè)動力設備的集成維護管理系統(tǒng)研究[J].計算機集成制造系統(tǒng)，2007，13（1）：132-135，146.