電網(wǎng)大數(shù)據(jù)智能采集與分析平臺

朱明增 劉小蘭 吳益芝 周素君

摘要：隨著Internet的廣泛應(yīng)用，電子政務(wù)、電子商務(wù)以及企業(yè)ERP（Enterprise Resource Planning）得到迅猛發(fā)展，數(shù)據(jù)的采集、傳輸、展示、交互、等問題顯得越來越重要。報表作為一種信息組織和展示的有力手段，是企業(yè)信息系統(tǒng)的重要組成部分。本文對電網(wǎng)大數(shù)據(jù)智能采集與分析平臺進(jìn)行分析，以供參考。

關(guān)鍵詞：電網(wǎng)大數(shù)據(jù);智能采集;平臺分析

1當(dāng)前公司數(shù)據(jù)管理存在以下四大難題

1.1多套系統(tǒng)并行，易成數(shù)據(jù)孤島

包括計量、變電站、輸電線路據(jù)、配網(wǎng)、EMS系統(tǒng)等數(shù)據(jù)，由于分管不同部門，有多套系統(tǒng)并行，形成數(shù)據(jù)孤島。

1.2業(yè)務(wù)發(fā)展迅速，報表功能跟不上

當(dāng)各個部門收集報表數(shù)據(jù)時，需要基層班組人工制作報表上報，工作量大，報表收集難度大，新增報表需求響應(yīng)慢，無法立即實施。

1.3人工處理數(shù)據(jù)，效率低難復(fù)用

自動化系統(tǒng)不同的報表查詢導(dǎo)出需制作不同的報表模板，且需要自動化維護(hù)員在系統(tǒng)制作系統(tǒng)用戶無法自己操作，報表機(jī)讀取報表速度慢且經(jīng)常出現(xiàn)數(shù)據(jù)量過大卡死現(xiàn)象。根據(jù)二次系統(tǒng)安全防護(hù)要求自動化系統(tǒng)與辦公網(wǎng)絡(luò)無連接，所以報表導(dǎo)出后需要再轉(zhuǎn)存至辦公電腦才能發(fā)送給需求用戶，增加工作量。

1.4業(yè)務(wù)數(shù)據(jù)量大，難以輔助決策;

系統(tǒng)用戶報表需求各異，如公司計劃部，每年9月8日需要統(tǒng)計網(wǎng)區(qū)所有變電站、出線的有功、電流、電壓數(shù)據(jù)，用于線損計算;保護(hù)、方式專業(yè)每月需要統(tǒng)計變電站負(fù)荷、功率因數(shù)、主變及線路平均負(fù)載率、電壓月報表等，數(shù)據(jù)量龐大并且每年報表模板不一致，個性化差異較大，無統(tǒng)一報表管理平臺，用戶、數(shù)據(jù)、報表分散，數(shù)據(jù)整合困難，不能綜合分析。為解決以上難題，提出《電網(wǎng)大數(shù)據(jù)智能采集與分析平臺》，提高報表定制效率，減少重復(fù)勞動。

2多源數(shù)據(jù)定制報表系統(tǒng)技術(shù)簡介及與其實現(xiàn)目標(biāo)

2.1技術(shù)簡介

作為多源數(shù)據(jù)定制報表系統(tǒng)，可以零代碼設(shè)計自定義報表，制作流程相當(dāng)簡單，如圖1所示：

采用VBA編程，結(jié)合Microsoft excel表格友好操作界面設(shè)計報表系統(tǒng)，直接讀取數(shù)據(jù)，只需添加數(shù)據(jù)標(biāo)簽，就可以輕松導(dǎo)出想要的數(shù)據(jù)，功能強(qiáng)大、性能優(yōu)異，且易學(xué)易用、性價比高。通過使用報表系統(tǒng)，無需任何的IT協(xié)助，便可完成報表創(chuàng)建和分發(fā)工作，以直觀的拖拽方式完成報表布局設(shè)計，無需掌握SQL等技術(shù)細(xì)節(jié)，滿足數(shù)據(jù)鉆取、打印和導(dǎo)出等多方面需求，便于設(shè)計出專業(yè)級報表布局，采用最先進(jìn)的報表處理技術(shù)運(yùn)用到電力行業(yè)中：

1）可制作各類報表：支持多數(shù)據(jù)源，能夠根據(jù)一定的規(guī)則把不同來源的數(shù)據(jù)拼裝成想要的報表樣式和結(jié)果。

2）可制作各類填報：支持清單、卡片、主從等填報樣式。并且支持分頁填報，這對大量數(shù)據(jù)的填報是很有必要的。

2.2預(yù)期目標(biāo)

1）需3-4人在2個工作日以上才能完成的報表，采用本平臺后，只需要一個人，半個小時內(nèi)就輕松高效完成大大提高工作效率。

2）本平臺系統(tǒng)應(yīng)用于調(diào)度班夜班負(fù)荷統(tǒng)計報表、賀州地調(diào)自動化系統(tǒng)月度運(yùn)行指標(biāo)報表、月度電壓統(tǒng)計報表等上百個數(shù)據(jù)報表。

3系統(tǒng)的核心技術(shù)：

3.1數(shù)據(jù)過濾

面對企業(yè)內(nèi)的大規(guī)模數(shù)據(jù)，單個報表中經(jīng)常會有成千上萬條的數(shù)據(jù)量，逐行查看數(shù)據(jù)是不切實際且非常耗時，并且不同類型的用戶關(guān)心的數(shù)據(jù)或分析數(shù)據(jù)的角度也不同，因此通過數(shù)據(jù)過濾和篩選來幫助用戶選擇各自符合條件的數(shù)據(jù)，從而節(jié)省大量瀏覽數(shù)據(jù)的時間，避免一些無用的工作。系統(tǒng)提供了單條件、組合條件、級聯(lián)條件和模糊條件對數(shù)據(jù)進(jìn)行過濾篩選。

3.2交互式分析

報表系統(tǒng)為決策層報表提供了多樣化的數(shù)據(jù)交互式分析能力，決策者不僅能夠一目了然的分析業(yè)務(wù)發(fā)展趨勢，還能以交互的方式操作報表數(shù)據(jù)，進(jìn)行深入、透徹的業(yè)務(wù)分析。常用的交互方式包括：數(shù)據(jù)鉆取、深化、排序、URL跳轉(zhuǎn)、圖表表格聯(lián)動、動態(tài)表格、文檔目錄等。通過使用報表系統(tǒng)，無需任何的IT協(xié)助，便可完成報表創(chuàng)建和分發(fā)工作，以直觀的拖拽方式完成報表布局設(shè)計，無需掌握SQL等技術(shù)細(xì)節(jié)，滿足數(shù)據(jù)鉆取、打印和導(dǎo)出等多方面需求，便于設(shè)計出專業(yè)級報表布局。

4平臺使用說明

4.1條件

1）window 7系統(tǒng)電腦、Microsoft Office2007及以上版本或者wps軟件;

2）Oraclexe安裝包;

3）從Oracle獲取數(shù)據(jù)（2007版）.xlsm報表收資平臺;

4）報表定制模塊.xls，例如調(diào)度班夜班報表template.xls;

5）遙測表.xls;

4.2軟件安裝

將Oraclexe安裝包解壓，雙擊運(yùn)行OracleXEUniv.exe，選擇下一步->選擇接受->下一步->任意輸入口令，如1->安裝->安裝完成。

4.3報表定制

4.3.1數(shù)據(jù)庫數(shù)據(jù)采集功能流程圖和詳細(xì)流程描述

首先讀取數(shù)據(jù)庫的配置，包括ip、端口、用戶名、密碼等，建立數(shù)據(jù)庫讀取通道，根據(jù)定義好的域名表名進(jìn)行數(shù)據(jù)讀取，讀取自動化系統(tǒng)webIII服務(wù)器的oracle數(shù)據(jù)庫，將數(shù)據(jù)保存到相應(yīng)的表中。

4.3.2報表格式定制功能流程圖和詳細(xì)流程描述

根據(jù)需要采集的報表數(shù)據(jù)要求，定義域名和表名，讀取的原始數(shù)據(jù)是每個5分鐘的采樣點，求數(shù)據(jù)最大最小值、平均值等特殊要求需做公式定義數(shù)據(jù)模式，然后定制報表格式模板。

4.4系統(tǒng)數(shù)據(jù)庫連接設(shè)置界面

在此界面可以看到數(shù)據(jù)庫連接配置信息，包括：地址、SID、端口號、用戶名、密碼等。

4.5系統(tǒng)數(shù)據(jù)模板信息與定時設(shè)置界面

在此界面可以看到數(shù)據(jù)模板信息與定時信息配置，包括：模板文件名稱、模板名稱、域名從第幾行開始顯示、域名從第幾列開始顯示、是否復(fù)制其他sheet、每天幾點執(zhí)行、執(zhí)行后是否關(guān)閉文檔、定時執(zhí)行按鈕、定時停止按鈕、執(zhí)行按鈕等。

5取得效益分析

5.1經(jīng)濟(jì)效益

計算依據(jù)：調(diào)度班的電量統(tǒng)計報表、監(jiān)控班的日報表、自動化班的綜合報表及各部門報表（約32個報表）都需要獲取調(diào)度數(shù)據(jù)網(wǎng)的大量遙測數(shù)據(jù)，人工導(dǎo)出錄入需要花費(fèi)大量的時間，采用本軟件平均每天能節(jié)省7小時工時，按每人每天工資300元人民幣計算，每年節(jié)省人工費(fèi)：65天*300元/人=10.95萬元。

5.2社會效益

報表是企業(yè)應(yīng)用系統(tǒng)中不可缺少的一種數(shù)據(jù)展現(xiàn)方式，它可以為用戶特別是企業(yè)中高層用戶提供直觀的數(shù)據(jù)視圖（進(jìn)行自動的統(tǒng)計計算，如求和，求平均，對分組進(jìn)行小計等），為用戶制定商業(yè)計劃和決策提供基礎(chǔ)和依據(jù)。報表同時也是商業(yè)智能應(yīng)用中實現(xiàn)數(shù)據(jù)可視化的方式之一。因此一套靈活并且可多源數(shù)據(jù)獲取定制的報表工具可以為企業(yè)帶來生產(chǎn)力的巨大提升。

結(jié)束語

本系統(tǒng)為單位各個部門大數(shù)據(jù)報表制作提供方便，使得調(diào)度班、自動化班等能輕松獲取調(diào)度數(shù)據(jù)網(wǎng)的大數(shù)據(jù)，減輕工作量，每年經(jīng)濟(jì)效益可以達(dá)到10.95萬元，本成果已在本單位內(nèi)部推廣，調(diào)度班、監(jiān)控班、自動化班等班組已使用本報表系統(tǒng)生成報表。

參考文獻(xiàn)

[1]翟進(jìn)乾，張凱，李文建，王心怡，王國民.基于大數(shù)據(jù)的智能電網(wǎng)信息系統(tǒng)設(shè)計[J].電子設(shè)計工程，2019，27（23）：99-102+107.

[2]萬方林.智能電網(wǎng)大數(shù)據(jù)處理技術(shù)現(xiàn)狀與挑戰(zhàn)研究[J].通訊世界，2019，26（10）：197-198.