陳柯宇 孫韻 官慶 劉新 任曉翠
摘 要 基于西南油氣田公司頁巖氣數(shù)據(jù)集成共享需求,本文在結(jié)合各業(yè)務(wù)系統(tǒng)業(yè)務(wù)現(xiàn)狀及頁巖氣特殊業(yè)務(wù)分析基礎(chǔ)上,確定了頁巖氣主數(shù)據(jù)范圍及標(biāo)準(zhǔn),構(gòu)建了數(shù)據(jù)治理框架體系,并依托公司主數(shù)據(jù)管理系統(tǒng),實現(xiàn)了公司層面各業(yè)務(wù)系統(tǒng)頁巖氣主數(shù)據(jù)的完整性、唯一性、規(guī)范性、一致性、關(guān)聯(lián)性。并且通過應(yīng)用實踐,有效支撐了智能分析平臺數(shù)據(jù)業(yè)務(wù)。
關(guān)鍵詞 頁巖氣;主數(shù)據(jù);數(shù)據(jù)治理;方法應(yīng)用
引言
主數(shù)據(jù)是指在整個企業(yè)范圍內(nèi)被多個應(yīng)用系統(tǒng)共享的、相對靜態(tài)的、核心的、高價值的數(shù)據(jù),也稱企業(yè)基準(zhǔn)數(shù)據(jù)。主數(shù)據(jù)能夠創(chuàng)建和維護(hù)相關(guān)領(lǐng)域各業(yè)務(wù)及系統(tǒng)數(shù)據(jù)的一致性、完整性、相關(guān)性和準(zhǔn)確性。因此頁巖氣主數(shù)據(jù)治理是實現(xiàn)頁巖氣數(shù)據(jù)集中管理與共享核心任務(wù),為油氣田“智能頁巖氣田建設(shè)”夯實數(shù)據(jù)基礎(chǔ)。
1頁巖氣主數(shù)據(jù)治理流程設(shè)計
主數(shù)據(jù)治理流程分為三大部分,分別為數(shù)據(jù)質(zhì)控、數(shù)據(jù)入庫、數(shù)據(jù)分發(fā)。
①數(shù)據(jù)質(zhì)控:主數(shù)據(jù)經(jīng)過問題發(fā)現(xiàn)、問題整改、數(shù)據(jù)庫修改3個階段來發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題、治理問題數(shù)據(jù),確保主數(shù)據(jù)的唯一性、準(zhǔn)確性。②數(shù)據(jù)入庫:將質(zhì)控正確的主數(shù)據(jù)通過ETL工具,加載到主數(shù)據(jù)管理平臺數(shù)據(jù)庫。③數(shù)據(jù)分發(fā):借助公司主數(shù)據(jù)管理平臺,將正確的頁巖氣主數(shù)據(jù)分發(fā)至各個業(yè)務(wù)系統(tǒng),實現(xiàn)各個業(yè)務(wù)系統(tǒng)頁巖氣數(shù)據(jù)一致性[1]。
2頁巖氣主數(shù)據(jù)治理實施
2.1 頁巖氣主數(shù)據(jù)治理評估
(1)主數(shù)據(jù)范圍確定:對各業(yè)務(wù)系統(tǒng)頁巖氣業(yè)務(wù)數(shù)據(jù)使用情況進(jìn)行梳理,然后由數(shù)據(jù)治理專家組結(jié)合頁巖氣實際數(shù)據(jù)使用情況和頁巖氣特色業(yè)務(wù)進(jìn)行分析,形成分公司范圍內(nèi)一致的、完整的、準(zhǔn)確的頁巖氣核心業(yè)務(wù)數(shù)據(jù)。
(2)主數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范:依托分公司主數(shù)據(jù)管理平臺,建立頁巖氣主數(shù)據(jù)命名規(guī)范、模型標(biāo)準(zhǔn)規(guī)范、編碼規(guī)范、主數(shù)據(jù)關(guān)聯(lián)關(guān)系及主數(shù)據(jù)準(zhǔn)確性、完整性業(yè)務(wù)邏輯規(guī)則,制定全生命周期的質(zhì)量管理流程。
列:井名命名規(guī)范:①井號最長不能超過50個字符;②命名結(jié)構(gòu):井名+井號;③井號若出現(xiàn)重復(fù)時,需進(jìn)行重復(fù)處理;若某一構(gòu)造中一個井號重復(fù)需更改時,則這一構(gòu)造上的所有井號應(yīng)按相同原則全部更改。④井號中的阿拉伯?dāng)?shù)字、英文字母或特殊字符(如“-”)保持不變。⑤井號中的羅馬數(shù)字需轉(zhuǎn)變成相應(yīng)的阿拉伯?dāng)?shù)字;如Ⅰ、Ⅱ分別轉(zhuǎn)變成1、2。
(3)主數(shù)據(jù)差異分析:對不同類型的主數(shù)據(jù),各確定一個相對權(quán)威數(shù)據(jù)源系統(tǒng),然后將其他各業(yè)務(wù)系統(tǒng)的數(shù)據(jù),依次與權(quán)威源系統(tǒng)數(shù)據(jù)進(jìn)行對比分析,將權(quán)威源系統(tǒng)缺失的信息或疑似一致的信息(列:主數(shù)據(jù)名稱命名不規(guī)范,實為同一個主數(shù)據(jù);如‘寧209H27-1和‘寧209H27-1實為同一口井)梳理總結(jié),形成差異分析報告以及差異分析表。
(4)主數(shù)據(jù)信息收集:將主數(shù)據(jù)差異分析結(jié)果派發(fā)至各業(yè)務(wù)單位,由各業(yè)務(wù)單位確認(rèn)反饋。
(5)主數(shù)據(jù)問題整改:將各單位反饋的主數(shù)據(jù)進(jìn)行整理清寫,并在數(shù)據(jù)庫臨時環(huán)境中進(jìn)行更新完善。
(6)主數(shù)據(jù)治理評估:按照數(shù)據(jù)治理的規(guī)范流程從完整性、唯一性、規(guī)范性、一致性、關(guān)聯(lián)性五個方面對更新后的數(shù)據(jù)開展數(shù)據(jù)治理評估工作,對評估結(jié)果不滿足的主數(shù)據(jù)再次進(jìn)行信息反饋確認(rèn)。
2.2? 頁巖氣主數(shù)據(jù)入庫管理
(1)主數(shù)據(jù)管理系統(tǒng)入庫:數(shù)據(jù)治理技術(shù)組通過ETL工具,將確認(rèn)后的權(quán)威主數(shù)據(jù)信息從臨時環(huán)境加載到主數(shù)據(jù)管理系統(tǒng)。
(2)業(yè)務(wù)系統(tǒng)入庫:借助主數(shù)據(jù)管理平臺,將分公司頁巖氣主數(shù)據(jù)信息分發(fā)至各業(yè)務(wù)系統(tǒng)。至此,實現(xiàn)了公司所有業(yè)務(wù)系統(tǒng)頁巖氣主數(shù)據(jù)的完整性、唯一性、規(guī)范性、一致性、關(guān)聯(lián)性[2]。
3結(jié)束語
數(shù)據(jù)質(zhì)量是保證數(shù)據(jù)應(yīng)用的基礎(chǔ),本文通過對頁巖氣主數(shù)據(jù)進(jìn)行治理,確保主數(shù)據(jù)規(guī)范“五性”,即:完整性、規(guī)范性、唯一性、準(zhǔn)確性、關(guān)聯(lián)性。避免各應(yīng)用系統(tǒng)相互共享數(shù)據(jù)形成網(wǎng)狀結(jié)構(gòu),同時能夠保證對外提供準(zhǔn)確、一致的數(shù)據(jù)。通過數(shù)據(jù)治理提升數(shù)據(jù)質(zhì)量,為生產(chǎn)態(tài)勢感知提供精準(zhǔn)數(shù)據(jù)支撐,通過建立數(shù)據(jù)標(biāo)準(zhǔn)、規(guī)范,構(gòu)建數(shù)據(jù)治理架構(gòu),實現(xiàn)和完善數(shù)據(jù)共享機(jī)制從而幫助油田單位通過數(shù)據(jù)分析和復(fù)用降低成本提高效益。
參考文獻(xiàn)
[1] 續(xù)瑾成.淺談數(shù)據(jù)治理在數(shù)據(jù)質(zhì)量管理中的作用[J].中國管理信息化,2016,31(18):192.
[2] 張瓊文.試論數(shù)據(jù)治理在數(shù)據(jù)質(zhì)量管理中的作用[J].通訊世界,2017,28(3):140-141.
作者簡介
陳柯宇(1987-),男;畢業(yè)院校:西南石油大學(xué),專業(yè):電信科技,學(xué)歷:學(xué)士學(xué)位,職稱:工程師,現(xiàn)就職單位:中國石油西南油氣田公司通信與信息技術(shù)中心,研究方向:信息系統(tǒng)研發(fā)和運(yùn)維。