孫敏
[摘 要]數(shù)據(jù)治理,是油田智能化的基礎(chǔ)建設(shè)之一,也是最重要的一項(xiàng)工程。本文以油田數(shù)據(jù)建設(shè)為研究對象,基于數(shù)據(jù)治理工程的思想理念和體系,以數(shù)據(jù)池技術(shù)和數(shù)據(jù)治理工具技術(shù)為基礎(chǔ),建立了油田的數(shù)據(jù)池平臺(tái),促使油田數(shù)據(jù)鏈路逐漸趨于正?;?,數(shù)據(jù)存儲(chǔ)逐漸趨于標(biāo)準(zhǔn)化,數(shù)據(jù)應(yīng)用逐漸趨于智能化,數(shù)據(jù)管理的效率也得到了明顯的提升。
[關(guān)鍵詞]數(shù)字油田;數(shù)據(jù)治理;數(shù)字化;智能化
doi:10.3969/j.issn.1673 - 0194.2018.06.021
[中圖分類號(hào)]F270.7 [文獻(xiàn)標(biāo)識(shí)碼]A [文章編號(hào)]1673-0194(2018)06-00-02
0 引 言
慶新油田于2010年開始實(shí)施油田數(shù)字化管理建設(shè),并取得了良好的成果,目前,運(yùn)行良好。其雖然具有良好的油田數(shù)字化建設(shè)系統(tǒng),但缺少科學(xué)的反饋機(jī)制、數(shù)據(jù)管控組織架構(gòu)及有效的數(shù)據(jù)管理工具等,從而造成了數(shù)據(jù)質(zhì)量控制的很多問題,最為關(guān)鍵的是,“數(shù)據(jù)鴻溝”與“信息孤島”的現(xiàn)象比較嚴(yán)重,嚴(yán)重影響智能油田的建設(shè)與發(fā)展。因此,為了完善油田大數(shù)據(jù)應(yīng)用,為現(xiàn)代化油田數(shù)據(jù)應(yīng)用奠定基礎(chǔ),為慶新油田從數(shù)字油田邁向智能油田提供足夠的數(shù)據(jù)支撐,需要在慶新油田范圍內(nèi)實(shí)施全面的數(shù)據(jù)治理工程。
1 油田數(shù)據(jù)治理工程
1.1 油田數(shù)據(jù)治理工程理念
數(shù)據(jù)治理是指,針對油田現(xiàn)有的數(shù)據(jù),因條塊分割、“數(shù)據(jù)鴻溝”和“信息孤島”而導(dǎo)致的數(shù)據(jù)混亂狀態(tài),實(shí)施統(tǒng)一、規(guī)范化的整治與合理化、科學(xué)化的建設(shè)過程。
油田數(shù)據(jù)治理工程遵循的基本思想理念有以下幾方面。
①將數(shù)據(jù)作為一項(xiàng)工程,加大對數(shù)據(jù)的科學(xué)研究。②油田數(shù)據(jù)建設(shè)是智能油田建設(shè)的中心工作,需加快思想及技術(shù)轉(zhuǎn)型,要由IT思維轉(zhuǎn)為DT思維。③數(shù)據(jù)建設(shè)的核心是,打開從數(shù)據(jù)到數(shù)據(jù)、從數(shù)據(jù)到應(yīng)用的通道。④依照數(shù)據(jù)采、存、管、用規(guī)律,完成數(shù)據(jù)鏈路上每一個(gè)環(huán)節(jié)的智能化。
依據(jù)數(shù)據(jù)治理的這一理念,本文針對慶新油田數(shù)據(jù)存在的數(shù)據(jù)分散與“信息孤島”現(xiàn)象,使數(shù)據(jù)共享應(yīng)用困難;數(shù)據(jù)多樣化,缺少統(tǒng)一標(biāo)準(zhǔn),數(shù)據(jù)集成應(yīng)用困難;數(shù)據(jù)存在質(zhì)量問題多,難以支撐精準(zhǔn)化、智能化的高級(jí)別應(yīng)用;數(shù)據(jù)生產(chǎn)部門多、數(shù)據(jù)使用部門廣、數(shù)據(jù)管理部門因?yàn)楣芾頇C(jī)制等問題互相推脫,導(dǎo)致數(shù)據(jù)應(yīng)用不暢,效率低下;油田行業(yè)雖形成了大數(shù)據(jù),但針對其應(yīng)用處理非常困難,尤其還存在數(shù)據(jù)基礎(chǔ)工作沒有完善、無法支撐高級(jí)應(yīng)用等問題,導(dǎo)致無法開展智能油田建設(shè),因此有必要實(shí)施大規(guī)模的、全體總動(dòng)員的數(shù)據(jù)治理工程。
1.2 油田數(shù)據(jù)治理工程體系建設(shè)
數(shù)據(jù)治理,需要很強(qiáng)的理論指導(dǎo),更需要完整的工程體系。慶新油田在數(shù)據(jù)治理之前,首先完成了數(shù)據(jù)治理工程體系的建設(shè),包括4大部分:組織體系、管理體系、技術(shù)體系和執(zhí)行體系,如圖1所示。
1.2.1 組織體系
由于數(shù)據(jù)治理是一個(gè)巨大的系統(tǒng)工程,所以,必須要具有強(qiáng)有力的組織領(lǐng)導(dǎo)機(jī)制。本文依照數(shù)據(jù)規(guī)律,在油田范圍內(nèi)劃分出數(shù)據(jù)生產(chǎn)者、數(shù)據(jù)使用者和數(shù)據(jù)管理者,以加強(qiáng)對數(shù)據(jù)治理的組織與領(lǐng)導(dǎo)。
1.2.2 管理體系
管理體系是進(jìn)行數(shù)據(jù)治理的重要基礎(chǔ)內(nèi)容,旨在保障數(shù)據(jù)治理可以在科學(xué)合理的標(biāo)準(zhǔn)和機(jī)制下進(jìn)行,包括制定數(shù)據(jù)標(biāo)準(zhǔn)、建立數(shù)據(jù)運(yùn)行機(jī)制、制定數(shù)據(jù)應(yīng)用規(guī)則、創(chuàng)建數(shù)據(jù)模型以及制定數(shù)據(jù)管理與監(jiān)督制度。
1.2.3 技術(shù)體系
技術(shù)體系是以數(shù)據(jù)融合、整合、治理工具為基礎(chǔ),完成數(shù)據(jù)治理的基本步驟,主要包括數(shù)據(jù)探查與鉆取、數(shù)據(jù)清洗和整理、數(shù)據(jù)集成和提升以及數(shù)據(jù)融合和應(yīng)用。
1.2.4 執(zhí)行體系
在全面的數(shù)據(jù)治理后,將會(huì)形成以數(shù)據(jù)池為核心的數(shù)據(jù)產(chǎn)生機(jī)制、數(shù)據(jù)管理機(jī)制、數(shù)據(jù)應(yīng)用規(guī)則與數(shù)據(jù)服務(wù)機(jī)制。執(zhí)行體系的建立包括業(yè)務(wù)梳理、數(shù)據(jù)分析、考核評(píng)估與管控機(jī)制等。
1.3 油田數(shù)據(jù)治理工程解決方案
本文根據(jù)慶新油田數(shù)據(jù)治理思想理念與慶新油田數(shù)據(jù)治理體系架構(gòu),形成了慶新油田數(shù)據(jù)治理工程解決方案,如圖2所示。
圖2顯示,在數(shù)據(jù)治理中包含兩大核心關(guān)鍵技術(shù):數(shù)據(jù)治理工具技術(shù)與數(shù)據(jù)池。其中,數(shù)據(jù)治理工具是整個(gè)數(shù)據(jù)治理工程的技術(shù)核心。本文引入長安大學(xué)數(shù)字油田研究所自主研發(fā)的Datist技術(shù),其特點(diǎn)包括強(qiáng)大的數(shù)據(jù)讀取能力,可視化的數(shù)據(jù)處理過程,豐富的數(shù)據(jù)處理方法,能夠?qū)崿F(xiàn)數(shù)據(jù)的提取、清洗、整理、呈現(xiàn)、推送等處理工作,專業(yè)的GIS分析功能,實(shí)時(shí)推送數(shù)據(jù)功能。
數(shù)據(jù)池是數(shù)據(jù)治理的核心部件,主要包括虛擬的大數(shù)據(jù)庫技術(shù)與思想。數(shù)據(jù)庫可以存放在云端交織在一起的各類數(shù)據(jù),其格式是不同的,可以是Oracle,也可以是MySQL等關(guān)系型數(shù)據(jù)庫。數(shù)據(jù)池兼容多種數(shù)據(jù)格式,也包含其他非數(shù)據(jù)文件。各個(gè)數(shù)據(jù)池之間彼此獨(dú)立,互不影響,無大小、邊界限制,擴(kuò)充能力強(qiáng)。
2 油田數(shù)據(jù)治理工程實(shí)施案例及應(yīng)用效果
2.1 案列背景分析
本文以開關(guān)井日數(shù)據(jù)臺(tái)賬為例,這是油井動(dòng)態(tài)分析的一項(xiàng)重要工作,主要涉及“開關(guān)井日數(shù)據(jù)表”“單井基礎(chǔ)信息表”“油井產(chǎn)量數(shù)據(jù)表”“關(guān)井原因代碼表”等多個(gè)數(shù)據(jù)。其中,前三張表存放在A系統(tǒng)庫中,這個(gè)庫的數(shù)據(jù)量十分龐大,想要查詢一條記錄往往需要幾分鐘甚至幾十分鐘。查詢到想要的數(shù)據(jù)后,還需要對各個(gè)表之間的數(shù)據(jù)進(jìn)行關(guān)聯(lián),對關(guān)井前的產(chǎn)量進(jìn)行統(tǒng)計(jì),費(fèi)時(shí)費(fèi)力,效率低。本文希望通過數(shù)據(jù)治理,快速而準(zhǔn)確地加以解決。
2.2 方法與技術(shù)
為了數(shù)據(jù)的快速、好用,本文需要解決三個(gè)問題:查詢速度、自動(dòng)統(tǒng)計(jì)、報(bào)表呈現(xiàn)。
第一,查詢速度。根據(jù)管理體系規(guī)則,通過數(shù)據(jù)庫技術(shù),定期將“關(guān)井日數(shù)據(jù)表”“單井基礎(chǔ)信息表”“油井產(chǎn)量月數(shù)據(jù)表”中的有效數(shù)據(jù)同步到數(shù)據(jù)池中,同步完成后,查詢速度從數(shù)分鐘提高到秒級(jí)。
第二,自動(dòng)統(tǒng)計(jì)。依據(jù)技術(shù)體系的規(guī)范,運(yùn)用Datist數(shù)據(jù)專家,制作“關(guān)井單井日數(shù)據(jù)臺(tái)賬”的流程。由于Datist強(qiáng)大的數(shù)據(jù)驅(qū)動(dòng)能力及可視化的處理過程,原本需要掌握復(fù)雜數(shù)據(jù)庫知識(shí)的數(shù)據(jù)庫開發(fā)人員或者編程人員才能完成的復(fù)雜程序,現(xiàn)在通過Datist數(shù)據(jù)專家軟件就能快速設(shè)計(jì)出來。
第三,報(bào)表呈現(xiàn)。當(dāng)數(shù)據(jù)組織完成后,Datist就可以輸出獨(dú)立的報(bào)表。
2.3 數(shù)據(jù)治理工程效果
實(shí)踐表明,經(jīng)過先期數(shù)據(jù)治理工程的實(shí)施和數(shù)據(jù)池平臺(tái)的建立,有效解決了一定范圍內(nèi)的數(shù)據(jù)共享和集成問題,使得數(shù)據(jù)的錄入、轉(zhuǎn)存、同步、查詢、過濾等效率成倍提升,取得了顯著的效果。例如:完成了包括組織體系、管理體系、技術(shù)體系和執(zhí)行體系的油田數(shù)據(jù)治理工程體系;形成了以數(shù)據(jù)治理工具為技術(shù)核心、數(shù)據(jù)池為核心部件的數(shù)據(jù)治理工程解決方案;數(shù)據(jù)治理工程也有效解決了一定范圍內(nèi)的數(shù)據(jù)共享和集成問題;將原來的數(shù)據(jù)獲取時(shí)間縮短到秒級(jí),具有速度快、效率高的特點(diǎn),為開展智能油田建設(shè)和油田大數(shù)據(jù)應(yīng)用了奠定了良好的數(shù)據(jù)基礎(chǔ)。
主要參考文獻(xiàn)
[1]高志亮,梁寶娟.數(shù)字油田在中國——油田物聯(lián)網(wǎng)技術(shù)與進(jìn)展[M].北京:科學(xué)出版社,2013
[2]高志亮,高倩.數(shù)字油田在中國——油田數(shù)據(jù)工程與科學(xué)[M].北京:科學(xué)出版社,2015.
[3]馮莉.數(shù)據(jù)質(zhì)量控制體系在油田信息管理中的應(yīng)用[J].科技創(chuàng)新導(dǎo)報(bào),2012(24).
[4]李清輝,曾穎.油田數(shù)據(jù)中心建設(shè)及發(fā)展方向探討[J].石油工業(yè)計(jì)算機(jī)應(yīng)用,2005(3).
[5]陳建華.油田中心數(shù)據(jù)庫建設(shè)思路與方法[J].中國管理信息化,2014(1).
[6]段鴻杰.油田企業(yè)數(shù)據(jù)中心建設(shè)思考[J].數(shù)字石油和化工,2007(6).