在分析了電力營銷業(yè)務(wù)系統(tǒng)面臨的問題的基礎(chǔ)上，闡述了電價分析系統(tǒng)建設(shè)的意義，描述了系統(tǒng)的總體架構(gòu)和主要技術(shù)，介紹了該系統(tǒng)的建設(shè)與實踐經(jīng)驗。該系統(tǒng)的建設(shè)。本文結(jié)合大數(shù)據(jù)平臺優(yōu)勢，實現(xiàn)了多源數(shù)據(jù)的高度融合共享和深度挖掘分析，對探究電力信息化建設(shè)具有重要的實際和指導(dǎo)意義。

【關(guān)鍵詞】電網(wǎng)營銷 電價分析 大數(shù)據(jù)

隨著電價業(yè)務(wù)的不斷拓展和用戶數(shù)據(jù)量的迅猛增長，實現(xiàn)對電價業(yè)務(wù)數(shù)據(jù)的深入挖掘與高效運用顯得越來越重要。然而，隨著業(yè)務(wù)的不斷發(fā)展和對電價業(yè)務(wù)管理的要求不斷提高，迫切需要提升對價格政策的把握與執(zhí)行管理水平。因此，通過設(shè)計適合各級電價業(yè)務(wù)人員使用的電價業(yè)務(wù)分析系統(tǒng)，對推動和支撐電價業(yè)務(wù)管理，實現(xiàn)輸配電價改革的管理目標(biāo)，進一步推動和完善輸配電價分析系統(tǒng)的建設(shè)具有重要的意義。

1 平臺架構(gòu)

電價業(yè)務(wù)分析系統(tǒng)，主要基于大數(shù)據(jù)平臺和“全國統(tǒng)一電力市場技術(shù)支撐系統(tǒng)”、“營銷業(yè)務(wù)應(yīng)用系統(tǒng)”，其中大數(shù)據(jù)平臺提供計算資源、存儲資源、應(yīng)用集成技術(shù)、數(shù)據(jù)分析技術(shù)、應(yīng)用展現(xiàn)技術(shù)等一體化資源服務(wù)。

平臺通過獲取相關(guān)系統(tǒng)的輸配電計量點檔案、測點檔案、電能信息等數(shù)據(jù)，采用自動和手動觸發(fā)獲取方式，實現(xiàn)輸配電相關(guān)的計量點數(shù)據(jù)、測點數(shù)據(jù)、電價等數(shù)據(jù)抽取。通過對抽取數(shù)據(jù)的匯集、同步轉(zhuǎn)換，完成對結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)存儲、分析及處理。系統(tǒng)總體架構(gòu)如圖1所示。

2 主要技術(shù)

2.1 數(shù)據(jù)采集與接入

數(shù)據(jù)采集與接入服務(wù)主要負(fù)責(zé)將全國統(tǒng)一電力市場技術(shù)支撐系統(tǒng)和營銷業(yè)務(wù)應(yīng)用系統(tǒng)的部分相關(guān)數(shù)據(jù)接入至大數(shù)據(jù)平臺中，包括數(shù)據(jù)抽取、數(shù)據(jù)消息隊列管理、補招數(shù)據(jù)接入等三大模塊。具體的流程如圖2。

2.1.1 數(shù)據(jù)抽取

數(shù)據(jù)抽取模塊通過訪問全國統(tǒng)一電力市場技術(shù)支撐系統(tǒng)和營銷業(yè)務(wù)系統(tǒng)的源端數(shù)據(jù)庫，分別抽取歷史數(shù)據(jù)和增量數(shù)據(jù)。從數(shù)據(jù)源抽取的數(shù)據(jù)不一定完全滿足大數(shù)據(jù)平臺的要求，例如數(shù)據(jù)格式的不一致、數(shù)據(jù)輸入錯誤、數(shù)據(jù)不完整等，因此有必要對抽取出的數(shù)據(jù)進行數(shù)據(jù)轉(zhuǎn)換和加工。抽取的數(shù)據(jù)經(jīng)過處理生成約定標(biāo)準(zhǔn)格式的E文件。E文件的格式可以根據(jù)不同的需求進行更改，包括E文件的命名、數(shù)據(jù)行數(shù)、接入的字段等。

2.1.2 數(shù)據(jù)消息隊列管理

通過應(yīng)用分布式消息隊列可有效屏蔽沖擊，對數(shù)據(jù)進行異步緩沖。設(shè)置數(shù)據(jù)在分布式消息隊列中的存儲結(jié)構(gòu)，實現(xiàn)高速寫入，并降低轉(zhuǎn)換開銷；同時需實現(xiàn)基于分布式消息隊列的故障恢復(fù)機制，以確保數(shù)據(jù)不丟失。

2.1.3 補招數(shù)據(jù)接入

由于某些原因，系統(tǒng)可能存在數(shù)據(jù)丟失的情況。所以，針對丟失的數(shù)據(jù)，要提供數(shù)據(jù)接入的接口，用以維護數(shù)據(jù)的完整性。

2.2 數(shù)據(jù)存儲

系統(tǒng)中的不同類型的數(shù)據(jù)，接入至大數(shù)據(jù)平臺后，需要具備易存儲、查詢效率高的特點。數(shù)據(jù)存儲基于HBase集群實現(xiàn)。對于表名規(guī)則，可以按照時間進行分表，數(shù)據(jù)量較小的可以按月分表，數(shù)據(jù)量較大的可以每月分一張表，其表名規(guī)則為“系統(tǒng)代碼_業(yè)務(wù)類型代碼+6月年月時間/4月年份”；在設(shè)計rowkey規(guī)則時，可結(jié)合時間等固定屬性形成靈活可配置的復(fù)合行鍵，這樣可以使得同一時刻點同一設(shè)備下的相關(guān)數(shù)據(jù)鄰近；對于列名規(guī)則，一個列族下有多個列，列名取屬性值。例如，對于計量設(shè)備數(shù)據(jù)，列名可以取計量表的設(shè)備ID。

2.3 數(shù)據(jù)分析

數(shù)據(jù)分析基于大數(shù)據(jù)平臺中的分布式計算引擎Spark實現(xiàn)。結(jié)合Apache Spark中適用于數(shù)據(jù)分析的工具庫，將已采集到的電力數(shù)據(jù)作為訓(xùn)練的數(shù)據(jù)集，運用合適的監(jiān)督學(xué)習(xí)算法，從給定的訓(xùn)練數(shù)據(jù)集中學(xué)習(xí)出一個模型，當(dāng)新的電力數(shù)據(jù)到來時，可以根據(jù)這個模型預(yù)測結(jié)果。根據(jù)業(yè)務(wù)需求，將相關(guān)的業(yè)務(wù)數(shù)據(jù)進行分析，得出相應(yīng)的指標(biāo)參數(shù)，輔助業(yè)務(wù)運營與決策。

2.4 主要應(yīng)用

基于大數(shù)據(jù)平臺的電價分析系統(tǒng)，在對相關(guān)業(yè)務(wù)的趨勢把握、關(guān)鍵因素分析和用電規(guī)律展示，都發(fā)揮著重要的角色。

2.4.1 電價關(guān)鍵指標(biāo)分析

營銷業(yè)務(wù)應(yīng)用系統(tǒng)包含的種類包括客戶檔案數(shù)據(jù)、抄表數(shù)據(jù)以及電費數(shù)據(jù)等多種數(shù)據(jù)，基于這些單一數(shù)據(jù)對電價的分析，往往難以達到理想的效果。結(jié)合大數(shù)據(jù)平臺的分布式計算引擎，將多種類型的數(shù)據(jù)進行關(guān)聯(lián)組合分析，以多個維度作為特征值，進行電價的分析。

2.4.2 力調(diào)電費分析

力調(diào)電費，指供電公司根據(jù)客戶一段時間內(nèi)（如一個月或年）所使用的有無功電量來計算其平均功率因數(shù)，并據(jù)此收取的相關(guān)電費。電費單上的力調(diào)電費的計費數(shù)量，是根據(jù)功率因數(shù)的高低，加收得總電費的百分?jǐn)?shù)（即“調(diào)整率”），這個“調(diào)整率”根據(jù)相應(yīng)功率因數(shù)的高低是不同的，功率因數(shù)高，費率就低，功率因數(shù)低，費率就高。

若某月有功電量是M，無功電量是N，功率因數(shù)是T，則月平均功率因數(shù)是：

若功率因數(shù)標(biāo)準(zhǔn)是0.9，則將實際功率因數(shù)與其進行比較來減收電費和增收電費。根據(jù)電網(wǎng)需要， 可將客戶在一段時間范圍內(nèi)（1年以上）所使用的有無功電量，基于大數(shù)據(jù)平臺，進行統(tǒng)計分析，更好地把握客戶尤其是大客戶的用電規(guī)律。同時根據(jù)用戶的用電規(guī)律，結(jié)合對應(yīng)供電公司的發(fā)展?fàn)顩r，完善功率因數(shù)調(diào)整電費表。

2.4.3 其他應(yīng)用

基于系統(tǒng)的電價業(yè)務(wù)數(shù)據(jù)分析成果，依托于大數(shù)據(jù)平臺強大的存儲能力和計算能力、并結(jié)合營銷業(yè)務(wù)系統(tǒng)的建設(shè)經(jīng)驗，開展上網(wǎng)電價變動因素分析、大用戶分析、兩部制電價執(zhí)行分析、標(biāo)桿電價分析、環(huán)保電價執(zhí)行分析、峰谷分時電價執(zhí)行、電價碼自助查詢、上網(wǎng)側(cè)自助查詢、專項輔助服務(wù)價格測算等應(yīng)用的研究與實現(xiàn)。

3 平臺建設(shè)

電價業(yè)務(wù)分析系統(tǒng)，依托于某網(wǎng)省大數(shù)據(jù)平臺建設(shè)及電價信息化建設(shè)主要成果，實現(xiàn)大數(shù)據(jù)量輸配電價的分析。接入數(shù)據(jù)71.6億條，數(shù)據(jù)量達2.3TB；構(gòu)建了典型的電價分析與查詢等綜合應(yīng)用，補充了現(xiàn)有營銷業(yè)務(wù)應(yīng)用系統(tǒng)在數(shù)據(jù)處理和分析應(yīng)用方面的不足，逐步完善面向領(lǐng)導(dǎo)層的關(guān)鍵指標(biāo)分析、面向業(yè)務(wù)管理層的購售輸專題分析、面向操作層的自助查詢分析及自動分析報告功能體系。

4 結(jié)束語

基于全國統(tǒng)一電力市場技術(shù)支撐系統(tǒng)和營銷業(yè)務(wù)應(yīng)用系統(tǒng)，結(jié)合大數(shù)據(jù)平臺的分布式文件系統(tǒng)、列式數(shù)據(jù)庫、分布式計算引擎等基礎(chǔ)組件，實現(xiàn)了基于輸配電價的電價預(yù)測、監(jiān)控分析、自助查詢，解決了傳統(tǒng)分析型應(yīng)用數(shù)據(jù)反復(fù)抽取、冗余存儲的功能，同時也為高效并實時地掌握電價發(fā)展趨勢開拓了思路，并提供了精細(xì)化的可視化展現(xiàn)形式，提升對電價業(yè)務(wù)的分析和判斷能力，滿足各級電價業(yè)務(wù)人員對輸配電價分析的實際需求。

參考文獻

[1]宮宇，呂金壯.大數(shù)據(jù)挖掘分析在電力設(shè)備狀態(tài)評估中的應(yīng)用[J].南方電網(wǎng)技術(shù)，2014（06）：74-77

[2]孟小峰，慈祥.大數(shù)據(jù)管理：概念、技術(shù)與挑戰(zhàn)[J].計算機研究與發(fā)展，2013，50（01）：146-169.

[3]劉芳.基于數(shù)據(jù)挖掘的電網(wǎng)數(shù)據(jù)只能分析的研究與實現(xiàn)[D].西北大學(xué)，2008.

作者簡介

張珂珩（1972-），男，高級工程師。主要研究方向為電力大數(shù)據(jù)處理技術(shù)研究開發(fā)、建設(shè)運行和技術(shù)管理。

作者單位

江蘇瑞中數(shù)據(jù)股份有限公司 江蘇省南京市 210012endprint