周毅
摘 要: 水行業(yè)是一個信息密集化的行業(yè),對于防洪預測、水庫調度、水資源配置、水環(huán)境模擬等各個環(huán)節(jié)的工作,都需要對相關海量數(shù)據(jù)進行采集、分析和處理,并進行科學合理決策,傳統(tǒng)的模型使用方式已無法滿足智慧水行業(yè)的發(fā)展需求。江河瑞通科技集團有限公司開發(fā)的瑞通模型云平臺,實現(xiàn)了水行業(yè)大數(shù)據(jù)的接入與存儲、分析與預測、可視化的一站式服務,推動水行業(yè)智慧化發(fā)展。
關鍵詞: 模型云平臺;大數(shù)據(jù);智慧;云計算
1引言
近年來,以移動互聯(lián)網、云計算和大數(shù)據(jù)為特征的信息技術架構蓬勃發(fā)展,形成了以大數(shù)據(jù)的深度挖掘與融合應用為特征的智慧化階段,在智慧交通、智慧醫(yī)療、智慧物流等領域都有廣泛的應用,水行業(yè)也在向“智慧”模式轉變。
隨著物聯(lián)網技術的發(fā)展和水行業(yè)信息化的建設,水行業(yè)也積累了海量的數(shù)據(jù)資源,而行業(yè)機理模型是分析復雜多元化的水行業(yè)大數(shù)據(jù)的最有效手段,能為防洪預測、水庫調度、水資源配置、水環(huán)境模擬等應用提供決策支撐。當前,水行業(yè)模型的理論和算法總體處于先進水平,但是仍存在以下問題:
1)模型計算往往是離線式,只支持手動導入數(shù)據(jù),無法根據(jù)實時數(shù)據(jù)進行分析計算;
2)模型使用還是傳統(tǒng)的單機運行模式,計算資源利用率低,計算速度慢;
3)復雜的業(yè)務場景往往需要多個模型耦合計算,但是由于模型標準不統(tǒng)一,很難實現(xiàn)模型之間的協(xié)同工作;
針對以上問題,江河瑞通科技集團有限公司利用自身20年水行業(yè)數(shù)據(jù)分析和行業(yè)模型應用積累,結合IBM先進的云技術,歷時3年累計投資3千余萬開發(fā)了瑞通模型云平臺(RW—Model Cloud)。瑞通模型云平臺以先進云計算架構為基礎,通過模型的標準化將各類水行業(yè)模型接入云平臺,采用虛擬化集群、計算優(yōu)化調度、工作流編排、組件封裝等技術,實現(xiàn)了水行業(yè)大數(shù)據(jù)的接入與存儲、分析與預測、可視化的一站式服務,讓模型“慧”工作,讓水“慧”說話。
2總體框架
瑞通模型云平臺總體框架如下圖所示,包括感知層、信息處理層和應用層三部分,各個層次均有標準規(guī)范和安全體系作為保障。
2.1感知層
模型云平臺采集水行業(yè)各類傳感器實時感知的水雨情、氣象、工情及視頻監(jiān)控等各類數(shù)據(jù),這是瑞通模型云平臺的數(shù)據(jù)來源。
2.2信息處理層
信息處理層是信息匯集、存儲、分析、管理的中心,是模型云平臺的核心層。
多源數(shù)據(jù)通過信息通信網絡傳輸至瑞通云數(shù)據(jù)庫,通過數(shù)據(jù)清洗、數(shù)據(jù)轉換等方式對數(shù)據(jù)質量、數(shù)據(jù)格式進行整編,按照國家標準和行業(yè)標準將數(shù)據(jù)規(guī)則存儲在云計算數(shù)據(jù)中心。
瑞通模型云平臺內置各種不同的計算模型,分別包括:行業(yè)機理模型、數(shù)理統(tǒng)計模型、優(yōu)化配置模型、內容分析模型。按照編排的工作流和模型之間的信息交互,并借助瑞通云強大的計算能力,讓數(shù)據(jù)驅動各個模型協(xié)同完成復雜事件的模擬推演,對海量數(shù)據(jù)進行處理分析。
模型云平臺還為用戶提供模型管理工具,主要包括模型審核、模型注冊、模型評價和任務管理等,為模型的準確性、適用性等方面做出合理評價和管理。
2.3應用層
應用服務層主要為終端用戶提供各種定制化的服務。模型云平臺以用戶需求為導向,通過服務器、短信、微信等方式將分析計算結果反饋給水行業(yè)管理單位或者社會公眾,采取相應的措施和行動,有效解決水行業(yè)的各類問題。這樣,以前水行業(yè)憑經驗解決的問題,現(xiàn)在都能通過模型云平臺,讓水行業(yè)大數(shù)據(jù)指導決策。
2.4標準規(guī)范與安全體系
模型云平臺的運行離不開標準規(guī)范和安全可靠的保障環(huán)境。通過制定《模型自描述標準規(guī)范》、《模型輸入輸出參數(shù)標準規(guī)范》、《模型注冊與集成標準規(guī)范》、《模型云平臺計算服務API規(guī)范》等標準規(guī)范使得平臺可以兼容所有類別的模型。通過建立云平臺運行安全體系,對數(shù)據(jù)、網絡、服務器、代碼、應用、運維管理等進行全方面的保障,保證模型云平臺在安全的環(huán)境下運行。
3平臺功能
瑞通模型云平臺能夠為用戶提供模型集成服務,能夠將模型與實時數(shù)據(jù)連通,將單機離線式運算模型轉變?yōu)樵诰€云計算模式,提升模型的易用性和時效性。同時,模型云平臺自帶模型自優(yōu)化功能,基于預測結果與實時采集的數(shù)據(jù),自動進行模型調優(yōu)與學習,使結果更準確。模型計算結果不僅能通過可視化組件實現(xiàn)定制化展示,也可以提供API接口,方便第三方調用和集成。
4平臺應用
從去年開始,瑞通模型云平臺逐步投入到生產實際中,切實的解決實際問題。四川省宜賓市地處金沙江、岷江交匯處,易受到洪水影響,據(jù)歷史洪災資料統(tǒng)計,宜賓市遭受的大洪水有十余次。針對宜賓的洪水風險,也有許多的模型應用分析,但是洪水的形態(tài)、水利工程狀態(tài)是實時變化的,傳統(tǒng)的模型使用方式無法對現(xiàn)實的洪水風險做出準確的判斷。將針對宜賓市的模型應用優(yōu)化集成至瑞通模型云平臺,結合實時河道水位情況、河道閘門泵站運行情況,通過水力學模型算法進行高速云計算,僅需要5分鐘就可以計算出宜賓一個醫(yī)院、學校、小區(qū)的洪水淹沒情況,可以查詢任意一點的淹沒水深、淹沒時長、洪峰到達時間,3D播放洪水淹沒、演進、退水過程,模擬計算結果還可以實時校正,實現(xiàn)精準預測分析。
在去年汛期,這一系統(tǒng)得到成功應用,為四川省防汛指揮服務提供支撐,并經受住了實測洪水的檢驗,洪水計算結果與實際對比誤差在10%以下,在模型云平臺的基礎上實現(xiàn)了真正的實時精準預測分析。
5結語
水行業(yè)是一個信息密集化的行業(yè),無論是防洪、排澇、抗旱、水環(huán)境保護,還是供水、排水、污水處理等各個環(huán)節(jié)的工作,都需要對相關海量信息進行采集、分析和處理,并進行科學合理決策。瑞通模型云平臺是水行業(yè)內首創(chuàng)的水行業(yè)大數(shù)據(jù)分析平臺,能將水行業(yè)海量數(shù)據(jù)匯集存儲至云數(shù)據(jù)中心,利用云計算等技術對相關數(shù)據(jù)進行分析挖掘,并將分析結果反饋給相關單位或社會公眾,讓水行業(yè)大數(shù)據(jù)為政府、合作伙伴及社會公眾創(chuàng)造更多的價值,推動水行業(yè)智慧化發(fā)展?!?/p>
參考文獻
[1] 夏潤亮,馮興凱,何明民,吳虎統(tǒng),基于模型標準化的水利數(shù)值模擬云服務平臺研究[J].水利信息化,2015(6).
[2] 王忠靜,王光謙,王建華,王浩,基于水聯(lián)網及智慧水利提高水資源效能 [J].水利水電技術,2013(1).
[3] 王超鋒,安跟鳳,袁春麗,智慧水利的發(fā)展和關鍵技術研究[J].河南水利與南水北調,2015(14).
[4] 張剛,解建倉,羅軍剛. 洪水預報模型組件化及應用[J].水利學報,2011 (41).
[5] 杜文印,肖羽,動態(tài)洪水風險圖在佛山城區(qū)防洪中的應用[J].水利信息化,2014(2).