王超+郭振+蔡云飛

摘要：隨著大數(shù)據(jù)時代的蓬勃發(fā)展，數(shù)據(jù)成為了企業(yè)發(fā)展的重要戰(zhàn)略資源，企業(yè)越來越發(fā)的認(rèn)識到基于大數(shù)據(jù)的數(shù)據(jù)分析對企業(yè)的可持續(xù)發(fā)展具有戰(zhàn)略性作用。目前國內(nèi)外各大企業(yè)大數(shù)據(jù)應(yīng)用研發(fā)蓬勃發(fā)展，但存在缺乏統(tǒng)籌、分析方法各異、分析成果缺乏統(tǒng)一管理和共享等不足，制約了數(shù)據(jù)價值的有效發(fā)揮。因此，需亟待開展企業(yè)級大數(shù)據(jù)應(yīng)用管理體系研究，規(guī)范大數(shù)據(jù)分析應(yīng)用建設(shè)，發(fā)揮企業(yè)數(shù)據(jù)價值，支撐企業(yè)業(yè)務(wù)創(chuàng)新。

關(guān)鍵詞：大數(shù)據(jù)；數(shù)據(jù)應(yīng)用；管理體系

中圖分類號：TP181 文獻(xiàn)標(biāo)識碼：B 文章編號：1009-3044（2017）27-0246-03

1 大數(shù)據(jù)應(yīng)用背景和概念

1.1 大數(shù)據(jù)應(yīng)用背景

國家將大數(shù)據(jù)視為經(jīng)濟轉(zhuǎn)型發(fā)展、重塑競爭優(yōu)勢和提升政府治理能力的重要機遇。大數(shù)據(jù)已上升為國家戰(zhàn)略，各級政府大力推進(jìn)，發(fā)布多項政策，扶持和引導(dǎo)相關(guān)產(chǎn)業(yè)發(fā)展。

（1） 宏觀政策

國家將大數(shù)據(jù)視為經(jīng)濟轉(zhuǎn)型發(fā)展、重塑競爭優(yōu)勢和提升政府治理能力的重要機遇。大數(shù)據(jù)已上升為國家戰(zhàn)略，各級政府大力推進(jìn)，發(fā)布多項政策，扶持和引導(dǎo)相關(guān)產(chǎn)業(yè)發(fā)展。

（2） 技術(shù)環(huán)境

云計算、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)等技術(shù)的逐漸成熟和集中應(yīng)用，催生了數(shù)據(jù)時代，為大數(shù)據(jù)應(yīng)用分析提供了數(shù)據(jù)基礎(chǔ)。大數(shù)據(jù)應(yīng)用分析技術(shù)不斷發(fā)展，形成了以Hadoop等開源技術(shù)框架為主，多種技術(shù)融合發(fā)展的技術(shù)體系，為大數(shù)據(jù)的存儲、分析、展示等提供有力支持。

（3） 應(yīng)用形勢

當(dāng)前，大數(shù)據(jù)技術(shù)發(fā)展日新月異，大數(shù)據(jù)應(yīng)用需求旺盛，政府連續(xù)出臺扶持政策，大數(shù)據(jù)應(yīng)用規(guī)模已呈現(xiàn)爆發(fā)趨勢，應(yīng)用價值日益突顯；

大數(shù)據(jù)已被廣泛應(yīng)用到金融、電商、交通、醫(yī)療、工業(yè)制造等領(lǐng)域；

權(quán)威機構(gòu)預(yù)計到2020年，我國大數(shù)據(jù)直接應(yīng)用市場規(guī)模將達(dá)8000億元；

美國麻省理工學(xué)院的研究發(fā)現(xiàn)，使用數(shù)據(jù)驅(qū)動決策的公司生產(chǎn)率比不使用數(shù)據(jù)決策的公司高5%-6%。

1.2 大數(shù)據(jù)應(yīng)用概念及特征

（1） 大數(shù)據(jù)應(yīng)用相關(guān)概念

針對大數(shù)據(jù)應(yīng)用和大數(shù)據(jù)應(yīng)用管理體系，業(yè)界并無標(biāo)準(zhǔn)定義，本課題基于調(diào)研情況并結(jié)合其內(nèi)涵對其進(jìn)行了定義。

大數(shù)據(jù)應(yīng)用：是基于大數(shù)據(jù)，以組織業(yè)務(wù)問題和業(yè)務(wù)發(fā)展為導(dǎo)向，發(fā)掘隱含在數(shù)據(jù)中的信息、規(guī)律和知識，服務(wù)于業(yè)務(wù)分析、管理決策和發(fā)展預(yù)測，提升組織運營效率和管理水平的一組業(yè)務(wù)活動，是數(shù)據(jù)管理的重要組成部分。

大數(shù)據(jù)應(yīng)用管理體系：用于保障包括需求統(tǒng)籌、建設(shè)、成果應(yīng)用在內(nèi)的大數(shù)據(jù)應(yīng)用全過程工作有序、高效開展，以實現(xiàn)組織目標(biāo)的管理框架，包括組織、制度、資金及支撐技術(shù)等。

（2） 大數(shù)據(jù)應(yīng)用特征

大數(shù)據(jù)賦予了傳統(tǒng)數(shù)據(jù)分析新的內(nèi)涵和意義?；诤Ａ繑?shù)據(jù)，利用大數(shù)據(jù)方法可分析獲取數(shù)據(jù)中更多深入的、有價值的信息。

大數(shù)據(jù)應(yīng)用具有跨專業(yè)融合應(yīng)用需求多、數(shù)據(jù)來源廣、持續(xù)迭代優(yōu)化要求高、建設(shè)過程多樣、成果共享價值高等特點。

針對大數(shù)據(jù)應(yīng)用，需集約化需求管理，標(biāo)準(zhǔn)化建設(shè)管控，迭代式優(yōu)化提升，規(guī)?；蚕響?yīng)用，最大程度挖掘數(shù)據(jù)價值。

2 大數(shù)據(jù)應(yīng)用理論及行業(yè)實踐調(diào)研

2.1 理論調(diào)研

經(jīng)調(diào)研，大數(shù)據(jù)應(yīng)用發(fā)展總體上處于起步階段，缺乏針對性理論指導(dǎo)，但是數(shù)據(jù)倉庫和商務(wù)智能方面已有成熟的理論，可為本課題研究提供參考。本課題調(diào)研的相關(guān)理論包括DAMA數(shù)據(jù)管理體系、 Gartner商務(wù)智能能力中心管理體系和TDWI大數(shù)據(jù)應(yīng)用管理成熟度模型。

（1） DAMA數(shù)據(jù)管理體系

DAMA數(shù)據(jù)管理體系提出了包括七個步驟的數(shù)據(jù)倉庫和商務(wù)智能管理行動路線，該路線在商務(wù)智能信息需求、處理商務(wù)智能所需數(shù)據(jù)及整體流程方面，可為本課題研究提供借鑒。

（2） Gartner商務(wù)智能管理框架

為應(yīng)對數(shù)據(jù)量快速增加、系統(tǒng)分散、多部門協(xié)同等日益突出的數(shù)據(jù)應(yīng)用困難，Gartner提出了包含治理結(jié)構(gòu)、人員和流程的商務(wù)智能管理框架（BICC 框架），旨在指導(dǎo)組織開展商務(wù)智能活動，提升商務(wù)智能應(yīng)用水平。

（3） TDWI大數(shù)據(jù)應(yīng)用管理成熟度模型

TDWI大數(shù)據(jù)應(yīng)用成熟度模型（TDWI BIG DATA MATURITY MODEL）是TDWI于2013年提出的，是對組織的大數(shù)據(jù)應(yīng)用管理成熟度進(jìn)行量化評估的方法。其按照組織、基礎(chǔ)設(shè)施、數(shù)據(jù)管理、數(shù)據(jù)分析和數(shù)據(jù)治理五個維度發(fā)展情況設(shè)置評估指標(biāo)，將組織大數(shù)據(jù)應(yīng)用成熟度分為新生（NASCENT）、預(yù)采納（PRE-ADOPTION）、早期采納（early adoption）、公司采納corporate adoption）和成熟/有遠(yuǎn)（mature/visionary）五個等級。

2.2 行業(yè)形勢

據(jù)統(tǒng)計，目前我國有32%的規(guī)模以上公司正在探索大數(shù)據(jù)應(yīng)用，處于驗證階段；29%的公司已經(jīng)在生產(chǎn)環(huán)境實踐大數(shù)據(jù)，并有成功的案例和產(chǎn)品；25%的公司已經(jīng)做了足夠的了解，準(zhǔn)備開始應(yīng)用；基本不了解的只占14% 。

先行企業(yè)在大數(shù)據(jù)應(yīng)用領(lǐng)域已開展多年研究和應(yīng)用，有效提升企業(yè)效率、降低企業(yè)成本，例如：

京東：將大數(shù)據(jù)應(yīng)用到物流系統(tǒng)，實現(xiàn)中小件倉庫撿貨單品耗時從22秒降至16秒。

芝麻信用：基于大數(shù)據(jù)提供征信服務(wù)，近一年幫助客戶為超過1千萬人次發(fā)放280億信用貸款，違約率不到1%。

臺灣高鐵：通過大數(shù)據(jù)技術(shù)對高鐵設(shè)備及運行情況進(jìn)行實時監(jiān)測，將6秒內(nèi)到站和出站的準(zhǔn)確率控制在99.15%。

2.3 行業(yè)實踐

（1） 某國有集團(tuán)

某某國有集團(tuán)數(shù)據(jù)管控工作的總體目標(biāo)是通過數(shù)據(jù)管控體系的建立和運行持續(xù)提升集團(tuán)的數(shù)據(jù)質(zhì)量水平和數(shù)據(jù)安全水平，為信息化應(yīng)用打造準(zhǔn)確、完整、一致、安全的良好數(shù)據(jù)環(huán)境，以數(shù)據(jù)資產(chǎn)支撐集團(tuán)的生產(chǎn)操作、經(jīng)營管理和戰(zhàn)略決策，創(chuàng)造業(yè)務(wù)價值。具體的管理模式如下：endprint

管理組織

公司各業(yè)務(wù)部門下設(shè)業(yè)務(wù)數(shù)據(jù)主管領(lǐng)導(dǎo)（處室），統(tǒng)一管理整個部門數(shù)據(jù)相關(guān)工作，包括數(shù)據(jù)應(yīng)用管理。

需求管理

由業(yè)務(wù)部門內(nèi)業(yè)務(wù)數(shù)據(jù)主管領(lǐng)導(dǎo)（處室）統(tǒng)籌部門內(nèi)數(shù)據(jù)應(yīng)用需求，涉及跨部門數(shù)據(jù)也由本部門業(yè)務(wù)數(shù)據(jù)主管領(lǐng)導(dǎo)協(xié)調(diào)獲取。

建設(shè)管理

信息化系統(tǒng)是數(shù)據(jù)的載體，數(shù)據(jù)管控工作的各項標(biāo)準(zhǔn)和要求最終落實到信息化項目建設(shè)過程和信息系統(tǒng)中，數(shù)據(jù)管理的各項制度和標(biāo)準(zhǔn)需要在信息化項目建設(shè)的各個階段進(jìn)行落實。

成果管理

數(shù)據(jù)應(yīng)用成果使用后在部門內(nèi)歸檔。

（2） 某國有銀行

在國家金融市場日益開放、競爭日趨激烈的今天，中國銀行業(yè)在業(yè)務(wù)運作上普遍面臨著巨大的挑戰(zhàn)。為了達(dá)到“在未來三到五年內(nèi)建設(shè)成為具有一流經(jīng)營管理水平的、有較強國際競爭力的現(xiàn)代化金融企業(yè)”的戰(zhàn)略目標(biāo)，某國有銀行面臨著提高管理效率、提高風(fēng)險控制能力和提高市場競爭力的艱巨任務(wù)。

根據(jù)該銀行數(shù)據(jù)管控的現(xiàn)狀，結(jié)合國內(nèi)外領(lǐng)先銀行的實踐和專家經(jīng)驗，該銀行的數(shù)據(jù)管控體系框架主要由圍繞著數(shù)據(jù)規(guī)劃、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)標(biāo)準(zhǔn)管理以及數(shù)據(jù)安全分級和授權(quán)機制這四大核心管理工作建立的數(shù)據(jù)管控策略、數(shù)據(jù)管控方法和數(shù)據(jù)管控內(nèi)部組織結(jié)構(gòu)三個維度構(gòu)成。

管理組織

設(shè)置了與技術(shù)部門平級的數(shù)據(jù)管理部，開展數(shù)據(jù)標(biāo)準(zhǔn)和質(zhì)量管理，集中管理數(shù)據(jù)應(yīng)用需求，統(tǒng)一負(fù)責(zé)數(shù)據(jù)對外報送。

需求管理

該銀行制定了詳細(xì)的需求管理辦法，界定了各類數(shù)據(jù)需求的管理辦法，統(tǒng)一了數(shù)據(jù)需求的管理部門。

建設(shè)管理

該銀行建立了統(tǒng)一的大數(shù)據(jù)分析中心，統(tǒng)一采集和管理公司的各類數(shù)據(jù)，支持公司各類數(shù)據(jù)分析應(yīng)用的開發(fā)。

成果管理

將數(shù)據(jù)需求、解決方案、實施過程文件等納入知識庫統(tǒng)一管理；知識庫由數(shù)據(jù)管理部負(fù)責(zé)統(tǒng)一管理。

（3） 某工業(yè)公司

為實現(xiàn)對經(jīng)營決策支撐、滿足精細(xì)化管理需要，某工業(yè)公司構(gòu)建完善公司全面數(shù)據(jù)管控體系，徹底解決數(shù)據(jù)分散、數(shù)據(jù)質(zhì)量缺陷等問題，保障信息化建設(shè)成果，開展數(shù)據(jù)管控工作勢在必行，通過數(shù)據(jù)管控保障數(shù)據(jù)質(zhì)量，為發(fā)掘數(shù)據(jù)資產(chǎn)的業(yè)務(wù)價值打好堅實基礎(chǔ)。具體的管理模式如下：

管理組織

將數(shù)據(jù)應(yīng)用的建設(shè)權(quán)賦予信息資源部，統(tǒng)一開展數(shù)據(jù)應(yīng)用建設(shè)工作。

需求管理

信息技術(shù)部擁有公司企業(yè)級數(shù)據(jù)的管理權(quán)限，統(tǒng)一開展數(shù)據(jù)應(yīng)用建設(shè)工作。

建設(shè)管理

信息資源部負(fù)責(zé)開展數(shù)據(jù)應(yīng)用項目建設(shè)，建設(shè)過程著重對方案設(shè)計、實施、上線等關(guān)鍵環(huán)節(jié)的進(jìn)度和質(zhì)量進(jìn)行把控，并將數(shù)據(jù)準(zhǔn)備及建模等工作融入到方案設(shè)計和實施環(huán)節(jié)中開展。

3 大數(shù)據(jù)應(yīng)用管理體系架構(gòu)

3.1 大數(shù)據(jù)應(yīng)用管理模式及內(nèi)容

通過調(diào)研，數(shù)據(jù)應(yīng)用管理可歸納為分散管理型、職能復(fù)用型、集中管理型三種模式，數(shù)據(jù)應(yīng)用管理模式中重點關(guān)注組織管理、需求管理、建設(shè)管理、成果管理四大領(lǐng)域。

（1） 管理模式

分散管理型：各部門分散開展數(shù)據(jù)應(yīng)用，無集中管理，例如某某國有集團(tuán)，公司各業(yè)務(wù)部門均設(shè)有業(yè)務(wù)數(shù)據(jù)部門，開展本部門數(shù)據(jù)應(yīng)用相關(guān)工作。

職能復(fù)用型：賦予現(xiàn)有部門數(shù)據(jù)應(yīng)用管理職責(zé)，集中開展數(shù)據(jù)應(yīng)用部分過程的管理工作，例如某工業(yè)公司，依托公司信息技術(shù)部負(fù)責(zé)開展公司所有數(shù)據(jù)應(yīng)用項目建設(shè)。

集中管理型：成立獨立于技術(shù)和業(yè)務(wù)部門的實體或虛擬管理組織，集中開展數(shù)據(jù)應(yīng)用全過程管理工作，例如某國有銀行，設(shè)立設(shè)置與技術(shù)部門平級的數(shù)據(jù)管理部統(tǒng)籌開展全行數(shù)據(jù)管理和應(yīng)用。

（2） 管理內(nèi)容

組織管理：指的是數(shù)據(jù)應(yīng)用管理的組織形式，可歸納為如下幾類：

實體組織型：成立獨立于技術(shù)和業(yè)務(wù)部門的數(shù)據(jù)應(yīng)用實體管理組織，集中開展數(shù)據(jù)應(yīng)用管理工作。

虛擬組織型：由技術(shù)、業(yè)務(wù)部門共同組成數(shù)據(jù)應(yīng)用管理虛擬組織， 集中開展數(shù)據(jù)應(yīng)用管理工作。

職能復(fù)用型：賦予現(xiàn)有部門數(shù)據(jù)應(yīng)用管理職責(zé)，負(fù)責(zé)集中開展數(shù)據(jù)應(yīng)用部分過程的管理工作。

需求管理：指的是數(shù)據(jù)應(yīng)用的需求管理形式，可歸納為如下幾類：

基于項目型：通過控制企業(yè)級數(shù)據(jù)管理權(quán)，集中開展大數(shù)據(jù)應(yīng)用需求管理。

基于數(shù)據(jù)型： 通過控制大數(shù)據(jù)應(yīng)用分析項目，集中開展大數(shù)據(jù)應(yīng)用需求管理。

建設(shè)管理：指的是數(shù)據(jù)應(yīng)用建設(shè)的管理模式，可歸納為如下幾類：

系統(tǒng)建設(shè)項目管理方式：系統(tǒng)建設(shè)驅(qū)動，沿用常規(guī)信息化項目建設(shè)管理模式，對方案設(shè)計、研發(fā)、上線運行等環(huán)節(jié)進(jìn)行管理。

大數(shù)據(jù)項目管理方式：數(shù)據(jù)分析驅(qū)動，根據(jù)大數(shù)據(jù)應(yīng)用特點，重點對數(shù)據(jù)需求統(tǒng)籌、模型持續(xù)迭代等內(nèi)容進(jìn)行管理。

成果管理：指的是數(shù)據(jù)應(yīng)用成果的管理模式，可歸納為如下幾類：

建設(shè)方法共享：指共享大數(shù)據(jù)應(yīng)用建設(shè)方法，共享內(nèi)容包括建設(shè)方案、分析模型、程序等過程文件及經(jīng)提煉后的經(jīng)驗和知識等。

分析結(jié)果共享：指數(shù)據(jù)應(yīng)用分析結(jié)果的共享。

3.2 各管理模式的優(yōu)劣勢對比

分散管理、職能復(fù)用、集中管理三種管理模式各有優(yōu)缺點，適用于不同業(yè)務(wù)類型、不同規(guī)模的企業(yè)。

（1） 分散管理

企業(yè)級數(shù)據(jù)管控能力弱：企業(yè)很難全局掌握控制數(shù)據(jù)應(yīng)用行為；

數(shù)據(jù)應(yīng)用成本高：雖然數(shù)據(jù)應(yīng)用管理成本低，但由于重復(fù)建設(shè)及成果不能共享導(dǎo)致企業(yè)整體數(shù)據(jù)應(yīng)用成本偏高；

數(shù)據(jù)應(yīng)用創(chuàng)新能力強：對數(shù)據(jù)應(yīng)用建設(shè)及使用的約束較少，有利于促進(jìn)數(shù)據(jù)應(yīng)用的創(chuàng)新。

（2） 職能復(fù)用

企業(yè)級數(shù)據(jù)管控能力一般：由于現(xiàn)有部門職能的單一性，無法在企業(yè)級對數(shù)據(jù)應(yīng)用的全過程管控；endprint

數(shù)據(jù)應(yīng)用成本高：無法從全過程統(tǒng)籌管理數(shù)據(jù)應(yīng)用建設(shè)，仍會導(dǎo)致重復(fù)建設(shè)及成果不能共享的情況；

數(shù)據(jù)應(yīng)用創(chuàng)新能力一般：對數(shù)據(jù)應(yīng)用建設(shè)及使用進(jìn)行部分規(guī)范和約束，一定程度上影響了數(shù)據(jù)應(yīng)用的創(chuàng)新。

（3） 集中管理

企業(yè)級數(shù)據(jù)管控能力強：企業(yè)可對數(shù)據(jù)應(yīng)用全局、全過程的掌握和控制；

數(shù)據(jù)應(yīng)用成本低：雖數(shù)據(jù)應(yīng)用管理成本相對較高，但由于實現(xiàn)企業(yè)級需求統(tǒng)籌、成果共享，數(shù)據(jù)應(yīng)用成本整體不高；

數(shù)據(jù)應(yīng)用創(chuàng)新能力強：實現(xiàn)了需求統(tǒng)籌、成果共享，形成了企業(yè)級數(shù)據(jù)應(yīng)用創(chuàng)新機制，促進(jìn)了數(shù)據(jù)應(yīng)用創(chuàng)新能力的提升。

4 總結(jié)

參考國外理論環(huán)境及先行企業(yè)的優(yōu)秀案例，結(jié)合國內(nèi)企業(yè)大數(shù)據(jù)應(yīng)用現(xiàn)狀，綜合考慮數(shù)據(jù)管控力、數(shù)據(jù)應(yīng)用創(chuàng)新能力、數(shù)據(jù)應(yīng)用成本，推薦企業(yè)采用集中管理模式開展大數(shù)據(jù)應(yīng)用管理，組織方式采用“虛擬組織型”，并遵循以下管理原則：

（1） 專業(yè)化管理

從組織、制度方面引導(dǎo)和規(guī)范公司大數(shù)據(jù)應(yīng)用。在組織方面，大數(shù)據(jù)應(yīng)用應(yīng)作為獨立業(yè)務(wù)，成立專職、專業(yè)應(yīng)用分析團(tuán)隊；在制度方面，制定覆蓋立項管理、建設(shè)管理、成果管理和評估管理，包括業(yè)務(wù)流程和管控流程在內(nèi)的大數(shù)據(jù)應(yīng)用管理制度，引導(dǎo)大數(shù)據(jù)應(yīng)用，規(guī)范大數(shù)據(jù)應(yīng)用過程。

（2） 企業(yè)級統(tǒng)籌

大數(shù)據(jù)應(yīng)用重要性和價值日漸凸顯，應(yīng)在需求、建設(shè)和成果等方面實行公司級統(tǒng)籌管理。在需求管理方面，以項目、數(shù)據(jù)資源、應(yīng)用分析能力等為抓手實現(xiàn)大數(shù)據(jù)應(yīng)用需求統(tǒng)籌管理，避免重復(fù)、無序建設(shè)；在建設(shè)過程方面，通過設(shè)計建設(shè)管理和數(shù)據(jù)分析相關(guān)流程，規(guī)范建設(shè)過程，保障大數(shù)據(jù)應(yīng)用建設(shè)高效、成果高質(zhì)量；在成果管理方面，依托管理辦法和支撐平臺，集中管理和共享項目建設(shè)過程文檔和經(jīng)深度提煉的知識，以及分析成果。

（3） 融合性應(yīng)用

開展融合性應(yīng)用，提升大數(shù)據(jù)應(yīng)用水平，促進(jìn)公司管理模式業(yè)務(wù)模式創(chuàng)新。在大數(shù)據(jù)應(yīng)用方面，通過跨專業(yè)大數(shù)據(jù)應(yīng)用，實現(xiàn)公司大數(shù)據(jù)融合性應(yīng)用，提升公司大數(shù)據(jù)應(yīng)用水平；在大數(shù)據(jù)應(yīng)用流程方面，將大數(shù)據(jù)應(yīng)用需求管理、建設(shè)管理和成果管理等流程有機銜接，實現(xiàn)流程融合。

（4） 多元化技術(shù)支撐

提供多種大數(shù)據(jù)應(yīng)用技術(shù)支撐環(huán)境，滿足多元化大數(shù)據(jù)應(yīng)用創(chuàng)新需要。以自建大數(shù)據(jù)應(yīng)用平臺為主，以多樣化的數(shù)據(jù)挖掘分析工具為輔，開展大數(shù)據(jù)應(yīng)用。同時，主要發(fā)展以Hadoop開源框架為主的技術(shù)路線，并關(guān)注其他開源技術(shù)發(fā)展動態(tài)。endprint