瞿遙,易川
(1.廣州杰賽科技股份有限公司,廣東 廣州 510310;2.中移物聯(lián)網(wǎng)有限公司,重慶 401336)
隨著信息化技術(shù)在商貿(mào)活動(dòng)中的應(yīng)用,很多企業(yè)都收集并保存了海量的數(shù)據(jù)。充分使用這些數(shù)據(jù)不僅可為企業(yè)帶來(lái)穩(wěn)定的發(fā)展,還可幫助企業(yè)取得競(jìng)爭(zhēng)優(yōu)勢(shì),創(chuàng)建一個(gè)更好、更有效的工作環(huán)境。其中,基于數(shù)據(jù)進(jìn)行準(zhǔn)確地分析和挖掘是最關(guān)鍵步驟,這是在傳統(tǒng)的商貿(mào)模式下所不具備的。作為目前的一個(gè)技術(shù)課題,云計(jì)算是一種網(wǎng)絡(luò)計(jì)算方法,能夠有效地存儲(chǔ)和計(jì)算海量數(shù)據(jù)。因此,研究基于云計(jì)算的智慧商貿(mào)平臺(tái)對(duì)于企業(yè)的長(zhǎng)期發(fā)展很有意義。
智慧商貿(mào)就是在傳統(tǒng)商貿(mào)的基礎(chǔ)上,運(yùn)用物聯(lián)網(wǎng)、云計(jì)算、移動(dòng)商務(wù)和電子商務(wù)等新興科技手段對(duì)傳統(tǒng)商城進(jìn)行數(shù)字化、智能化的嵌入和復(fù)合,給每個(gè)人的生活采購(gòu)方式帶來(lái)改變[1]。
智慧商貿(mào)將已有數(shù)據(jù)轉(zhuǎn)換成有用的信息,幫助管理者做出明智的決定[2],促進(jìn)管理、市場(chǎng)營(yíng)銷方面以及公司的發(fā)展。同時(shí),智慧商貿(mào)通過(guò)分析和把握新的機(jī)會(huì)、找到潛在威脅,提高財(cái)務(wù)績(jī)效和服務(wù),維持競(jìng)爭(zhēng)優(yōu)勢(shì),為公司帶來(lái)更多的經(jīng)濟(jì)利益。
智慧商貿(mào)的基本流程:首先,從不同的數(shù)據(jù)源中提取出有用的數(shù)據(jù),對(duì)其進(jìn)行轉(zhuǎn)換、重組,并存入數(shù)據(jù)庫(kù)中;然后使用合適的查詢和分析工具進(jìn)行分析處理;最后將結(jié)果展示給管理者,為企業(yè)提供決策支持[3]。
一般而言,云計(jì)算是一種網(wǎng)絡(luò)計(jì)算方法,通過(guò)軟硬件共享的信息并根據(jù)用戶的需求為用戶提供支持,具有安全性高、成本低、簡(jiǎn)單多功能等優(yōu)點(diǎn)[4-7]。云計(jì)算涉及到很多技術(shù),比如虛擬化、分布式存儲(chǔ)與計(jì)算、負(fù)載均衡等。云計(jì)算由3個(gè)層次的服務(wù)組成:基礎(chǔ)設(shè)施即服務(wù)(IaaS,Infrastructure as a Service),平臺(tái)即服務(wù)(PaaS,Platform as a Service),軟件即服務(wù)(SaaS,Software as a Service)。
隨著信息技術(shù)的不斷發(fā)展,許多貿(mào)易活動(dòng)從線下做到了線上。這樣用戶可以在任意地方通過(guò)網(wǎng)絡(luò)瀏覽商品并完成交易。與此同時(shí),商家可獲得大量用戶的訪問(wèn)數(shù)據(jù)及購(gòu)買情況。這些信息可為公司帶來(lái)巨大的商業(yè)價(jià)值。
但是傳統(tǒng)的信息技術(shù)方法要求每個(gè)商貿(mào)城都需要建立基本的服務(wù)器設(shè)施,需要準(zhǔn)備能夠承載未來(lái)幾年發(fā)展所需的計(jì)算和存儲(chǔ)能力,并且往往沒有很好的擴(kuò)展性[8]。
因此,擁有強(qiáng)大的計(jì)算存儲(chǔ)能力、可擴(kuò)展性是目前需要解決的問(wèn)題。云計(jì)算技術(shù)通過(guò)網(wǎng)絡(luò)提供動(dòng)態(tài)易擴(kuò)展的資源,擁有處理海量數(shù)據(jù)的能力,能夠快速地從數(shù)據(jù)中獲取有用的信息。
基于云計(jì)算技術(shù)的智慧商貿(mào)架構(gòu)可分為7個(gè)層次,如圖1所示:
圖1 智慧商貿(mào)的平臺(tái)架構(gòu)
(1)數(shù)據(jù)源層:包含所有需要的關(guān)鍵數(shù)據(jù)。
(2)數(shù)據(jù)集成層:將數(shù)據(jù)源層的異構(gòu)數(shù)據(jù)處理轉(zhuǎn)換成統(tǒng)一數(shù)據(jù),根據(jù)業(yè)務(wù)需求分為不同的主題數(shù)據(jù)。同時(shí),本層的另外一個(gè)作用是減少每個(gè)業(yè)務(wù)系統(tǒng)信息提取間的影響。
(3)數(shù)據(jù)存儲(chǔ)層和數(shù)據(jù)分析層:這2層的作用是實(shí)現(xiàn)云計(jì)算系統(tǒng),完成多節(jié)點(diǎn)、多任務(wù)的并行處理,在提高計(jì)算能力的同時(shí)降低數(shù)據(jù)處理時(shí)間。
(4)數(shù)據(jù)緩沖層:本層建立一系列數(shù)據(jù)匯總,從不同角度得出觀點(diǎn)。在簡(jiǎn)化前端顯示復(fù)雜度的同時(shí)降低了數(shù)據(jù)處理時(shí)間。
(5)顯示層:根據(jù)業(yè)務(wù)需求靈活地生成特征圖。
(6)業(yè)務(wù)應(yīng)用層:包含架構(gòu)支撐的各種業(yè)務(wù)應(yīng)用。
圖2展示了平臺(tái)數(shù)據(jù)處理過(guò)程。
(1)數(shù)據(jù)抽取、轉(zhuǎn)換、加載過(guò)程(ETL,Extract-Transform-Load)??紤]到數(shù)據(jù)來(lái)源的多樣性,對(duì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)源數(shù)據(jù)進(jìn)行并行的ETL,然后存儲(chǔ)到分布式文件庫(kù)中。
(2)數(shù)據(jù)處理過(guò)程。根據(jù)解決規(guī)則進(jìn)行并行計(jì)算,總結(jié)計(jì)算結(jié)果,將分析結(jié)果緩存。
(3)數(shù)據(jù)展示過(guò)程。使用顯示工具展示結(jié)果。
本文從計(jì)算能力、信息容量、擴(kuò)展性、時(shí)效性和硬件成本這5個(gè)方面對(duì)傳統(tǒng)商貿(mào)和智慧商貿(mào)進(jìn)行比較,如表1所示:
圖2 數(shù)據(jù)處理流程
表1 傳統(tǒng)商貿(mào)與智慧商貿(mào)的比較
從表1可知,智慧商貿(mào)擁有強(qiáng)大的計(jì)算能力、高安全性和可擴(kuò)展性。同時(shí),智慧商貿(mào)的信息處理、存儲(chǔ)都是在資源池中完成,對(duì)客戶端的要求較低,不需要高功能的服務(wù)器,硬件成本較低。并且服務(wù)器平均功率為300W/h,瘦客戶機(jī)平均功率30W/h,因此耗電成本得到很大的改善。以每天使用時(shí)間按照10h、每度電按照1元計(jì)算,表2是不同規(guī)模的企業(yè)使用服務(wù)器和使用瘦客戶機(jī)節(jié)省費(fèi)用對(duì)比表。
本文根據(jù)5項(xiàng)指標(biāo)對(duì)4個(gè)常用的云計(jì)算服務(wù)產(chǎn)品進(jìn)行比較分析,如表3所示。
在這些云計(jì)算服務(wù)提供商中,只有Apache公司的Hadoop擁有完整的產(chǎn)品,包括分布式存儲(chǔ)與計(jì)算、云數(shù)據(jù)庫(kù)與數(shù)據(jù)挖掘,支持更多的分析和數(shù)據(jù)類型,支持PB級(jí)的海量數(shù)據(jù)和數(shù)千個(gè)點(diǎn)的分布存儲(chǔ)和并行計(jì)算[9-10]。同時(shí)也可以分析海量數(shù)據(jù)并簡(jiǎn)化一些復(fù)雜的分析,以滿足智慧商貿(mào)的實(shí)際應(yīng)用。
目前,Hadoop已應(yīng)用到許多的外企中,用來(lái)處理龐大的日志、點(diǎn)擊流程分析、模擬財(cái)務(wù)、文件處理和網(wǎng)絡(luò)索引,比如Facebook、Digg等。在中國(guó),Hadoop通常被大型的IT企業(yè)應(yīng)用于存儲(chǔ)海量用戶日志和分析用戶行為,比如淘寶。
本文將云計(jì)算應(yīng)用于商貿(mào)城中,得到基于云計(jì)算的智慧商貿(mào)。智慧商貿(mào)系統(tǒng)對(duì)用戶和交易的原始數(shù)據(jù)進(jìn)行收集、歸類和分析,為企業(yè)的營(yíng)銷和決策提供支持。相比傳統(tǒng)商貿(mào)模式,智慧商貿(mào)擁有更強(qiáng)大的計(jì)算能力、更好的安全性、更高效的數(shù)據(jù)存儲(chǔ)和計(jì)算能力、更加簡(jiǎn)單易行的硬 件擴(kuò)展和更合理的系統(tǒng)成本。
表2 使用服務(wù)器和使用瘦客戶機(jī)節(jié)省費(fèi)用對(duì)比表
表3 云計(jì)算產(chǎn)品的比較
[1] 百度百科. 智慧商城[EB/OL]. [2015-11-01]. http://baike.baidu.com/link?url=1slNT0Tw90-iUooNu9_csIbVU0mG J4RZ974fjuYEZL9XSLH05TMZm6fTfQd52NRcWgejO KiJAsOlNq614FtJZq#reference-[1]-5874432-wrap.
[2] Chang hui Y U, Pan H P. Business Intelligence and Its Key Technology[J]. Application Research of Computers, 2002,19(9): 14-16.
[3] Li-Zhong X U. Business intelligence and its application and design in electric power marketing[J]. Power DemandSide Management, 2006,8(1): 30-32.
[4] 百度百科. 云計(jì)算[EB/OL]. [2015-11-01]. http://baike.baidu.com/view/1316082.htm.
[5] Dai Y, Xiang Y, Zhang G. Self-healing and Hybrid Diagnosis in Cloud Computing[J]. Cloud Computing, Springer Berlin Heidelberg, 2009,5931(2): 45-56.
[6] Yang B, Tan F, Dai Y S, et al. Performance Evaluation of Cloud Service Considering Fault Recovery[J]. Cloud Computing, Springer Berlin Heidelberg, 2009,5931(3): 571-576.
[7] Li H, Dai Y, Tian L, et al. Identity-Based Authentication for Cloud Computing[J]. Lecture Notes in Computer Science, 2009,5931(2): 157-166.
[8] 葉周芹. 中小型電子商務(wù)企業(yè)的云計(jì)算戰(zhàn)略[D]. 上海: 上海交通大學(xué), 2012.
[9] C Li. Framework and Realization of Data Mining Platform of Intelligent Mobilephone Based on Cloud Computing[D]. Wuhan: Wuhan University of Technology, 2010.
[10] Gong D, Duan Y. Application Research in Cloud Computing of Data Analysis and Business Intelligence Analysis for Telecommunication[J]. Telecommunications Science, 2010,6(6): 30-35. ★