黃國(guó)賢

摘要 在大數(shù)據(jù)的獲取、分析與應(yīng)用的時(shí)代，運(yùn)用移動(dòng)互聯(lián)網(wǎng)APP進(jìn)行開(kāi)發(fā)用戶的企業(yè)和個(gè)人不斷增多。對(duì)APP用戶的行為和需求分析是成敗的關(guān)鍵所在，因此，創(chuàng)建移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)成為必然的選擇。本文對(duì)于移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用實(shí)踐進(jìn)行了探討和研究。

關(guān)鍵詞 移動(dòng)互聯(lián)網(wǎng)APP；數(shù)據(jù)倉(cāng)庫(kù)；應(yīng)用；研究

中圖分類號(hào)TP3

文獻(xiàn)標(biāo)識(shí)碼A

文章編號(hào)1674-6708（2016）156-0067-01

在互聯(lián)網(wǎng)快速發(fā)展的今天，數(shù)據(jù)倉(cāng)庫(kù)作為數(shù)據(jù)挖掘與儲(chǔ)存的支撐平臺(tái)得到了廣泛的運(yùn)用。在數(shù)據(jù)倉(cāng)庫(kù)中人們的行為數(shù)據(jù)都將被記錄積累下來(lái)，為分析者提供了良好的信息渠道和數(shù)據(jù)支撐。移動(dòng)互聯(lián)網(wǎng)APP具有用戶流量較小、變化迅速、數(shù)據(jù)雜亂等特點(diǎn)，因此，使用市面上已有的大型數(shù)據(jù)倉(cāng)庫(kù)并不合適，可為其開(kāi)發(fā)小型數(shù)據(jù)倉(cāng)庫(kù)，對(duì)移動(dòng)互聯(lián)網(wǎng)APP的用戶進(jìn)行有效的數(shù)據(jù)積累與分析。

1 移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用需求

對(duì)于移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)的記錄與挖掘，需要結(jié)合APP自身以及其用戶使用規(guī)律的特點(diǎn)。首先，移動(dòng)互聯(lián)網(wǎng)APP自身數(shù)據(jù)規(guī)模較小，因此，其數(shù)據(jù)倉(cāng)庫(kù)也需要具備小巧、靈活的特點(diǎn)，不需要太大的存儲(chǔ)空間，但能及時(shí)對(duì)數(shù)據(jù)進(jìn)行靈活的反映。其次，移動(dòng)互聯(lián)網(wǎng)APP的數(shù)據(jù)規(guī)律并不穩(wěn)定，需要數(shù)據(jù)庫(kù)及時(shí)頻繁上傳數(shù)據(jù)，能夠?qū)Ξ?dāng)日的數(shù)據(jù)盡快做出分析，讓APP的開(kāi)發(fā)者有充足的時(shí)間對(duì)數(shù)據(jù)的變化做出反應(yīng)。最后，數(shù)據(jù)倉(cāng)庫(kù)的可靠性和有效性不可忽視，不能遺失有效數(shù)據(jù)，同時(shí)保證所上傳給APP開(kāi)發(fā)者的數(shù)據(jù)與前端數(shù)據(jù)在數(shù)量、參數(shù)和信息維度上保持高度一致，確保數(shù)據(jù)的及時(shí)準(zhǔn)確有效。

2 移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)思路分析

對(duì)于移動(dòng)互聯(lián)網(wǎng)APP的數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)思路結(jié)合了APP用戶的使用特點(diǎn)和數(shù)據(jù)規(guī)律。首先，用戶使用APP過(guò)程中所展現(xiàn)的信息狀態(tài)，表現(xiàn)為關(guān)系型的數(shù)據(jù)聯(lián)系，包括：用戶個(gè)人信息，粉絲數(shù)目，與其他用戶的互動(dòng)，登錄時(shí)間的規(guī)律規(guī)則等。因此，對(duì)于數(shù)據(jù)的統(tǒng)計(jì)和整理工作，需要利用它們之間的兼容性以及數(shù)據(jù)庫(kù)的主從關(guān)系，將數(shù)據(jù)自動(dòng)地同步到所建立的數(shù)據(jù)倉(cāng)庫(kù)中。其次，在APP用戶的使用過(guò)程中，每當(dāng)用戶進(jìn)行一次操作，便會(huì)在服務(wù)器端產(chǎn)生一條用戶的行為日志。它們往往以日志文件的方式存儲(chǔ)下來(lái)，規(guī)模較大、隨意性較強(qiáng)。因此，對(duì)于這類數(shù)據(jù)，需要每間隔一個(gè)特定的時(shí)間便將他們錄入到數(shù)據(jù)倉(cāng)庫(kù)中。在數(shù)據(jù)轉(zhuǎn)化過(guò)程中，注意數(shù)據(jù)的整齊性和有效性，以及改變格式的失真風(fēng)險(xiǎn)。此外，對(duì)于在客戶端產(chǎn)生的數(shù)據(jù)，其數(shù)據(jù)存在形式往往具有無(wú)規(guī)則、隨機(jī)性強(qiáng)的特點(diǎn)，但這樣的數(shù)據(jù)形式可以用來(lái)展現(xiàn)用戶對(duì)APP的使用全貌。對(duì)于此類數(shù)據(jù)，需要將其完整地體現(xiàn)出來(lái)，可用于分析用戶的使用規(guī)則，摸索用戶體驗(yàn)的實(shí)際操作。最后，在前端數(shù)據(jù)錄入數(shù)據(jù)倉(cāng)庫(kù)后，還需要對(duì)其進(jìn)行檢驗(yàn)，包括檢驗(yàn)數(shù)據(jù)的一致性，是否存在多余參數(shù)和無(wú)效格式等。

3 數(shù)據(jù)倉(cāng)庫(kù)在投入使用中的應(yīng)用實(shí)踐

3.1 移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)收集到的數(shù)據(jù)情況

在移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的投入使用過(guò)程中，經(jīng)過(guò)數(shù)據(jù)遷移，原始數(shù)據(jù)主要形成了以下3種數(shù)據(jù)形式：1）同步到集成前端數(shù)據(jù)庫(kù)中的數(shù)據(jù)。這一部分的數(shù)據(jù)，是沒(méi)有經(jīng)過(guò)加工直接同步到位的數(shù)據(jù)。它們是即時(shí)性的，具有自動(dòng)同步功能，在任何時(shí)刻進(jìn)行查詢都可以獲取實(shí)時(shí)數(shù)據(jù)資料。但由于經(jīng)過(guò)的整理較少，因此，這個(gè)數(shù)據(jù)庫(kù)中的數(shù)據(jù)，并不利于整體信息的收錄和分析，更適合即時(shí)性的資料查詢。2）來(lái)自服務(wù)器的集成數(shù)據(jù)。這些數(shù)據(jù)是經(jīng)過(guò)格式化的，收錄在數(shù)據(jù)倉(cāng)庫(kù)中提前建好的格式匹配的數(shù)據(jù)表中。由于用戶的資料和行為日志是不斷地生成并更新的，因此，這部分的數(shù)據(jù)資料是每隔一段時(shí)間（通常由自己設(shè)定）自動(dòng)收集上來(lái)的。在收錄這部分資料前，系統(tǒng)會(huì)對(duì)于之前的信息進(jìn)行切斷式的總結(jié)，以防止丟失必要的數(shù)據(jù)資料。格式化的服務(wù)器日志數(shù)據(jù)，比直接集成的數(shù)據(jù)資料所占空間更大，因此，這部分?jǐn)?shù)據(jù)庫(kù)的規(guī)模，比集成前端的數(shù)據(jù)庫(kù)規(guī)模大十倍左右。同時(shí)，因?yàn)槠洳捎媒財(cái)嗍降臄?shù)據(jù)收集方式，為了避免前端數(shù)據(jù)被影響，數(shù)據(jù)的導(dǎo)入時(shí)間一般設(shè)定在服務(wù)器較為空閑的時(shí)刻。3）來(lái)自客戶端的集成日志。來(lái)自客戶端的操作日志，具備有序性、不完整性，它們是非格式化的數(shù)據(jù)。為保證其完整和規(guī)范，需要在導(dǎo)入到數(shù)據(jù)倉(cāng)庫(kù)前，集中對(duì)其進(jìn)行格式化的操作。首先，需要進(jìn)行數(shù)據(jù)清理和補(bǔ)齊。因?yàn)檫@部分?jǐn)?shù)據(jù)在收錄過(guò)程中會(huì)收錄到系統(tǒng)自動(dòng)生成的日志或者機(jī)器人操作產(chǎn)生的日志，因此，需要根據(jù)APP自身的特點(diǎn)，進(jìn)行數(shù)據(jù)清理。而部分?jǐn)?shù)據(jù)會(huì)有缺失字段的現(xiàn)象，通過(guò)設(shè)置，可以對(duì)發(fā)生字段缺失的數(shù)據(jù)進(jìn)行補(bǔ)齊。然后，對(duì)數(shù)據(jù)進(jìn)行格式化處理，將所有字段進(jìn)行整理，形成統(tǒng)一完整的文本。最后，在數(shù)據(jù)倉(cāng)庫(kù)中建立好與格式相匹配的數(shù)據(jù)表，將格式化后的數(shù)據(jù)信息導(dǎo)入到數(shù)據(jù)倉(cāng)庫(kù)中。

3.2 數(shù)據(jù)倉(cāng)庫(kù)對(duì)于數(shù)據(jù)的存儲(chǔ)管理情況

移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)對(duì)于數(shù)據(jù)的存儲(chǔ)和管理方式?jīng)Q定了其對(duì)外表現(xiàn)數(shù)據(jù)的形式，這部分正是數(shù)據(jù)倉(cāng)庫(kù)運(yùn)行的關(guān)鍵。APP數(shù)據(jù)倉(cāng)庫(kù)的組織管理方式主要表現(xiàn)在以下3個(gè)方面：1）利用關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)。對(duì)于大規(guī)模的數(shù)據(jù)存儲(chǔ)，保證其有序性及可操作性的關(guān)鍵在于關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)對(duì)數(shù)據(jù)的管理，隨著時(shí)間的積累，數(shù)據(jù)也不斷增多，關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)仍可以保持?jǐn)?shù)據(jù)倉(cāng)庫(kù)的穩(wěn)定性和有效性。2）并發(fā)操作技術(shù)的運(yùn)用。由于用戶訪問(wèn)系統(tǒng)數(shù)據(jù)短小密集，數(shù)據(jù)與數(shù)據(jù)之間多處于并行狀態(tài)，這時(shí)需要并行操作，使用戶的需求得以均勻分擔(dān)，不會(huì)造成數(shù)據(jù)堵車。除此之外，對(duì)于整體信息數(shù)據(jù)，并行操作系統(tǒng)還能做到對(duì)所查詢的信息進(jìn)行分解并行，對(duì)查詢數(shù)據(jù)進(jìn)行分割處理，使數(shù)據(jù)信息得以有效利用。3）優(yōu)化決策支持查詢。移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)對(duì)于決策支持查詢有所欠缺，但結(jié)合優(yōu)化查詢器、數(shù)據(jù)庫(kù)索引機(jī)制、數(shù)據(jù)連接策略等多部分的使用，決策支持查詢逐步得到優(yōu)化。從基礎(chǔ)的通用查詢到?jīng)Q策優(yōu)化查詢，移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的管理功能正在逐漸強(qiáng)化，并逐步向支持多維度分析查詢進(jìn)步發(fā)展。

3.3 移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)表現(xiàn)

數(shù)據(jù)倉(cāng)庫(kù)最根本的功能便是對(duì)于數(shù)據(jù)的表現(xiàn)，通過(guò)其反映的數(shù)據(jù)狀況，開(kāi)發(fā)者才能采取相應(yīng)的應(yīng)對(duì)措施?，F(xiàn)存的移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)對(duì)于數(shù)據(jù)的表現(xiàn)形式主要集中在：多項(xiàng)數(shù)據(jù)的挖掘、數(shù)理統(tǒng)計(jì)與分析以及數(shù)據(jù)行為多維分析等方面。在數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用當(dāng)中，多維分析起到的作用最為強(qiáng)大，可以有效幫助開(kāi)發(fā)者進(jìn)行多角度的比較；數(shù)理統(tǒng)計(jì)的應(yīng)用最為廣泛，有效利用即可獲取十分可觀的效益。

4 結(jié)論

綜上所述，移動(dòng)互聯(lián)網(wǎng)APP數(shù)據(jù)倉(cāng)庫(kù)的使用可以為開(kāi)發(fā)者提供有效的參考信息。數(shù)據(jù)倉(cāng)庫(kù)在數(shù)據(jù)的挖掘和表現(xiàn)中都具備強(qiáng)大的性能和使用價(jià)值，并且其投入較小，是性價(jià)比較高的輔助系統(tǒng)。在數(shù)據(jù)挖掘與分析方面，移動(dòng)互聯(lián)網(wǎng)APP也有很大的進(jìn)步空間，需要研發(fā)者對(duì)其進(jìn)行不斷的創(chuàng)新，使其充分發(fā)揮潛能，提供更有價(jià)值的信息。