移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的應(yīng)用實踐研究

黃國賢

摘要 在大數(shù)據(jù)的獲取、分析與應(yīng)用的時代，運用移動互聯(lián)網(wǎng)APP進行開發(fā)用戶的企業(yè)和個人不斷增多。對APP用戶的行為和需求分析是成敗的關(guān)鍵所在，因此，創(chuàng)建移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫成為必然的選擇。本文對于移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的應(yīng)用實踐進行了探討和研究。

關(guān)鍵詞 移動互聯(lián)網(wǎng)APP；數(shù)據(jù)倉庫；應(yīng)用；研究

中圖分類號TP3

文獻標(biāo)識碼A

文章編號1674-6708（2016）156-0067-01

在互聯(lián)網(wǎng)快速發(fā)展的今天，數(shù)據(jù)倉庫作為數(shù)據(jù)挖掘與儲存的支撐平臺得到了廣泛的運用。在數(shù)據(jù)倉庫中人們的行為數(shù)據(jù)都將被記錄積累下來，為分析者提供了良好的信息渠道和數(shù)據(jù)支撐。移動互聯(lián)網(wǎng)APP具有用戶流量較小、變化迅速、數(shù)據(jù)雜亂等特點，因此，使用市面上已有的大型數(shù)據(jù)倉庫并不合適，可為其開發(fā)小型數(shù)據(jù)倉庫，對移動互聯(lián)網(wǎng)APP的用戶進行有效的數(shù)據(jù)積累與分析。

1 移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的應(yīng)用需求

對于移動互聯(lián)網(wǎng)APP數(shù)據(jù)的記錄與挖掘，需要結(jié)合APP自身以及其用戶使用規(guī)律的特點。首先，移動互聯(lián)網(wǎng)APP自身數(shù)據(jù)規(guī)模較小，因此，其數(shù)據(jù)倉庫也需要具備小巧、靈活的特點，不需要太大的存儲空間，但能及時對數(shù)據(jù)進行靈活的反映。其次，移動互聯(lián)網(wǎng)APP的數(shù)據(jù)規(guī)律并不穩(wěn)定，需要數(shù)據(jù)庫及時頻繁上傳數(shù)據(jù)，能夠?qū)Ξ?dāng)日的數(shù)據(jù)盡快做出分析，讓APP的開發(fā)者有充足的時間對數(shù)據(jù)的變化做出反應(yīng)。最后，數(shù)據(jù)倉庫的可靠性和有效性不可忽視，不能遺失有效數(shù)據(jù)，同時保證所上傳給APP開發(fā)者的數(shù)據(jù)與前端數(shù)據(jù)在數(shù)量、參數(shù)和信息維度上保持高度一致，確保數(shù)據(jù)的及時準(zhǔn)確有效。

2 移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的設(shè)計思路分析

對于移動互聯(lián)網(wǎng)APP的數(shù)據(jù)倉庫設(shè)計思路結(jié)合了APP用戶的使用特點和數(shù)據(jù)規(guī)律。首先，用戶使用APP過程中所展現(xiàn)的信息狀態(tài)，表現(xiàn)為關(guān)系型的數(shù)據(jù)聯(lián)系，包括：用戶個人信息，粉絲數(shù)目，與其他用戶的互動，登錄時間的規(guī)律規(guī)則等。因此，對于數(shù)據(jù)的統(tǒng)計和整理工作，需要利用它們之間的兼容性以及數(shù)據(jù)庫的主從關(guān)系，將數(shù)據(jù)自動地同步到所建立的數(shù)據(jù)倉庫中。其次，在APP用戶的使用過程中，每當(dāng)用戶進行一次操作，便會在服務(wù)器端產(chǎn)生一條用戶的行為日志。它們往往以日志文件的方式存儲下來，規(guī)模較大、隨意性較強。因此，對于這類數(shù)據(jù)，需要每間隔一個特定的時間便將他們錄入到數(shù)據(jù)倉庫中。在數(shù)據(jù)轉(zhuǎn)化過程中，注意數(shù)據(jù)的整齊性和有效性，以及改變格式的失真風(fēng)險。此外，對于在客戶端產(chǎn)生的數(shù)據(jù)，其數(shù)據(jù)存在形式往往具有無規(guī)則、隨機性強的特點，但這樣的數(shù)據(jù)形式可以用來展現(xiàn)用戶對APP的使用全貌。對于此類數(shù)據(jù)，需要將其完整地體現(xiàn)出來，可用于分析用戶的使用規(guī)則，摸索用戶體驗的實際操作。最后，在前端數(shù)據(jù)錄入數(shù)據(jù)倉庫后，還需要對其進行檢驗，包括檢驗數(shù)據(jù)的一致性，是否存在多余參數(shù)和無效格式等。

3 數(shù)據(jù)倉庫在投入使用中的應(yīng)用實踐

3.1 移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫收集到的數(shù)據(jù)情況

在移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的投入使用過程中，經(jīng)過數(shù)據(jù)遷移，原始數(shù)據(jù)主要形成了以下3種數(shù)據(jù)形式：1）同步到集成前端數(shù)據(jù)庫中的數(shù)據(jù)。這一部分的數(shù)據(jù)，是沒有經(jīng)過加工直接同步到位的數(shù)據(jù)。它們是即時性的，具有自動同步功能，在任何時刻進行查詢都可以獲取實時數(shù)據(jù)資料。但由于經(jīng)過的整理較少，因此，這個數(shù)據(jù)庫中的數(shù)據(jù)，并不利于整體信息的收錄和分析，更適合即時性的資料查詢。2）來自服務(wù)器的集成數(shù)據(jù)。這些數(shù)據(jù)是經(jīng)過格式化的，收錄在數(shù)據(jù)倉庫中提前建好的格式匹配的數(shù)據(jù)表中。由于用戶的資料和行為日志是不斷地生成并更新的，因此，這部分的數(shù)據(jù)資料是每隔一段時間（通常由自己設(shè)定）自動收集上來的。在收錄這部分資料前，系統(tǒng)會對于之前的信息進行切斷式的總結(jié)，以防止丟失必要的數(shù)據(jù)資料。格式化的服務(wù)器日志數(shù)據(jù)，比直接集成的數(shù)據(jù)資料所占空間更大，因此，這部分?jǐn)?shù)據(jù)庫的規(guī)模，比集成前端的數(shù)據(jù)庫規(guī)模大十倍左右。同時，因為其采用截斷式的數(shù)據(jù)收集方式，為了避免前端數(shù)據(jù)被影響，數(shù)據(jù)的導(dǎo)入時間一般設(shè)定在服務(wù)器較為空閑的時刻。3）來自客戶端的集成日志。來自客戶端的操作日志，具備有序性、不完整性，它們是非格式化的數(shù)據(jù)。為保證其完整和規(guī)范，需要在導(dǎo)入到數(shù)據(jù)倉庫前，集中對其進行格式化的操作。首先，需要進行數(shù)據(jù)清理和補齊。因為這部分?jǐn)?shù)據(jù)在收錄過程中會收錄到系統(tǒng)自動生成的日志或者機器人操作產(chǎn)生的日志，因此，需要根據(jù)APP自身的特點，進行數(shù)據(jù)清理。而部分?jǐn)?shù)據(jù)會有缺失字段的現(xiàn)象，通過設(shè)置，可以對發(fā)生字段缺失的數(shù)據(jù)進行補齊。然后，對數(shù)據(jù)進行格式化處理，將所有字段進行整理，形成統(tǒng)一完整的文本。最后，在數(shù)據(jù)倉庫中建立好與格式相匹配的數(shù)據(jù)表，將格式化后的數(shù)據(jù)信息導(dǎo)入到數(shù)據(jù)倉庫中。

3.2 數(shù)據(jù)倉庫對于數(shù)據(jù)的存儲管理情況

移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫對于數(shù)據(jù)的存儲和管理方式?jīng)Q定了其對外表現(xiàn)數(shù)據(jù)的形式，這部分正是數(shù)據(jù)倉庫運行的關(guān)鍵。APP數(shù)據(jù)倉庫的組織管理方式主要表現(xiàn)在以下3個方面：1）利用關(guān)系數(shù)據(jù)庫系統(tǒng)。對于大規(guī)模的數(shù)據(jù)存儲，保證其有序性及可操作性的關(guān)鍵在于關(guān)系數(shù)據(jù)庫系統(tǒng)對數(shù)據(jù)的管理，隨著時間的積累，數(shù)據(jù)也不斷增多，關(guān)系數(shù)據(jù)庫系統(tǒng)仍可以保持?jǐn)?shù)據(jù)倉庫的穩(wěn)定性和有效性。2）并發(fā)操作技術(shù)的運用。由于用戶訪問系統(tǒng)數(shù)據(jù)短小密集，數(shù)據(jù)與數(shù)據(jù)之間多處于并行狀態(tài)，這時需要并行操作，使用戶的需求得以均勻分擔(dān)，不會造成數(shù)據(jù)堵車。除此之外，對于整體信息數(shù)據(jù)，并行操作系統(tǒng)還能做到對所查詢的信息進行分解并行，對查詢數(shù)據(jù)進行分割處理，使數(shù)據(jù)信息得以有效利用。3）優(yōu)化決策支持查詢。移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的關(guān)系數(shù)據(jù)庫系統(tǒng)對于決策支持查詢有所欠缺，但結(jié)合優(yōu)化查詢器、數(shù)據(jù)庫索引機制、數(shù)據(jù)連接策略等多部分的使用，決策支持查詢逐步得到優(yōu)化。從基礎(chǔ)的通用查詢到?jīng)Q策優(yōu)化查詢，移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的管理功能正在逐漸強化，并逐步向支持多維度分析查詢進步發(fā)展。

3.3 移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的數(shù)據(jù)表現(xiàn)

數(shù)據(jù)倉庫最根本的功能便是對于數(shù)據(jù)的表現(xiàn)，通過其反映的數(shù)據(jù)狀況，開發(fā)者才能采取相應(yīng)的應(yīng)對措施?，F(xiàn)存的移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫對于數(shù)據(jù)的表現(xiàn)形式主要集中在：多項數(shù)據(jù)的挖掘、數(shù)理統(tǒng)計與分析以及數(shù)據(jù)行為多維分析等方面。在數(shù)據(jù)倉庫的應(yīng)用當(dāng)中，多維分析起到的作用最為強大，可以有效幫助開發(fā)者進行多角度的比較；數(shù)理統(tǒng)計的應(yīng)用最為廣泛，有效利用即可獲取十分可觀的效益。

4 結(jié)論

綜上所述，移動互聯(lián)網(wǎng)APP數(shù)據(jù)倉庫的使用可以為開發(fā)者提供有效的參考信息。數(shù)據(jù)倉庫在數(shù)據(jù)的挖掘和表現(xiàn)中都具備強大的性能和使用價值，并且其投入較小，是性價比較高的輔助系統(tǒng)。在數(shù)據(jù)挖掘與分析方面，移動互聯(lián)網(wǎng)APP也有很大的進步空間，需要研發(fā)者對其進行不斷的創(chuàng)新，使其充分發(fā)揮潛能，提供更有價值的信息。