淺析電子商務數(shù)據(jù)存儲

王鵬濤

摘? 要：隨著國民經(jīng)濟的不斷增長，科學技術(shù)的不斷創(chuàng)新，我國電子商務行業(yè)發(fā)展得到了質(zhì)的飛躍。海量數(shù)據(jù)安全存儲作為現(xiàn)代電子商務建設運營管理過程的重中之重，是一項必不可缺的關鍵內(nèi)容，直接關系到電子商務系統(tǒng)運行的穩(wěn)定性，能否保障每個用戶切身利益。因此現(xiàn)代電子商務企業(yè)必須高度重視數(shù)據(jù)安全存儲工作，面對持續(xù)增長的電子商務數(shù)據(jù)要科學采用分布式存儲系統(tǒng)，優(yōu)化改善不同類型數(shù)據(jù)存儲組織方式，全面提高電子商務數(shù)據(jù)安全儲存質(zhì)量。該文將進一步對電子商務數(shù)據(jù)存儲展開分析與探討。

關鍵詞：電子商務? 數(shù)據(jù)? 存儲

中圖分類號：TP333 ? ?文獻標識碼：A 文章編號：1672-3791（2020）01（b）-0020-02

當前是一個互聯(lián)網(wǎng)時代，電子商務發(fā)展極大地方便了人們的日常生活，同時也給商家?guī)砹烁鄤?chuàng)造利益的機會。數(shù)據(jù)儲存作為電子商務運營管理工作的重要內(nèi)容，受到了社會各界人士的高度關注，能否將處理好的各項數(shù)據(jù)安全儲存在系統(tǒng)數(shù)據(jù)庫中，會直接影響到系統(tǒng)日常運行的穩(wěn)定性，并為用市場用戶提供更加良好的UE體驗服務。為了保障我國電子商務和諧健康的持續(xù)發(fā)展，就必須加強對電子商務數(shù)據(jù)信息的安全存儲保護工作，全面提高電子商務網(wǎng)絡數(shù)據(jù)安全儲存管理水平。

1? 數(shù)據(jù)存儲概述

數(shù)據(jù)存儲實質(zhì)是指數(shù)據(jù)流在加工處理過程中產(chǎn)生的臨時文件或者加工處理過程中需要檢索獲取的相關信息。數(shù)據(jù)存儲方式與數(shù)據(jù)文件組織存在著密不可分的聯(lián)系，其核心在于建立記錄的邏輯與物理順序間對應的關系，明確數(shù)據(jù)存儲地位，以此來充分提升數(shù)據(jù)存儲效率。在當前計算機市場上常見的數(shù)據(jù)存儲方式主要包括了3種，它們分別是DAS、NAS以及SAN，數(shù)據(jù)存儲應用最為顯著的特征就是不存在統(tǒng)一標準的體系結(jié)構(gòu)[1]，這3種數(shù)據(jù)存儲方式是相輔相成、相互共存的，能夠最大程度地滿足市場企業(yè)信息化的應用發(fā)展，現(xiàn)代電子商務企業(yè)在優(yōu)化設計數(shù)據(jù)庫時，要結(jié)合自身系統(tǒng)應用環(huán)境特點，合理構(gòu)建出最佳的數(shù)據(jù)庫運行管理模式，同時科學完善系統(tǒng)數(shù)據(jù)庫，確保其能夠符合海量數(shù)據(jù)的安全儲存和高效檢索需求。

2? 電子商務環(huán)境數(shù)據(jù)存儲分析

在現(xiàn)代電子商務行業(yè)中阿里巴巴作為龍頭企業(yè)，其底下的淘寶網(wǎng)每天都會產(chǎn)生海量的信息數(shù)據(jù)，這些數(shù)據(jù)除了包括各種線上產(chǎn)品交易數(shù)據(jù)信息、用戶信息、門戶網(wǎng)站等，還涉及到淘江湖、社區(qū)等信息交流內(nèi)容，需要為個性化用戶提供其他數(shù)據(jù)功能作用。而在這些海量數(shù)據(jù)當中，絕大多數(shù)都是以圖片和文字描述的小文件為主，大文件的視頻數(shù)據(jù)、索引較少。因此，當淘寶網(wǎng)在構(gòu)建電子商務海量數(shù)據(jù)存儲模型時，相關技術(shù)人員要充分考慮到解決不同大小文件的高效存儲問題，并且還需解決對大量小文件的讀取問題[2]，確保整個電子商務系統(tǒng)能夠穩(wěn)定持續(xù)的運行。伴隨著時間的不斷推移，電子商務用戶的不斷增加，電子商務企業(yè)將會面臨著更多數(shù)據(jù)的儲存管理問題，企業(yè)需要根據(jù)實際情況合理采取數(shù)據(jù)存儲方式，打造出科學完善的系統(tǒng)數(shù)據(jù)儲存庫。

3? 電子商務數(shù)據(jù)存儲模型設計

3.1 Hadoop存儲系統(tǒng)

在我國電子商務數(shù)據(jù)儲存管理工作中，Hadoop分布式系統(tǒng)是一種常用的從數(shù)據(jù)儲存系統(tǒng)，像電商市場上的淘寶網(wǎng)、京東以及百度等都在用這種儲存系統(tǒng)。雖然說Hadoop存儲系統(tǒng)最早是為了搜索引擎中的大文件開發(fā)的，更加針對于大文件的處理和儲存，不適宜用在大量小文件的處理存儲工作中，但是只要通過對其進行一定的優(yōu)化設計，就可以最大程度地發(fā)揮出該種數(shù)據(jù)存儲系統(tǒng)的價值作用，促使其能夠為各種大小海量數(shù)據(jù)提供安全可靠的存儲服務知識。Hadoop存儲系統(tǒng)設計主要包括了兩個部分，它們分別是HDFS（Hadoop分布式文件系統(tǒng)）、Hbase（Hadoop分布式數(shù)據(jù)庫）。

3.2 海量數(shù)據(jù)存儲模型設計

海量數(shù)據(jù)存儲模型的設計主要包括了3個部分內(nèi)容，分別是主服務器、次服務器以及客戶端。如海量數(shù)據(jù)存儲模型中主服務器的構(gòu)成有兩個部分：一部分是主服務器部分，另一部分是查詢主服務器，在優(yōu)化設計數(shù)據(jù)存儲模型主服務器時，技術(shù)人員要確保主服務器能夠通過主動發(fā)送修改信息與查詢主服務器保持一致性[3]，這樣能夠保障系統(tǒng)內(nèi)數(shù)據(jù)被修改后，查詢主服務器能夠有效獲取到對應的映射數(shù)據(jù)修改信息;次服務器是由眾多獨立服務器基于網(wǎng)絡連接構(gòu)成的，其能夠幫助電子商務企業(yè)實現(xiàn)對海量數(shù)據(jù)存儲功能，任何一個次服務器都是由系統(tǒng)主服務器分配決定客戶提交的數(shù)據(jù)表和文件存儲，當客戶從主服務器上獲取到數(shù)據(jù)位置信息后，就能夠有效從對應次服務器上獲取到信息數(shù)據(jù);客戶端作為海量數(shù)據(jù)存儲系統(tǒng)中的各種命令發(fā)起端，它的主要功能作用是讀取、更新以及創(chuàng)建數(shù)據(jù)等?？蛻舳藭詣影凑沼脩舻牟煌顚⑵淇茖W有效地分配到對應的服務器當中，倘若是讀取命令就會自動分配到查詢主服務器，倘若是其他邏輯命令就會自動分配到主服務器端。現(xiàn)代電子商務企業(yè)要想實現(xiàn)對海量數(shù)據(jù)的快速檢索讀取，除了要安排專業(yè)技術(shù)人員設置專門數(shù)據(jù)查詢部門外，還必須在存儲模型當中優(yōu)化設計一個全局的兩層次分布式緩存系統(tǒng)，該分布式緩存系統(tǒng)設計可以采用市場上應用較為廣泛的開源Memcached系統(tǒng)來完成。電子商務系統(tǒng)內(nèi)的主服務器之間、次服務器之間的通信協(xié)議都是基于TCP/IP協(xié)議的。相關工作人員可以在Hadoop存儲系統(tǒng)中合理設計RPC以此實現(xiàn)兩個協(xié)議。

3.3 電子商務數(shù)據(jù)組織方式

基于現(xiàn)代電子商務發(fā)展環(huán)境下，海量數(shù)據(jù)有著多種形式，比如結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)、超媒體數(shù)據(jù)等。其中結(jié)構(gòu)化數(shù)據(jù)主要指的是文本數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)指的是圖片視頻、超媒體數(shù)據(jù)指的是文本信息和多媒體信息的結(jié)合產(chǎn)物。在Hbase分布式數(shù)據(jù)庫搭建過程中，所有存儲數(shù)據(jù)都會被默認成字符串類型，針對于此，工作人員在處理結(jié)構(gòu)化文本數(shù)據(jù)時需要采用Hbase分布式數(shù)據(jù)庫科學存儲對應的字符串[4];對于非結(jié)構(gòu)化數(shù)據(jù)圖片和視頻數(shù)據(jù)時，工作人員需要將其以文件形式高效存儲在對應的HDFS中，同時還需在Hbase有效設置對應的描述和地址信息表;而對于以HTML表示的超媒體數(shù)據(jù)，工作人員需要將HTML數(shù)據(jù)有效轉(zhuǎn)換成相對應的XML數(shù)據(jù)，這樣就能夠?qū)⑵溆行Т鎯υ贖base分布式數(shù)據(jù)庫中，轉(zhuǎn)換后的XML數(shù)據(jù)更加有助于描述信息內(nèi)容的方便檢索查詢。電子商務企業(yè)在數(shù)據(jù)存儲管理工作中，還可以根據(jù)不同類型數(shù)據(jù)信息，采取不同次服務器存儲的方式。比如，工作人員通過建立專門的文本次服務器、圖片視頻次服務器等。

4? 結(jié)語

綜上所述，現(xiàn)代電子商務企業(yè)要高度重視海量數(shù)據(jù)安全高效存儲管理工作，通過優(yōu)化設計海量數(shù)據(jù)存儲模型，有效實現(xiàn)對海量電子商務數(shù)據(jù)的處理?；陔娮由虅瞻l(fā)展環(huán)境下，企業(yè)可以通過設計應用Hadoop系統(tǒng)的存儲架構(gòu)Hbase和HDFS，同時還需注重解決存儲系統(tǒng)中的小文件處理問題，合理增加基于Memcached的分布式緩存系統(tǒng)，根據(jù)不同類型數(shù)據(jù)合理采取對應的存儲組織方式。

參考文獻

[1] 李克然，劉東蘇，鄧媛.電子商務環(huán)境下海量數(shù)據(jù)存儲模型[J].情報雜志，2016（2）：54-57.

[2] 袁建軍.電子商務海量數(shù)據(jù)的獲取、存儲及檢索[J].計算機研究，2017（1）：142-143.

[3] 徐國華.數(shù)據(jù)管理：電子商務數(shù)據(jù)的存儲問題[J].金融信息化論壇，2018（11）：35-37.

[4] 章麗芳.云計算環(huán)境下的電子商務數(shù)據(jù)管理模式研究[J].電腦知識與技術(shù)，2017（3）：81-83.