初探電子商務在大數(shù)據(jù)時代下的數(shù)據(jù)管理論文
大數(shù)據(jù)時代的到來改變了人們對數(shù)據(jù)的認識和態(tài)度，電子商務作為大數(shù)據(jù)產(chǎn)生的主要來源之一，其發(fā)展狀態(tài)及趨勢越來越被人們所關注。電子商務數(shù)據(jù)每年增長約60%，但數(shù)據(jù)利用卻不足5%，人們迫切希望通過數(shù)據(jù)的力量來解決一些發(fā)展道路上遇到的瓶頸問題。數(shù)據(jù)的價值逐漸被人們所重視，數(shù)據(jù)的客觀性、真實性、可靠性為電子商務的數(shù)據(jù)服務提供了堅實的“物質(zhì)基礎”，繼而發(fā)展成為一種產(chǎn)業(yè)。那么大數(shù)據(jù)時代進行數(shù)據(jù)存儲方式、讀取方式、分析方式的創(chuàng)新以及增加數(shù)據(jù)服務模式已經(jīng)成為大勢所趨，本文正是對上述問題進行初步研究。
一、數(shù)據(jù)存儲方式
隨著Web2.0時代的到來，傳統(tǒng)的數(shù)據(jù)存儲模式已經(jīng)不能夠應付規(guī)模龐大的數(shù)據(jù)流。存儲設備的成本增加，數(shù)據(jù)洪期的不預定型，結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)混雜等因素讓存儲不得不做出徹底的變革。
為了減少存儲成本，提高存儲容量和存儲空間利用率，人們利用虛擬化技術對存儲設備進行改造，將所有存儲空間作為一個資源池，可以自由的配置存儲設備空間。虛擬化技術主要利用軟件實現(xiàn)對存儲資源的控制，根據(jù)實際需要可以將軟件安裝在相應的硬件設備之上。為提高一些性能較為低下的設備利用率，可以通過網(wǎng)絡將這些設備連接起來，作為數(shù)據(jù)存儲的載體。例如San系統(tǒng)，集群系統(tǒng)。San系統(tǒng)與集群系統(tǒng)都可以實現(xiàn)數(shù)據(jù)共享和訪問，并可以對存儲空間進行自由的擴展，但是San系統(tǒng)可以支持不同客戶端的操作系統(tǒng)，擴展范圍更加廣泛，運用更加靈活。
San網(wǎng)絡存儲由服務器、存儲、互連組成，利用光纖通道實現(xiàn)對存儲設備的管理，既可以實現(xiàn)服務器到存儲的數(shù)據(jù)傳輸，也可以實現(xiàn)服務器到服務器的數(shù)據(jù)通信。San網(wǎng)絡采用雙環(huán)方式及數(shù)據(jù)遠程備份，增加了數(shù)據(jù)安全性。San對于磁盤進行虛擬化，可以讓磁盤同步存儲數(shù)據(jù)，加速了磁盤讀/寫操作的效率。
二、數(shù)據(jù)讀取方式
現(xiàn)階段，電子商務的數(shù)據(jù)存儲方式大多依靠廣泛使用的關系型數(shù)據(jù)庫。關系型數(shù)據(jù)庫采用關系模型，在結(jié)構(gòu)上更容易理解，而其使用的數(shù)據(jù)庫操作語言SQL也廣泛被人們所接受。由于其對數(shù)據(jù)類型等多方面的嚴謹性，減少了使得數(shù)據(jù)庫的維護量，提高了數(shù)據(jù)管理效率。
然而，隨著電子商務的飛速發(fā)展，數(shù)據(jù)量的'巨增，給關系數(shù)據(jù)庫的I/O端口造成了很大的壓力。其次，在對數(shù)據(jù)的查詢操作上，尤其是一些大表的嵌套查詢，效率非常低。由于龐大的數(shù)據(jù)量，對數(shù)據(jù)庫的維護造成了一定影響，數(shù)據(jù)庫無法動態(tài)擴展其存儲空間及提高其負載能力。數(shù)據(jù)庫升級和往往要進行停機維護，導致業(yè)務的中斷。
近年來，非關系型數(shù)據(jù)庫及分布式存儲的出現(xiàn)可以解決傳統(tǒng)關系型數(shù)據(jù)庫存在的問題。NoSQL數(shù)據(jù)庫是為了解決大規(guī)模數(shù)據(jù)集的管理，包括對數(shù)據(jù)的存儲及并發(fā)控制。而數(shù)據(jù)的多樣化，非結(jié)構(gòu)化等難題，給大數(shù)據(jù)處理及分析帶來了挑戰(zhàn)�，F(xiàn)在NoSQL類型有很多，且各自擁有各自的技術優(yōu)勢，數(shù)據(jù)管理者要結(jié)合自己的需求選擇好合適的NoSQL數(shù)據(jù)庫，才能體現(xiàn)非關系型數(shù)據(jù)庫具備的優(yōu)勢。NoSQL數(shù)據(jù)庫主要分為：鍵值存儲數(shù)據(jù)庫，列存儲數(shù)據(jù)庫，文檔型數(shù)據(jù)庫，圖形數(shù)據(jù)庫等。NoSQL數(shù)據(jù)庫并沒有一個統(tǒng)一的架構(gòu)，兩種NoSQL數(shù)據(jù)庫之間的不同，甚至遠遠超過兩種關系型數(shù)據(jù)庫的不同。NoSQL沒有高低之分，只能合理地使用NoSQL到適合的場合，才能充分發(fā)揮NoSQL的優(yōu)勢。
現(xiàn)在比較常用的NoSQL數(shù)據(jù)庫主要是Redis，Leveldb， Mongodb，HBase。HBase作為Hadoop的子項目，適合于非結(jié)構(gòu)化的數(shù)據(jù)存儲。HBase的一大特點是基于列的模式，這樣可以增強數(shù)據(jù)庫的擴展性，提高數(shù)據(jù)庫的存儲效率。而且，HBase作為分布式數(shù)據(jù)庫可以在廉價服務器上搭建起規(guī)模龐大且結(jié)構(gòu)化的存儲集群。
三、數(shù)據(jù)分析方式
大數(shù)據(jù)時代下，人們對數(shù)據(jù)的態(tài)度有了很大改變，對數(shù)據(jù)的研究由追尋因果向數(shù)據(jù)相關性轉(zhuǎn)變。然而，對于電子商務來說，需求關系的分析是電商市場一個重要因素，仍然不可或缺。電子商務數(shù)據(jù)包含了客戶的基本信息、消費信息、商家的產(chǎn)品信息、金融交易信息等結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù)。對電子商務數(shù)據(jù)的分析可分為幾個方面：
(1)流量數(shù)據(jù)分析，包含了對電子商務網(wǎng)站的流量，點擊率等數(shù)據(jù)的分析。流量的大小可以反映商品的推廣程度，但是，為檢測一些為提高點擊率的惡意、虛假行為，需要對流量來源等數(shù)據(jù)進行分析，確保點擊率能真實反映產(chǎn)品推廣程度。網(wǎng)站到達率，二跳率，pv/ip值等數(shù)據(jù)都可反映商品宣傳的效果。
(2)網(wǎng)站數(shù)據(jù)分析，網(wǎng)站數(shù)據(jù)最能直接反映商品推廣效率，商品質(zhì)量及商品銷售情況等重要信息。各式各樣的電商產(chǎn)品琳瑯滿目，客戶往往會陷入難以抉擇的尷尬局面，難以達成交易。通過對網(wǎng)站數(shù)據(jù)的分析，可以更好的了解客戶的真實需求和偏好，并制定相應的營銷策略，更好的將商品推銷至客戶。
(3)信用數(shù)據(jù)分析，無論是客戶還是商家，信用都代表了其交易的真誠度和可靠性。信用主要以交易量及交易評價作為依據(jù)。面對日益競爭激烈的電商市場，商家為了提高自身的銷售額，難免采用一些不正當手段，通過構(gòu)造虛假評論信息來提升自己和打擊對手。通過對評價數(shù)據(jù)的分析，可以判斷其評價的真實性，避免了一些商家通過炒作來提高自身信用和客戶惡意評價等行為帶來的影響。
四、數(shù)據(jù)服務模式
大數(shù)據(jù)時代下，數(shù)據(jù)分析所利用的數(shù)據(jù)不再是通過簡單的抽樣得到的樣本，而是要將整體數(shù)據(jù)作為分析來源。以大數(shù)據(jù)的分析手段，得到分析結(jié)果。盡管相較于傳統(tǒng)方法，大數(shù)據(jù)分析需要消耗更多的時間和資源，然而，往往一些孤僻、異常的數(shù)據(jù)才是問題出現(xiàn)的根本原因，而原有的抽樣方式很有可能將此類數(shù)據(jù)遺漏，影響到最終的分析結(jié)果。
通常，數(shù)據(jù)服務提供可視化界面，展現(xiàn)數(shù)據(jù)的統(tǒng)計分析結(jié)果。對于大數(shù)據(jù)的統(tǒng)計分析，需要呈現(xiàn)出更多，更廣的事務特征。例如，某些電商推出的十年賬單查詢服務，引起了社會廣泛的反響。如今，隨著大數(shù)據(jù)分析技術的革新，數(shù)據(jù)服務模式也在不斷增加，大數(shù)據(jù)輔助決策和預測事物發(fā)展的特點引發(fā)了人們利用數(shù)據(jù)來研究事物發(fā)展規(guī)律的極大興趣，使得研究結(jié)果更具有客觀性和可靠性。
【初探電子商務在大數(shù)據(jù)時代下的數(shù)據(jù)管理論文】相關文章：
3.大數(shù)據(jù)時代下我國審計行業(yè)的發(fā)展論文
4.管理會計在大數(shù)據(jù)時代的發(fā)展論文