一、電子商務(wù)簡介及其面臨的問題

伴隨著互聯(lián)網(wǎng)絡(luò)的發(fā)展，電子商務(wù)從興起到快速發(fā)展已經(jīng)經(jīng)歷了十多年的時間，電子商務(wù)作為一種全新的商務(wù)運(yùn)行模式，已經(jīng)深入到我們的生活中，在企業(yè)與企業(yè)之間的商務(wù)活動中同樣發(fā)揮著越來越重要的作用。構(gòu)建符合企業(yè)經(jīng)營模式、有效實(shí)現(xiàn)銷售、供應(yīng)、生產(chǎn)三者有機(jī)結(jié)合的電子商務(wù)系統(tǒng)已經(jīng)成為更多商業(yè)企業(yè)的當(dāng)務(wù)之急，未來電子商務(wù)對企業(yè)利潤的重要支撐作用也已經(jīng)成為人們的共識。

在電子商務(wù)系統(tǒng)的發(fā)展過程中，出現(xiàn)了一些新問題引起了研發(fā)人員的注意：

1、  數(shù)據(jù)規(guī)模不斷擴(kuò)大

眾所周知，基于Web的電子商務(wù)平臺已經(jīng)成為電子商務(wù)系統(tǒng)的主流并不斷發(fā)展壯大，這種模式比傳統(tǒng)的系統(tǒng)運(yùn)行更有效、更節(jié)約成本，但隨之而來的問題是Internet上數(shù)據(jù)量異常巨大，用傳統(tǒng)方法進(jìn)行處理已捉襟見肘。

2、  數(shù)據(jù)復(fù)雜性大大增加

Internet上的數(shù)據(jù)不僅數(shù)量巨大，而且格式多種多樣，內(nèi)容種類千差萬別，往往同一領(lǐng)域內(nèi)的數(shù)據(jù)其類型和格式相差甚遠(yuǎn)，如何進(jìn)行集成也是一個大問題。

3、  歷史數(shù)據(jù)需要妥善處理

以往商務(wù)活動產(chǎn)生了巨大的數(shù)據(jù)，但這些數(shù)據(jù)影響了系統(tǒng)運(yùn)行的效率，在進(jìn)行數(shù)據(jù)索引、重組、監(jiān)控等方面對系統(tǒng)響應(yīng)時間的影響很大，同時也浪費(fèi)了許多資源。如何把這些歷史數(shù)據(jù)從操作型數(shù)據(jù)庫中移出，使之能在需要進(jìn)行趨勢分析和預(yù)測的時候合理利用也是一個值得考慮的問題。

4、  高級查詢的需求

在數(shù)據(jù)查詢方面，常規(guī)的查詢和匯總功能已經(jīng)不能滿足電子商務(wù)的需求，分析人員要求對整個系統(tǒng)中的數(shù)據(jù)進(jìn)行全局查詢和快速匯總，而傳統(tǒng)的數(shù)據(jù)庫系統(tǒng)既滿足不了大量一致性的數(shù)據(jù)需求，又實(shí)現(xiàn)不了對高級查詢的快速響應(yīng)，很難實(shí)現(xiàn)對商務(wù)管理的決策支持。

5、  對大量概要視圖的需求

電子商務(wù)中可能有些人經(jīng)常要看一些商品、價(jià)格、庫存的匯總表，如果按照傳統(tǒng)數(shù)據(jù)庫系統(tǒng)的處理方法，需要先定義虛擬視圖，在每次用戶請求時都要從實(shí)際數(shù)據(jù)庫中把數(shù)據(jù)經(jīng)過抽取裝入視圖中，這在查詢操作比較多的情況下將嚴(yán)重消耗系統(tǒng)資源，也在一定程度上增加了響應(yīng)時間。如果能把一些格式比較固定、需求量又比較大的視圖在系統(tǒng)中進(jìn)行物化存儲，當(dāng)需要的時候快速地提供給使用者，將大大提高系統(tǒng)性能。

6、  如何為數(shù)據(jù)挖掘提供支持

隨著電子商務(wù)規(guī)模的發(fā)展，積累的數(shù)據(jù)越來越豐富，利用數(shù)據(jù)挖掘技術(shù)在這些數(shù)據(jù)上進(jìn)行挖掘分析已經(jīng)成為不可回避的話題，如何有效組織數(shù)據(jù)為數(shù)據(jù)挖掘提供數(shù)據(jù)源也成了企業(yè)的當(dāng)務(wù)之急。

7、  希望存儲點(diǎn)擊流數(shù)據(jù)

基于Web環(huán)境的電子商務(wù)系統(tǒng)通常會產(chǎn)生大量點(diǎn)擊流數(shù)據(jù)，每當(dāng)用戶進(jìn)行頁面瀏覽或查看產(chǎn)品時就產(chǎn)生一個點(diǎn)擊事件。電子商務(wù)分析人員可以通過點(diǎn)擊流事件了解用戶心理傾向、購買習(xí)慣和對產(chǎn)品的評價(jià)，點(diǎn)擊流數(shù)據(jù)對電子商務(wù)分析有重要價(jià)值，如何有效存儲這些數(shù)據(jù)為今后的分析提供依據(jù)也是企業(yè)關(guān)心的問題。

       在早期的電子商務(wù)系統(tǒng)中，人們更注重于具體業(yè)務(wù)功能的實(shí)現(xiàn)，數(shù)據(jù)盡管是必須的，但一般都是簡單的堆放，其整理、存儲也都是按照具體的應(yīng)用來組織的，滿足的是電子商務(wù)運(yùn)行的最低數(shù)據(jù)需求，在這些數(shù)據(jù)之上只能實(shí)現(xiàn)簡單的匯總查詢功能，要進(jìn)行分析預(yù)測是非常困難的，更談不上有效的輔助管理決策。隨著商務(wù)規(guī)模的壯大，各種數(shù)據(jù)不斷增長，原來的數(shù)據(jù)組織方式已經(jīng)滿足不了業(yè)務(wù)發(fā)展的需求，亟需一種新的數(shù)據(jù)組織方式，用以整合企業(yè)全局?jǐn)?shù)據(jù)，將數(shù)據(jù)統(tǒng)一規(guī)劃，統(tǒng)一處理，并按主題模式統(tǒng)一存儲，只有這樣才能有效管理數(shù)據(jù)，并進(jìn)行數(shù)據(jù)統(tǒng)計(jì)、分析、預(yù)測，最終為企業(yè)決策提供依據(jù)。而數(shù)據(jù)倉庫的出現(xiàn)恰好滿足了以上需求，可以說，電子商務(wù)與數(shù)據(jù)倉庫的結(jié)合是必須的也是必然的。

二、數(shù)據(jù)倉庫對電子商務(wù)的支持

       電子商務(wù)的核心是信息獲取、管理與有效地使用，可以說，數(shù)據(jù)倉庫是電子商務(wù)的運(yùn)行基礎(chǔ)。一般認(rèn)為，數(shù)據(jù)倉庫在兩方面對電子商務(wù)提供支持，一是事務(wù)處理，即傳統(tǒng)事務(wù)處理概念的延伸，另一種是決策支持，也是未來電子商務(wù)的核心所在。

1、  數(shù)據(jù)倉庫對事務(wù)處理的支持

一方面，電子商務(wù)系統(tǒng)的運(yùn)行首先要處理大量的操作性事務(wù)，這是在日常的運(yùn)作過程中不可避免的，包括處理終端用戶的購買行為、處理與供應(yīng)商及合作伙伴的交易等，當(dāng)然也包括相應(yīng)的安全認(rèn)證，電子支付等。上述行為的實(shí)現(xiàn)一般是用傳統(tǒng)的數(shù)據(jù)庫技術(shù)，但我們應(yīng)該看到：在電子商務(wù)環(huán)境下由于數(shù)據(jù)量巨大、數(shù)據(jù)種類繁雜，用傳統(tǒng)的操作型數(shù)據(jù)庫進(jìn)行管理已經(jīng)不能勝任，需要數(shù)據(jù)倉庫系統(tǒng)對這些數(shù)據(jù)進(jìn)行統(tǒng)一存儲、管理，即用數(shù)據(jù)倉庫進(jìn)行全局控制。一般的做法是用數(shù)據(jù)庫進(jìn)行各種事務(wù)處理，保存短期數(shù)據(jù)，之后把這些數(shù)據(jù)轉(zhuǎn)入數(shù)據(jù)倉庫中統(tǒng)一管理。

另一方面，企業(yè)的電子商務(wù)系統(tǒng)往往與企業(yè)其他系統(tǒng)出現(xiàn)交互的情況，例如企業(yè)資源規(guī)劃（ERP）、客戶關(guān)系管理（CRM）、企業(yè)供應(yīng)鏈管理（SCM）等應(yīng)用都需要數(shù)據(jù)倉庫的支持，其中大部分應(yīng)用都需要數(shù)據(jù)倉庫直接作為他們的底層存儲機(jī)制，即使不是這樣，企業(yè)最終也需要把上述系統(tǒng)中的數(shù)據(jù)統(tǒng)一存儲到數(shù)據(jù)倉庫中以備企業(yè)整體需求。

我們看到，從長期數(shù)據(jù)存儲與統(tǒng)一管理的角度講，對數(shù)據(jù)倉庫的需求已經(jīng)相當(dāng)迫切。

2、  數(shù)據(jù)倉庫對決策支持的支持

決策支持是電子商務(wù)系統(tǒng)的核心，運(yùn)用企業(yè)寶貴的信息進(jìn)行分析、預(yù)測并最終為決策經(jīng)營提供合理依據(jù)才是電子商務(wù)的魅力所在，企業(yè)利潤的最終提升才是電子商務(wù)成功的標(biāo)志。在數(shù)據(jù)倉庫基礎(chǔ)上，分析人員不必考慮數(shù)據(jù)來源，也不需考慮非集成的數(shù)據(jù)以及細(xì)節(jié)數(shù)據(jù)和匯總數(shù)據(jù)兩者之間的連接，簡言之，數(shù)據(jù)倉庫提供了電子商務(wù)分析人員有效支持電子商務(wù)處理所需的數(shù)據(jù)基礎(chǔ)。除了日常交易數(shù)據(jù)，來自企業(yè)資源計(jì)劃、供應(yīng)鏈管理系統(tǒng)的數(shù)據(jù)也將成為電子商務(wù)分析決策的重要數(shù)據(jù)資源。數(shù)據(jù)倉庫使電子商務(wù)分析人員從數(shù)據(jù)工程師的角色中擺脫出來，成為真正的分析人員。

綜合以上兩方面：數(shù)據(jù)倉庫對電子商務(wù)的支持主要表現(xiàn)在：

★數(shù)據(jù)倉庫為電子商務(wù)提供集成的，面向主題的數(shù)據(jù)存儲

★數(shù)據(jù)倉庫的只讀特性為高級查詢功能提供良好的支持

★數(shù)據(jù)倉庫支持匯總數(shù)據(jù)的物化存儲

★數(shù)據(jù)倉庫為向下、向上探察處理提供方便，有利與業(yè)務(wù)分析

★數(shù)據(jù)倉庫的元數(shù)據(jù)為分析人員理解系統(tǒng)數(shù)據(jù)的組織提供巨大幫助

★數(shù)據(jù)倉庫可以存儲大量的點(diǎn)擊流數(shù)據(jù)，輔助分析人員進(jìn)行用戶購買習(xí)慣、動機(jī)的分析，最終保留或贏得更多的顧客

★數(shù)據(jù)倉庫龐大的歷史數(shù)據(jù)支持決策人員進(jìn)行數(shù)據(jù)挖掘和趨勢分析

三、基于數(shù)據(jù)倉庫的電子商務(wù)系統(tǒng)架構(gòu)

1、  系統(tǒng)目標(biāo)

電子商務(wù)系統(tǒng)的主要設(shè)計(jì)目標(biāo)是確定一個系統(tǒng)模型，使之既能滿足電子商務(wù)日常運(yùn)作的需求，又能對決策管理進(jìn)行有效支持。數(shù)據(jù)模型必須清楚易懂，能夠支持分析人員進(jìn)行方便快速的查詢匯總和業(yè)務(wù)分析。為了達(dá)到上述目標(biāo)，必須建立集成一致的數(shù)據(jù)倉庫，而且需要在數(shù)據(jù)倉庫之上建立適合業(yè)務(wù)分析的多維數(shù)據(jù)集市。數(shù)據(jù)倉庫平臺的開發(fā)過程相對復(fù)雜，是一個數(shù)據(jù)驅(qū)動的過程，既要有效配合電子商務(wù)中用戶、供應(yīng)商、企業(yè)內(nèi)部銷售市場部門的操作流程，又要考慮數(shù)據(jù)倉庫與企業(yè)原有系統(tǒng)如企業(yè)資源規(guī)劃ERP、供應(yīng)鏈管理SCM的有效融合，此外還要為數(shù)據(jù)挖掘等其他高級應(yīng)用提供數(shù)據(jù)接口。

2、  系統(tǒng)組成

基于數(shù)據(jù)倉庫的電子商務(wù)系統(tǒng)是由硬件和軟件兩部分組成的。硬件平臺是用來支撐大量數(shù)據(jù)存取、多類用戶操作、多種任務(wù)執(zhí)行；軟件平臺則用一個高效且優(yōu)化的方式來組織和管理數(shù)據(jù)。數(shù)據(jù)倉庫在電子商務(wù)系統(tǒng)的基礎(chǔ)作用要通過合理有效的平臺支持才能發(fā)揮出來，系統(tǒng)平臺決定了數(shù)據(jù)倉庫環(huán)境的處理能力。一個高性能的數(shù)據(jù)倉庫平臺必須能夠適應(yīng)電子商務(wù)業(yè)務(wù)的增長，包括用戶需求的增長和商務(wù)人員分析需求的增長。

3、  介紹一個典型而全面的系統(tǒng)架構(gòu)

上面我們提到，基于數(shù)據(jù)倉庫的電子商務(wù)系統(tǒng)比以往的系統(tǒng)更加復(fù)雜，需要對企業(yè)全局應(yīng)用進(jìn)行綜合考慮，下面介紹一個W.H.Inmon提出的系統(tǒng)架構(gòu)。

從圖中我們看到：

●     數(shù)據(jù)倉庫是整個電子商務(wù)系統(tǒng)的基礎(chǔ)

信息是電子商務(wù)系統(tǒng)的靈魂，數(shù)據(jù)倉庫為整個系統(tǒng)提供安全、集成、面向主題的數(shù)據(jù)存儲。如果把電子商務(wù)系統(tǒng)比做一個人體，數(shù)據(jù)倉庫起到了骨骼的支撐作用[1]，它一方面容納其他應(yīng)用產(chǎn)生的業(yè)務(wù)數(shù)據(jù)，另一方面又為進(jìn)一步的分析處理提供豐富可靠的數(shù)據(jù)源。

●     企業(yè)里各業(yè)務(wù)系統(tǒng)產(chǎn)生的數(shù)據(jù)放入數(shù)據(jù)倉庫

企業(yè)資源規(guī)劃（ERP）、企業(yè)供應(yīng)鏈管理（SCM）以及企業(yè)里運(yùn)行的各種應(yīng)用都產(chǎn)生和處理大量數(shù)據(jù)，這些數(shù)據(jù)是企業(yè)的寶貴財(cái)富，系統(tǒng)通過抽取、匯總、裝載等步驟把這些數(shù)據(jù)放進(jìn)數(shù)據(jù)倉庫，數(shù)據(jù)倉庫中匯集了豐富的歷史數(shù)據(jù)。

●     進(jìn)行OLAP多維分析需要數(shù)據(jù)倉庫的支持

OLAP分析直接依靠具有多維數(shù)據(jù)模型的部門數(shù)據(jù)倉庫即數(shù)據(jù)集市，而數(shù)據(jù)集市中的數(shù)據(jù)都是從企業(yè)數(shù)據(jù)倉庫中取得的。

●     與用戶進(jìn)行業(yè)務(wù)交易需要數(shù)據(jù)倉庫的間接支持

用戶通過Web與電子商務(wù)系統(tǒng)進(jìn)行交互主要有三種方式。

一種方式是與Web雙向傳遞數(shù)據(jù)，比如商品信息、交易信息或者某用戶的歷史購買信息，這種情況下為了提高響應(yīng)速度不是由數(shù)據(jù)倉庫中直接處理數(shù)據(jù)（數(shù)據(jù)倉庫也不適合進(jìn)行操作型業(yè)務(wù)處理），而是預(yù)先把數(shù)據(jù)存放到操作型數(shù)據(jù)庫中，由操作型數(shù)據(jù)庫與用戶進(jìn)行交互。

第二種方式是用戶的點(diǎn)擊流數(shù)據(jù)向系統(tǒng)傳遞，用戶點(diǎn)擊流對商務(wù)分析人員分析用戶的購買習(xí)慣、消費(fèi)心理有重要的意義，需要從Web日志轉(zhuǎn)入數(shù)據(jù)倉庫中保存，但這類數(shù)據(jù)往往非常龐大，需要經(jīng)過粒度管理器進(jìn)行清理、匯總再放入數(shù)據(jù)倉庫中。

此外，系統(tǒng)有時需要向用戶傳遞一些商品促銷等臨時性的信息給特定的用戶，實(shí)際上在這種特殊情況下，用戶群體的確定必須依據(jù)數(shù)據(jù)倉庫中的信息。

可見，電子商務(wù)系統(tǒng)與用戶的交互離不開數(shù)據(jù)倉庫的支持。

●     數(shù)據(jù)倉庫為企業(yè)高級應(yīng)用提供數(shù)據(jù)支持。

數(shù)據(jù)倉庫中寶貴而大量的數(shù)據(jù)只有通過企業(yè)的有效應(yīng)用才能發(fā)揮最大作用，有了數(shù)據(jù)倉庫的支撐，企業(yè)客戶關(guān)系管理系統(tǒng)、商務(wù)報(bào)表匯總系統(tǒng)、智能商務(wù)系統(tǒng)、數(shù)據(jù)挖掘系統(tǒng)等高級應(yīng)用系統(tǒng)就有了豐富可用的數(shù)據(jù)源，而且隨著商務(wù)的發(fā)展，更多的分析系統(tǒng)將被開發(fā)出來，這些系統(tǒng)的數(shù)據(jù)主要來源于企業(yè)數(shù)據(jù)倉庫。

●     數(shù)據(jù)倉庫中的數(shù)據(jù)也需要備份轉(zhuǎn)儲

盡管數(shù)據(jù)倉庫適合保存大量歷史數(shù)據(jù)，但過量的數(shù)據(jù)可能造成系統(tǒng)性能的下降，特別是有些數(shù)據(jù)的訪問頻率非常低，如用戶點(diǎn)擊流數(shù)據(jù)，如果一直保留著將對數(shù)據(jù)倉庫系統(tǒng)造成很大壓力，所以在設(shè)計(jì)電子商務(wù)系統(tǒng)時還要考慮將數(shù)據(jù)倉庫中訪問頻率低的大量數(shù)據(jù)轉(zhuǎn)儲到準(zhǔn)在線存儲系統(tǒng)或海量存儲環(huán)境中去。

四、結(jié)束語

伴隨著Internet的快速發(fā)展，電子商務(wù)已經(jīng)深入到我們的日常生活當(dāng)中，越來越多的企業(yè)也把搭建電子商務(wù)環(huán)境作為自己的目標(biāo)。本文介紹了電子商務(wù)系統(tǒng)中所面臨的一些普遍問題，這些問題大多數(shù)與企業(yè)數(shù)據(jù)相關(guān)。為解決這些問題，需要在電子商務(wù)環(huán)境中引入企業(yè)級數(shù)據(jù)倉庫，并論述了數(shù)據(jù)倉庫與電子商務(wù)的結(jié)合將成為電子商務(wù)繼續(xù)發(fā)展的必要條件。本文還探討了以數(shù)據(jù)倉庫為基礎(chǔ)的電子商務(wù)系統(tǒng)的組成，并介紹了一個典型而全面的電子商務(wù)架構(gòu)的實(shí)例。

參考文獻(xiàn)：

[1] http://www.billinmon.com

[2].  W.H.Inmon:Building the Data Warehouse,Third Edition(2002). John Wiley & Sons.Inc.

[3].鐘珞等.支持電子商務(wù)的高性能數(shù)據(jù)倉庫平臺的設(shè)計(jì).武漢理工大學(xué)學(xué)報(bào)，2003年2月，第25卷第2期.

[4]. http://www.iturls.com.