ORACLE官方數(shù)據(jù)倉庫案例

新鄉(xiāng)會展 2009-02-13

展開全文

作者：來源：發(fā)布時(shí)間：2008-01-28 09:28

成立于2003年的淘寶網(wǎng)穩(wěn)踞亞洲購物網(wǎng)站的第一名，會員數(shù)超過4000萬人，每年成交額皆以倍數(shù)快速成長，在2006年就已突破169億人民幣。隨著業(yè)績的持續(xù)攀升，以及同步成長的驚人數(shù)據(jù)量，淘寶網(wǎng)希望能從中挖掘出有用的信息，做為業(yè)務(wù)決策與網(wǎng)站運(yùn)營的依據(jù)，因此，決定投資建置數(shù)據(jù)倉庫。

淘寶網(wǎng)以O(shè)racle網(wǎng)格運(yùn)算（Grid Computing）技術(shù)重新打造并強(qiáng)化基礎(chǔ)架構(gòu)環(huán)境，再進(jìn)行數(shù)據(jù)倉庫的建置，短短半年之內(nèi)就完成上線工作。淘寶網(wǎng)表示：「數(shù)據(jù)倉庫的效益，在于分析歷史、預(yù)測將來，以及看到所有活動(dòng)的歷史軌跡。它同時(shí)也是最佳指針，有效規(guī)范最終決策，不致太過偏離現(xiàn)實(shí)。

挑戰(zhàn)業(yè)務(wù)面與技術(shù)面的雙重需求

淘寶網(wǎng)所面臨的挑戰(zhàn)，分別來自業(yè)務(wù)面與技術(shù)面。就業(yè)務(wù)面來看，如何設(shè)計(jì)出更多且更好的行銷活動(dòng)，以吸引更多客戶，正是首要的業(yè)務(wù)目標(biāo)。

而在技術(shù)面，基礎(chǔ)架構(gòu)的提升及強(qiáng)化將是關(guān)鍵。淘寶網(wǎng)甫于2003年成立，就連年以倍數(shù)快速成長，對于延展性的需求特別高；但另一方面，基礎(chǔ)架構(gòu)的建置仍缺乏整體且完善的規(guī)劃與考量，則是主要的隱憂。

截至目前為止，淘寶網(wǎng)所累積的數(shù)據(jù)量已達(dá)10 TB之多，而且，這個(gè)數(shù)字還會隨著每年翻倍成長的成交額同步上升。但龐大的數(shù)據(jù)量與計(jì)算量，已超出原有環(huán)境的負(fù)荷，進(jìn)而對數(shù)據(jù)庫的運(yùn)行速度造成顯著的影響。

淘寶網(wǎng)說明，原有的數(shù)據(jù)庫雖然只使用了二、三年，但由于數(shù)據(jù)量成長的很快，再加上今年激活了許多新項(xiàng)目，對于數(shù)據(jù)庫的要求也相對提高。因此，建置數(shù)據(jù)倉庫時(shí)，最大的技術(shù)挑戰(zhàn)將在于效率及速度。

效益
添增商業(yè)智能與數(shù)據(jù)挖掘功能，運(yùn)行效能提升超過兩倍

淘寶網(wǎng)的數(shù)據(jù)倉庫主要提供商業(yè)智能（Business Intelligence）分析與數(shù)據(jù)挖掘（Data Mining）兩大功能，同時(shí)，也會根據(jù)業(yè)務(wù)需求，提供所需的企業(yè)級報(bào)表，或進(jìn)行用戶行為模式分析。

淘寶網(wǎng)表示：「高達(dá)八成的員工都會使用數(shù)據(jù)倉庫系統(tǒng)，無論是財(cái)務(wù)、巿場、服務(wù)或網(wǎng)站運(yùn)營，同樣必須每天看報(bào)表、做分析。而在主管方面，則是生成報(bào)表之后，再以電子郵件寄發(fā)。

舉例來說，針對「十一長假」，淘寶網(wǎng)設(shè)計(jì)了許多促銷活動(dòng)上線，要確認(rèn)活動(dòng)是否達(dá)到預(yù)期目標(biāo)，就要靠數(shù)據(jù)倉庫來計(jì)算及分析活動(dòng)的效果。此外，巿場部門也能根據(jù)往年的歷史數(shù)據(jù)，找出效果最好的活動(dòng)并重新包裝推出。
淘寶網(wǎng)指出，數(shù)據(jù)倉庫上線之后，搜尋及查詢數(shù)據(jù)的效能比原有環(huán)境提升兩倍以上，整體系統(tǒng)的效能表現(xiàn)游刃有余，使用上也更為迅速及便利。

針對數(shù)據(jù)倉庫的未來應(yīng)用方向，淘寶網(wǎng)也有許多規(guī)劃與期望，例如：增加「推薦引擎」，強(qiáng)化對消費(fèi)者的服務(wù)，讓數(shù)據(jù)倉庫的應(yīng)用不只局限在傳統(tǒng)領(lǐng)域，而是讓更多人使用及共享。

淘寶網(wǎng)表示：「公司里每個(gè)部門的業(yè)績都有倍數(shù)成長，IT部門當(dāng)然也不能落后。以O(shè)racle技術(shù)建置的基礎(chǔ)架構(gòu)與數(shù)據(jù)倉庫環(huán)境，絕對具備支持公司在未來持續(xù)成長的延展空間。

從兩小時(shí)縮減為五分鐘的高效率。
除了建置數(shù)據(jù)倉庫之外，強(qiáng)化基礎(chǔ)架構(gòu)同樣名列本次項(xiàng)目的重點(diǎn)。Oracle則以網(wǎng)格運(yùn)算技術(shù)Oracle Real Application Clusters與Oracle Cluster Ready Services，結(jié)合自動(dòng)化管理方案Oracle Automatic Storage Management與Oracle Partitioning，為淘寶網(wǎng)打造高延展性且自動(dòng)化的基礎(chǔ)架構(gòu)環(huán)境。

以O(shè)racle Automatic Storage Management為例，主要在取代原本必須以人力手動(dòng)操作及調(diào)整的主機(jī)工具。由于Oracle Automatic Storage Management是高度自動(dòng)化的解決方案，絕大多數(shù)的作業(yè)都能自動(dòng)進(jìn)行管理，無需人力介入操作，因而大幅減輕了工作負(fù)擔(dān)。

舉例來說，要為服務(wù)器增加磁盤時(shí)，過去必須先由IT人員做好規(guī)劃，涵蓋從設(shè)定、安裝到分散數(shù)據(jù)，才能行動(dòng)。但現(xiàn)在，IT人員只需下指令，后續(xù)作業(yè)就由Oracle Automatic Storage Management自動(dòng)接手完成，通盤考量最佳的安裝及建置作法，完全無需IT人員的介入。

淘寶網(wǎng)表示：「過去必須耗費(fèi)兩小時(shí)才能完成的工作，在Oracle Automatic Storage Management只要五分鐘就能完成，不僅效率更高，管理負(fù)擔(dān)也相對減輕許多。而且，Oracle Automatic Storage Management還能隨時(shí)自動(dòng)進(jìn)行監(jiān)控調(diào)整，確保系統(tǒng)環(huán)境的優(yōu)化。

評選與導(dǎo)入
添增商業(yè)智能與數(shù)據(jù)挖掘功能，運(yùn)行效能提升超過兩倍

2007年初，淘寶網(wǎng)找來了Oracle、NCR、IBM、HP與Sybase進(jìn)行解決方案評估，最后只留下Oracle與NCR進(jìn)行對戰(zhàn)。第一道關(guān)卡是概念驗(yàn)證（PoC；Proof of Concept），進(jìn)行大批量的特殊查詢與并行查詢；第二道關(guān)卡則是性能/價(jià)格比。

以性能而言，Oracle在多項(xiàng)標(biāo)竿測試?yán)?，領(lǐng)先競爭產(chǎn)品數(shù)倍。更重要的是，運(yùn)行于開放系統(tǒng)的Oracle數(shù)據(jù)倉庫，相較于采用專屬軟硬件的競爭產(chǎn)品，不僅初期建置成本更低，維運(yùn)及升級也更為容易，而且，因應(yīng)未來需求的成長，還能以更低投資，更彈性地?cái)U(kuò)充IT基礎(chǔ)架構(gòu)。

淘寶網(wǎng)就指出：「建置數(shù)據(jù)

本站是提供個(gè)人知識管理的網(wǎng)絡(luò)存儲空間，所有內(nèi)容均由用戶發(fā)布，不代表本站觀點(diǎn)。請注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購買等信息，謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容，請點(diǎn)擊一鍵舉報(bào)。

轉(zhuǎn)藏 分享

QQ空間 QQ好友新浪微博微信

獻(xiàn)花（0） +1

來自：新鄉(xiāng)會展 > 《應(yīng)用虛擬化》

舉報(bào)/認(rèn)領(lǐng)