Oracle和IBM數(shù)據(jù)倉(cāng)庫(kù)方案對(duì)比.doc

Oracle和IBM數(shù)據(jù)倉(cāng)庫(kù)方案對(duì)比1 概述成功地實(shí)施一個(gè)數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目，通常需要很長(zhǎng)的時(shí)間。如果僅僅著眼于短期成果，缺乏整體考慮，采用一種不健全的體系結(jié)構(gòu)，不僅會(huì)增加系統(tǒng)開(kāi)發(fā)和維護(hù)成本，而且必將對(duì)發(fā)揮數(shù)據(jù)倉(cāng)庫(kù)的作用造成不利的影響。Oracle公司是世界上最大的數(shù)據(jù)倉(cāng)庫(kù)廠家，能夠提供完整的數(shù)據(jù)倉(cāng)庫(kù)解決方案。根據(jù)第三方專(zhuān)業(yè)咨詢(xún)機(jī)構(gòu)TDWI-Forrester所做的市場(chǎng)調(diào)查顯示，Oracle是大多數(shù)IT主管選擇數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)時(shí)的首選。IBM數(shù)據(jù)倉(cāng)庫(kù)的市場(chǎng)占有率低于Oracle。權(quán)威市場(chǎng)分析機(jī)構(gòu)IDC發(fā)布全球數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)工具2006年度供應(yīng)商市場(chǎng)份額報(bào)告，根據(jù)2006年度軟件收入，把甲骨文評(píng)為數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)工具領(lǐng)域的領(lǐng)先供應(yīng)商（數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)工具包括ETL工具、數(shù)據(jù)倉(cāng)庫(kù)存儲(chǔ)平臺(tái)、多維數(shù)據(jù)庫(kù)、前端展現(xiàn)工具）。IDC把甲骨文評(píng)為數(shù)據(jù)倉(cāng)庫(kù)管理領(lǐng)域的領(lǐng)先供應(yīng)商，是因?yàn)榧坠俏牡氖袌?chǎng)份額已接近41%。在數(shù)據(jù)倉(cāng)庫(kù)管理工具市場(chǎng)，甲骨文排名最近的競(jìng)爭(zhēng)對(duì)手的各項(xiàng)指標(biāo)幾乎只有甲骨文的一半，市場(chǎng)份額僅占22.8%。下圖是另一家權(quán)威市場(chǎng)分析機(jī)構(gòu)Gartner的數(shù)據(jù)倉(cāng)庫(kù)象限圖：IBM同樣低于Oracle。2 ETL工具IBM的ETL工具有三個(gè)：收購(gòu)的DataStage（通常市場(chǎng)上說(shuō)的IBM的ETL工具指的就是Datastage，不提供增量數(shù)據(jù)捕獲功能，價(jià)格昂貴），數(shù)據(jù)聯(lián)邦工具：Information Integrator（異構(gòu)連接性好、提供增量數(shù)據(jù)捕獲功能，但是不提供完整的數(shù)據(jù)源到目標(biāo)數(shù)據(jù)庫(kù)的ETL功能，尤其是數(shù)據(jù)轉(zhuǎn)換功能很弱，沒(méi)有ETL步驟打包、流程編排功能，沒(méi)有按照事件或者時(shí)間觸發(fā)ETL流程的功能，價(jià)格昂貴），包在Data Warehouse Edition中的ETL工具SQL Warehousing（功能很弱，異構(gòu)連接性差，不提供增量數(shù)據(jù)捕獲，是一個(gè)新工具，沒(méi)有什么用戶，不是IBM的主流ETL工具）。功能點(diǎn)使用場(chǎng)景或者益處OracleIBM增量數(shù)據(jù)捕獲增量數(shù)據(jù)加載時(shí)，如果數(shù)據(jù)源系統(tǒng)沒(méi)有時(shí)間戳，或者時(shí)間戳不可靠，需要利用讀取數(shù)據(jù)源系統(tǒng)日志或者觸發(fā)器方式獲取增量數(shù)據(jù)，然后根據(jù)需要可以復(fù)制到目標(biāo)數(shù)據(jù)庫(kù)上或者批量同步到目標(biāo)數(shù)據(jù)庫(kù)上。Oracle Data Integrator，對(duì)于Oracle數(shù)據(jù)庫(kù)和DB2 400可以采用讀取日志方式，其他數(shù)據(jù)庫(kù)采用觸發(fā)器方式Information Integrator提供，Data Stage霍和SQL Warehousing不提供，對(duì)于Oracle數(shù)據(jù)庫(kù)采用的是觸發(fā)器方式抽取、加載、轉(zhuǎn)換功能Oracle Data IntegratorData Stage或者SQL Warehousing提供，Information Integrator不提供異構(gòu)數(shù)據(jù)源和目標(biāo)支持支持關(guān)系型數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)、文件作為數(shù)據(jù)源和目標(biāo)Oracle Data IntegratorData Stage支持，SQL Warehousing只支持DB2作為目標(biāo)報(bào)錯(cuò)信息采用數(shù)據(jù)庫(kù)報(bào)錯(cuò)信息便于查找錯(cuò)誤原因Oracle Data IntegratorData Stage、SQL Warehousing的錯(cuò)誤信息都是自己工具的錯(cuò)誤信息，不方便查找錯(cuò)誤原因高性能Oracle Data Integrator采用ELT架構(gòu)，數(shù)據(jù)的抽取加載轉(zhuǎn)換過(guò)程在數(shù)據(jù)庫(kù)服務(wù)器上完成，充分利用數(shù)據(jù)庫(kù)的處理能力，從而提高性能Data Stage采用ETL架構(gòu)，數(shù)據(jù)的抽取加載轉(zhuǎn)換過(guò)程在ETL服務(wù)器上完成，不能充分利用數(shù)據(jù)庫(kù)的函數(shù)和處理能力，性能較差。無(wú)須單獨(dú)ETL服務(wù)器減少硬件管理和維護(hù)Oracle Data Integrator不需要單獨(dú)的ETL服務(wù)器Data Stage需要單獨(dú)的ETL服務(wù)器元數(shù)據(jù)存儲(chǔ)在關(guān)心型數(shù)據(jù)庫(kù)中Oracle Data Integrator的元數(shù)據(jù)可以存儲(chǔ)在任何關(guān)系型數(shù)據(jù)庫(kù)中，通過(guò)數(shù)據(jù)庫(kù)開(kāi)發(fā)接口可以訪問(wèn)元數(shù)據(jù)。Data Stage的元數(shù)據(jù)存儲(chǔ)在自己的私有數(shù)據(jù)庫(kù)Universe中，不是主流的數(shù)據(jù)庫(kù)，對(duì)外提供接口方面無(wú)法采用數(shù)據(jù)庫(kù)的開(kāi)發(fā)接口。3 數(shù)據(jù)倉(cāng)庫(kù)功能點(diǎn)使用場(chǎng)景或者益處OracleIBMOLTP和OLAP的支持?jǐn)?shù)據(jù)庫(kù)在此項(xiàng)目中作為數(shù)據(jù)中心使用，其特性既有OLAP作用，已批量數(shù)據(jù)加載、查詢(xún)?yōu)橹鳎灿蠴LTP特性，以高速少量數(shù)據(jù)的增刪改查為主Oracle數(shù)據(jù)庫(kù)既支持OLTP也支持OLAP，在TPC-C和TPC-H測(cè)試中，都有使用數(shù)據(jù)庫(kù)集群或者不使用數(shù)據(jù)庫(kù)集群的測(cè)試結(jié)果。DB2 UDB對(duì)于OLTP的支持方式是不采用數(shù)據(jù)庫(kù)分區(qū)（集群），如在OLTP標(biāo)準(zhǔn)測(cè)試TPC-C中，從未使用集群方式；對(duì)于大數(shù)據(jù)量的OLAP應(yīng)用，采用數(shù)據(jù)庫(kù)分區(qū)（集群），如在OLAP標(biāo)準(zhǔn)測(cè)試TPC-H中，全部采用集群方式。作為數(shù)據(jù)中心這種混合體應(yīng)用，DB2不適合。分區(qū)是提高大量數(shù)據(jù)下性能的好方法，其實(shí)質(zhì)是將達(dá)數(shù)據(jù)量分割為小數(shù)據(jù)量，通過(guò)并行、減少數(shù)據(jù)量等手段提高性能Oracle數(shù)據(jù)庫(kù)提供Range、List、Hash、Range+Hash、List+Hash、Range+List等多種分區(qū)方式；Oracle的分區(qū)技術(shù)從8i就開(kāi)始，是非常成熟的特性DB2 UDB只支持Range、Hash分區(qū)，而且Range分區(qū)技術(shù)從V9才開(kāi)始支持表壓縮Oracle數(shù)據(jù)庫(kù)對(duì)數(shù)據(jù)、索引都進(jìn)行壓縮，并且無(wú)論數(shù)據(jù)增、刪、改操作都可以進(jìn)行壓縮DB2 UDB在數(shù)據(jù)刪、改時(shí)不能進(jìn)行數(shù)據(jù)壓縮數(shù)據(jù)庫(kù)事故恢復(fù)Oracle數(shù)據(jù)庫(kù)可以在數(shù)據(jù)庫(kù)運(yùn)行和磁盤(pán)寫(xiě)入的同時(shí)分割鏡像。如果存檔日志損壞，Oracle數(shù)據(jù)庫(kù)能夠通過(guò)LogMiner工具翻閱損壞的日志文件，恢復(fù)日志文件中記錄的交易。采用Oracle數(shù)據(jù)庫(kù)的塊級(jí)介質(zhì)恢復(fù)功能，當(dāng)只有一個(gè)塊損壞時(shí)，只是這個(gè)塊需要恢復(fù)，文件的其余部分，即含有這個(gè)塊的表仍然可以在線訪問(wèn)，從而提高了數(shù)據(jù)的可用性。DB2必須在掛起數(shù)據(jù)庫(kù)I/O時(shí)才能進(jìn)行分割鏡像備份功能；對(duì)于DB2來(lái)說(shuō)，存檔日志文件損壞意味著不僅特定日志文件中的交易全部丟失，而且損壞日志文件之后創(chuàng)建的存檔日志文件也會(huì)丟失；DB2不能以塊為單位恢復(fù)數(shù)據(jù)，因此需要將整個(gè)文件脫機(jī)、重建、恢復(fù)。分析函數(shù)Oracle數(shù)據(jù)庫(kù)提供很多分析函數(shù)如回歸、假設(shè)分析、統(tǒng)計(jì)函數(shù)等查詢(xún)結(jié)果緩存提高查詢(xún)性能Oracle數(shù)據(jù)庫(kù)提供查詢(xún)結(jié)果緩存功能DB2 UDB不提供4 多維數(shù)據(jù)庫(kù)Hyperion EssbaseCognos PowerPlay多維數(shù)據(jù)庫(kù)定位OLAP技術(shù)領(lǐng)域的引導(dǎo)者，業(yè)界唯一真正意義的多維數(shù)據(jù)庫(kù)，第一個(gè)多線程并發(fā)處理引擎，支持多用戶并發(fā)讀/寫(xiě)，支持?jǐn)?shù)據(jù)庫(kù)觸發(fā)器，支持Unicode，內(nèi)置數(shù)據(jù)挖掘模型。只讀的多維數(shù)據(jù)立方體 ，支持簡(jiǎn)單運(yùn)算的數(shù)據(jù)聚合匯總，屬輕量級(jí)OLAP。適用分析主題提供塊存儲(chǔ)和聚合存儲(chǔ)兩種存儲(chǔ)方式，滿足企業(yè)包括財(cái)務(wù)（財(cái)務(wù)高級(jí)智能）和非財(cái)務(wù)主題（大量稀疏數(shù)據(jù)，如客戶分析、供應(yīng)商分析等）全面的分析需求。只提供聚合存儲(chǔ)方式，滿足小數(shù)據(jù)量、簡(jiǎn)單聚合的分析主題。 維度設(shè)計(jì)1根據(jù)數(shù)據(jù)特征提供屬性維、共享成員、混合存儲(chǔ)等多種靈活維度設(shè)計(jì)，支持父子維；2選用聚合存儲(chǔ)方式，能輕松處理上千萬(wàn)成員維度的分析主題需求；3對(duì)層次設(shè)計(jì)沒(méi)有要求。1 維度設(shè)計(jì)類(lèi)型較單一；2 處理維度成員在數(shù)十萬(wàn)級(jí)別，當(dāng)父節(jié)點(diǎn)直接帶超過(guò)1000個(gè)成員的時(shí)候立方體往往無(wú)法建立。數(shù)據(jù)的加載和計(jì)算1 支持不同數(shù)據(jù)源搭建立方體，數(shù)據(jù)可分批加載；2 支持增量數(shù)據(jù)更新；3 帶自動(dòng)的聚合計(jì)算，也可靈活定義計(jì)算腳本，完成復(fù)雜的計(jì)算規(guī)則，可以完成分?jǐn)?、預(yù)測(cè)、復(fù)雜KPI計(jì)算等高級(jí)分析需求。1 單一數(shù)據(jù)源搭建立方體；2 每次數(shù)據(jù)添加或是數(shù)據(jù)庫(kù)結(jié)構(gòu)改變，PowerPlay的立方體都必須重新建立和部署；3 只有簡(jiǎn)單聚合計(jì)算功能。大數(shù)據(jù)量及性能處理能力1目前有不少客戶的單個(gè)立方體上數(shù)百GB規(guī)模。Essbase多次成為OLAP引擎的業(yè)界基準(zhǔn)。2支持動(dòng)態(tài)聚合，也可設(shè)計(jì)數(shù)據(jù)上層節(jié)點(diǎn)的聚合存儲(chǔ)， 實(shí)現(xiàn)大立方體下的查詢(xún)響應(yīng)速度也非?？臁?實(shí)際當(dāng)立方體上升到幾百M(fèi)之后基本不可用；2由于使用動(dòng)態(tài)聚合，查詢(xún)?cè)L問(wèn)時(shí)間長(zhǎng)。超大規(guī)模部署能力支持大規(guī)模的跨平臺(tái)分布式集群部署，在全球有不少超大規(guī)模部署的成功案例，如日本NTT DoCoMo，大約30,000個(gè)最終用戶。難以擴(kuò)展到超大規(guī)模環(huán)境應(yīng)用開(kāi)發(fā)支持支持Java、JSP/ASP、 C、Visual Basic、DreamWeaver的編程開(kāi)發(fā)，支持XMLA、CWM和Java OLAP API，降低開(kāi)發(fā)成本和集成復(fù)雜度。不支持已有元數(shù)據(jù)，接口較封閉，使用VBA腳本語(yǔ)言?？蛻舳酥С?提供Excel插件，可以在Excel上直接進(jìn)行動(dòng)態(tài)數(shù)據(jù)分析和靈活報(bào)表編制；2 除了BIEE、Hyperion Performance Suite、Hyperion Analyzer外，業(yè)界很多第三方的前端工具都支持Essbase，包括Cognos。接口較封閉，通常只用Cognos的前端。平臺(tái)支持Windows平臺(tái)AIX/HP-Unix/SolarisLinuxAS/400 OS/390Windows平臺(tái)AIX/HP-Unix/Solaris5 數(shù)據(jù)挖掘Oracle Data Mining提供完整的數(shù)據(jù)挖掘功能，從數(shù)據(jù)準(zhǔn)備、數(shù)據(jù)選取、算法選擇、模型建立、模型優(yōu)化、打分、結(jié)果展現(xiàn)，都能夠通過(guò)一個(gè)統(tǒng)一的圖形化界面提供。IBM數(shù)據(jù)庫(kù)挖掘分為很多個(gè)工具模塊，一些是圖形化工具、一些是需要編寫(xiě)腳本的分散功能，如Intelligent Miner、Intelligent Miner Modeling、Intelligent Miner Visualization、Intelligent Miner for Scoring。 IBM數(shù)據(jù)庫(kù)挖掘工具不能進(jìn)行模型優(yōu)化，打分需要利用單獨(dú)的Intelligent Miner for Scoring編寫(xiě)腳本來(lái)實(shí)現(xiàn)，沒(méi)有集成到圖形化工具中。6 前端展現(xiàn)工具功能點(diǎn)OracleIBM性能Oracle BIEE提供服務(wù)器端的緩存，提高性能；Cognos不提供服務(wù)期端的緩存；DashboardOracle BIEE的Dashboard可以集成靈活報(bào)表和固定報(bào)表、可以集成外部的URL連接、網(wǎng)頁(yè)、iFrame；可以在圖表上方便地集成自定義腳本；Oracle BIEE的Dashboard編輯簡(jiǎn)便。操作系統(tǒng)支持WindowsAIX/HPUX/SolarisLinuxWindowsAIX/HPUX/Solaris和其他工具的集成性O(shè)racle BIEE的用戶可以存儲(chǔ)在文件中、數(shù)據(jù)庫(kù)中或者通用LDAP中；Oracle BIEE可以按照J(rèn)SR168標(biāo)準(zhǔn)和Portal集成