數(shù)據(jù)倉庫概念設(shè)計和介紹PPT課件

1、事務(wù)處理環(huán)境不適宜事務(wù)處理環(huán)境不適宜DSS應(yīng)用的原應(yīng)用的原因因 事務(wù)處理和分析處理的性能特性不同 操作型處理對數(shù)據(jù)的存取操作頻率高而每次操作處理的時間短； 在分析處理環(huán)境中，某個DSS應(yīng)用程序可能需要連續(xù)幾個小時，從而消耗大量的系統(tǒng)資源。 數(shù)據(jù)集成問題 數(shù)據(jù)動態(tài)集成問題 歷史數(shù)據(jù)問題 數(shù)據(jù)的綜合問題 第1頁/共29頁抽取程序抽取程序 用抽取程序能將數(shù)據(jù)從高性能聯(lián)機(jī)事務(wù)處理方式中轉(zhuǎn)移出來，在需要總體分析數(shù)據(jù)時就與聯(lián)機(jī)事務(wù)處理性能不發(fā)生沖突。 用抽取程序能將數(shù)據(jù)從聯(lián)機(jī)事務(wù)處理范圍內(nèi)移出時，數(shù)據(jù)的控制方式就發(fā)生了轉(zhuǎn)變。第2頁/共29頁蜘蛛網(wǎng)問題蜘蛛網(wǎng)問題n缺乏將數(shù)據(jù)轉(zhuǎn)化為信息所需的歷史數(shù)據(jù)第3頁/共

2、29頁體系結(jié)構(gòu)設(shè)計環(huán)境的層次體系結(jié)構(gòu)設(shè)計環(huán)境的層次第4頁/共29頁數(shù)據(jù)倉庫的概念數(shù)據(jù)倉庫的概念 第5頁/共29頁數(shù)據(jù)倉庫的特性數(shù)據(jù)倉庫的特性 第6頁/共29頁數(shù)據(jù)倉庫的結(jié)構(gòu)數(shù)據(jù)倉庫的結(jié)構(gòu)第7頁/共29頁 數(shù)據(jù)倉庫設(shè)計中的幾個重要概念數(shù)據(jù)倉庫設(shè)計中的幾個重要概念 據(jù)單元屬于且僅屬于一個分割。第8頁/共29頁第9頁/共29頁n -種設(shè)計技術(shù)。第10頁/共29頁企業(yè)數(shù)據(jù)模型到數(shù)據(jù)倉庫數(shù)據(jù)模型的轉(zhuǎn)換企業(yè)數(shù)據(jù)模型到數(shù)據(jù)倉庫數(shù)據(jù)模型的轉(zhuǎn)換第11頁/共29頁數(shù)據(jù)模型的規(guī)范化數(shù)據(jù)模型的規(guī)范化/反規(guī)范化反規(guī)范化第12頁/共29頁數(shù)據(jù)倉庫體系結(jié)構(gòu)OLTP數(shù)據(jù)源數(shù)據(jù)倉庫數(shù)據(jù)集市? 數(shù)據(jù)采集及整合數(shù)據(jù)的映射規(guī)則、模型

3、。 （元數(shù)據(jù)管理）數(shù)據(jù)倉庫項(xiàng)目流程管理及系統(tǒng)性能管理和監(jiān)控? 數(shù)據(jù)展現(xiàn)及決策生產(chǎn)財務(wù)結(jié)算外部航線分析總量分析市場分析InfoPump數(shù)據(jù)分析、DM終端用戶終端用戶第13頁/共29頁從操作型的現(xiàn)存系統(tǒng)到數(shù)據(jù)倉庫中數(shù)從操作型的現(xiàn)存系統(tǒng)到數(shù)據(jù)倉庫中數(shù)據(jù)轉(zhuǎn)換工作的難點(diǎn)據(jù)轉(zhuǎn)換工作的難點(diǎn)第14頁/共29頁概念概念：數(shù)據(jù)周期、簡要記錄數(shù)據(jù)周期、簡要記錄第15頁/共29頁數(shù)據(jù)倉庫的建模數(shù)據(jù)倉庫的建模應(yīng)用于數(shù)據(jù)倉庫中較小的實(shí)體。第16頁/共29頁Vendor dataVendor dataVendor datavendor_id供應(yīng)商cust_id客戶order_id發(fā)貨Order dataOrder data

4、order_id訂單Cust dataCust dataCust dataNonkey dataOrder dataOrder dataOrder data產(chǎn)品Product dataProduct dataProduct dataProduct idVendor idNonkey datacust idNonkey dataorder idNonkey dataproduct id第17頁/共29頁數(shù)據(jù)建模的十條戒律數(shù)據(jù)建模的十條戒律必須回答緊迫的問題；必須有正確的事實(shí)表；將有正確的維表，描述必須按最終用戶的業(yè)務(wù)術(shù)語表達(dá)；必須理解數(shù)據(jù)倉庫所影響的公司過程或影響數(shù)據(jù)倉庫的公司過程；對于事實(shí)表，

5、應(yīng)該有正確的“粒度”；根據(jù)需要存儲正確長度的公司歷史數(shù)據(jù)；以一種對于公司有意義的方式來集成所有必要的數(shù)據(jù)；創(chuàng)建必要的總結(jié)表；創(chuàng)建必要的索引；能夠加載數(shù)據(jù)倉庫數(shù)據(jù)庫并使它以一種適宜的方式可用。第18頁/共29頁數(shù)據(jù)集市外部數(shù)據(jù)數(shù)據(jù)集市建造企業(yè)數(shù)據(jù)倉庫H建設(shè)中心數(shù)據(jù)模型H一次性的完成數(shù)據(jù)的重構(gòu)工作H最小化數(shù)據(jù)冗余度和不一致性H存儲詳細(xì)的歷史數(shù)據(jù)從企業(yè)數(shù)據(jù)倉庫中建造數(shù)據(jù)集市H得到大部分的集成數(shù)據(jù)H直接依賴于數(shù)據(jù)倉庫的可用性操作數(shù)據(jù)問題投資效益的時間?H建設(shè)中心數(shù)據(jù)模型的必要性和可能性?初始費(fèi)用 ?企業(yè)數(shù)據(jù)倉庫第19頁/共29頁數(shù)據(jù)集市建立部門數(shù)據(jù)集市H限制在一個主題區(qū)域H快速投資收益 H區(qū)域自治 設(shè)

6、計的可伸縮性強(qiáng)H對相關(guān)部門的應(yīng)用容易復(fù)制 H對每個數(shù)據(jù)集市需要數(shù)據(jù)重構(gòu)H存在一定的冗余及不一直性逐步擴(kuò)展到企業(yè)數(shù)據(jù)倉庫 (EDW)H把建造EDW作為一個長期的目標(biāo)存在的問題:數(shù)據(jù)集市的數(shù)據(jù)都是可用的嗎?能生成數(shù)據(jù)模型嗎?如何解決不一致性?外部數(shù)據(jù)操作數(shù)據(jù) (全局)&操作數(shù)據(jù) (局部)操作數(shù)據(jù) (局部)數(shù)據(jù)集市企業(yè)數(shù)據(jù)倉庫第20頁/共29頁數(shù)據(jù)倉庫的開發(fā)過程數(shù)據(jù)倉庫的開發(fā)過程第21頁/共29頁數(shù)據(jù)模型的內(nèi)容數(shù)據(jù)模型的內(nèi)容第22頁/共29頁表達(dá)數(shù)據(jù)模型的最好數(shù)據(jù)表達(dá)數(shù)據(jù)模型的最好數(shù)據(jù)第23頁/共29頁將數(shù)據(jù)模型變?yōu)閿?shù)據(jù)倉庫要做的主要工將數(shù)據(jù)模型變?yōu)閿?shù)據(jù)倉庫要做的主要工作作第24頁/共29頁在接口中需完成的工作在接口中需完成的工作第25頁/共29頁數(shù)據(jù)倉庫開