數(shù)據(jù)倉庫的數(shù)據(jù)存儲與處理.ppt

2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,1,第2章 數(shù)據(jù)倉庫的數(shù)據(jù)存儲與處理,謝紅俠,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,2,2.1 數(shù)據(jù)倉庫的三層數(shù)據(jù)結構,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,3,2.2 數(shù)據(jù)倉庫的數(shù)據(jù)特征,狀態(tài)數(shù)據(jù)與事件數(shù)據(jù) 當前數(shù)據(jù)與周期數(shù)據(jù) 數(shù)據(jù)倉庫中的元數(shù)據(jù),2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,4,2.3 數(shù)據(jù)倉庫的數(shù)據(jù)ETL過程,ETL概念 ETL過程前后數(shù)據(jù)的特征 數(shù)據(jù)的ETL過程描述 抽?。–apture/Extract） 清洗（Scrub/Cleanse） 轉換（Transform） 加載和索引（Load/Index）,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,5,ETL的概念,數(shù)據(jù)ETL是用來實現(xiàn)異構數(shù)據(jù)源的數(shù)據(jù)集成，即完成數(shù)據(jù)的抓取/抽取（Capture/Extract）、清洗（Scrub or data cleansing）、轉換（Transform）、裝載與索引（Load and Index）等數(shù)據(jù)調和工作,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,6,數(shù)據(jù)的ETL過程描述,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,7,數(shù)據(jù)ETL過程的實施要點,ETL過程是一個數(shù)據(jù)流動的過程，中間的“T”（轉換）是關鍵 ； ETL工具的選擇非常重要，運用合適的工具會事半功倍 ； 如何保證數(shù)據(jù)質量？數(shù)據(jù)質量在一定程度上決定了數(shù)據(jù)倉庫的價值 。,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,8,2.4 多維數(shù)據(jù)模型和星模式,多維數(shù)據(jù)模型及其相關概念 多維數(shù)據(jù)模型的物理實現(xiàn) 多維建模技術簡介 一個星模式的例子,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,9,多維數(shù)據(jù)模型及其相關概念,有關多維數(shù)據(jù)模型的幾個概念：維、維類別、維屬性、度量、粒度及分割等 關于數(shù)據(jù)綜合級別與粒度的確定:一般把數(shù)據(jù)分成四個級別：早期細節(jié)級、當前細節(jié)級、輕度綜合級、高度綜合級,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,10,多維數(shù)據(jù)模型的物理實現(xiàn),多維數(shù)據(jù)庫（MDDB）,其數(shù)據(jù)是存儲在大量的多維數(shù)組中，而不是關系表中 ,與之相對應的是多維聯(lián)機分析處理（MOLAP） 關系數(shù)據(jù)庫是存儲OLAP數(shù)據(jù)的另一種主要方式。與之對應的是關系聯(lián)機分析處理（ROLAP）,2019/11/5,數(shù)據(jù)倉庫與數(shù)據(jù)挖掘,11,多維建模技術簡介,兩種主流建模技術 :由Inmon提出的企業(yè)級數(shù)據(jù)倉庫模型和由Kimball提出的多維模型 ； 基于關系數(shù)據(jù)庫的多維數(shù)據(jù)建模，如星型,雪花和