數(shù)據(jù)倉庫維度建模PPT課件

1 數(shù)據(jù)倉庫維度建模 2 目錄1 基礎(chǔ)術(shù)語2 維度建模中的兩種模型3 星形模型設(shè)計(jì)4 雪花模型設(shè)計(jì)5 星形模型的優(yōu)勢6 雪花模型的優(yōu)勢與劣勢 3 1 基礎(chǔ)術(shù)語 事實(shí)表 FactTable 每個(gè)數(shù)據(jù)倉庫都包含一個(gè)或者多個(gè)事實(shí)數(shù)據(jù)表 事實(shí)數(shù)據(jù)表可能包含業(yè)務(wù)銷售數(shù)據(jù) 如現(xiàn)金登記事務(wù)所產(chǎn)生的數(shù)據(jù) 事實(shí)數(shù)據(jù)表通常包含大量的行主要包含了描述特定商業(yè)事件的數(shù)據(jù) 即某些特定商業(yè)事件的度量值 一般事實(shí)表中只存放數(shù)字或者一些Flag用來統(tǒng)計(jì) 如數(shù)量 支出等一般情況下 事實(shí)表中的數(shù)據(jù)不允許修改 新的數(shù)據(jù)只是簡單地添加進(jìn)事實(shí)表中事實(shí)就是需要分析的目標(biāo)數(shù)據(jù) 4 1 基礎(chǔ)術(shù)語 維度表 DimensionTable 維度表可以看作是用戶來分析數(shù)據(jù)的窗口 維度表中包含事實(shí)數(shù)據(jù)表中事實(shí)記錄的特性 有些特性提供描述性信息 有些特性指定如何匯總事實(shí)數(shù)據(jù)表數(shù)據(jù) 以便為分析者提供有用的信息 維度表包含幫助匯總數(shù)據(jù)的特性的層次結(jié)構(gòu) 每一個(gè)維度表利用維度關(guān)鍵字通過事實(shí)表中的外鍵約束于事實(shí)表中的某一行維度表示的是事實(shí)信息的屬性 5 1 基礎(chǔ)術(shù)語 粒度 Grain 粒度表示的是事實(shí)表中細(xì)節(jié)數(shù)據(jù)的詳細(xì)程度最低粒度事實(shí)表的基本層次是所有相應(yīng)維度自然的最低層次 例 產(chǎn)品 日期 客戶 銷售員為4個(gè)維度 則 事實(shí)表一條記錄中必須有 單獨(dú)的產(chǎn)品 特定的日期 特定的銷售員和特定客戶使用最低粒度的好處可以頻繁容易的從操作型系統(tǒng)抽取數(shù)據(jù)很多數(shù)據(jù)挖掘需要最低層次便于向下鉆取使用最低粒度的缺點(diǎn)存儲(chǔ)和維護(hù)的代價(jià)實(shí)際處理中 我們構(gòu)建匯總事實(shí)表來支持匯總數(shù)據(jù)查詢 6 2 維度的兩種模型 星形模型 StarSchema 雪花模型 SnowflakeSchema 7 星形模型 StarSchema 事實(shí)被維度所包圍 且維度沒有被新的表連接 8 雪花模型 SnowflakeSchema 事實(shí)表被多個(gè)維表或一個(gè)或多個(gè)層次所包圍 9 3 星形模型設(shè)計(jì) 1 正確區(qū)分事實(shí) 屬性和維度 維度模型需要對(duì)事實(shí)和屬性進(jìn)行區(qū)分 業(yè)務(wù)層的很多事實(shí)都是數(shù)值型的 特別是該數(shù)值是浮點(diǎn)數(shù)時(shí) 他很可能是一個(gè)事實(shí) 而不是屬性 例如 標(biāo)準(zhǔn)價(jià)格 好像是產(chǎn)品維度的一個(gè)屬性 似乎是事先一致的常量 但每年對(duì)標(biāo)準(zhǔn)價(jià)格進(jìn)行一 兩次調(diào)整 因此應(yīng)該設(shè)計(jì)成事實(shí) 屬性通常指文本字段 例如產(chǎn)品描述 維度是類似于文本形式的屬性組合 固定的數(shù)值型屬性應(yīng)放在維表中 例如 零售數(shù)據(jù)倉庫中 至少應(yīng)有一個(gè)產(chǎn)品維度 一個(gè)商店維度 一個(gè)客戶維 一個(gè)時(shí)間維 一個(gè)促銷維 10 3 星形模型設(shè)計(jì) 2 事實(shí)表的設(shè)計(jì)方法 事實(shí)表是數(shù)據(jù)倉庫中最大的表 在設(shè)計(jì)時(shí) 一定注意使事實(shí)表盡可能的小 因?yàn)檫^大的事實(shí)表在表的處理 備份和恢復(fù) 用戶查詢等方面要用較長的時(shí)間 具體方法主要有 減少列的數(shù)量 降低每列的大小 把歷史數(shù)據(jù)存檔 例如 零售營銷事實(shí)表設(shè)計(jì)如下 11 3 星形模型設(shè)計(jì) 3 維表的設(shè)計(jì) 維表的屬性必須具有以下特征 可用文字描述 離散值 有規(guī)定的約束 在分析時(shí)可提供行標(biāo)題 12 3 星形模型設(shè)計(jì) 例 零售業(yè)營銷分析的星型模型圖 13 4 雪花模型設(shè)計(jì) 雪花模型是對(duì)星形模型的擴(kuò)展 每一個(gè)維度都可以向外連接多個(gè)詳細(xì)類別表 在這種模式中 維度表除了具有星形模型中維度表的功能外 還連接對(duì)事實(shí)表進(jìn)行詳細(xì)描述的詳細(xì)類別表 詳細(xì)類別表通過對(duì)事實(shí)表在有關(guān)維上的詳細(xì)描述達(dá)到了縮小事實(shí)表和提高查詢效率的目的 14 4 基本雪花模型設(shè)計(jì) 在該模型中 將地理層次國家 區(qū)域和分區(qū)域嵌入到銷售員維度 這樣 公司的管理者想按照國家 區(qū)域 分區(qū)域和分區(qū)域內(nèi)的銷售員的層次關(guān)系來查看公司的銷售情況 15 4 基本雪花模型設(shè)計(jì) 16 5 星形模型的優(yōu)勢 用戶容易理解優(yōu)化瀏覽在數(shù)據(jù)庫模式中 表與表連接的目的在于尋找到需要的數(shù)據(jù)如果連接的路徑復(fù)雜 那么在數(shù)據(jù)庫中瀏覽數(shù)據(jù)將是緩慢而艱難的如果連接路徑簡單 直接 則瀏覽數(shù)據(jù)會(huì)更快星型模型的優(yōu)勢之一在于它優(yōu)化對(duì)數(shù)據(jù)庫的瀏覽 17 5 星形模型的優(yōu)勢 最適于查詢處理星型模型是一種以查詢?yōu)橹行牡慕Y(jié)構(gòu)簡單 清洗的連接路徑以及星星模型本身的結(jié)構(gòu)使得查詢?cè)诰S度表和事實(shí)表之間順利 流暢 高效星型連接和星型索引星型連接是一種高速 并行 單獨(dú)操作的多表的連接 可顯著的提高查詢性能星型索引是一種專門的索引 建立在事實(shí)表的一個(gè)或多個(gè)外鍵上 提高維度表與事實(shí)表的連接速度 18 6 雪花模型的優(yōu)勢與劣