數(shù)據(jù)倉庫技術介紹

數(shù)據(jù)倉庫技術介紹2023/5/27數(shù)據(jù)倉庫技術介紹內(nèi)容提要動機與需求數(shù)據(jù)倉庫技術數(shù)據(jù)倉庫在寶鋼的實踐結束語數(shù)據(jù)倉庫技術介紹面臨的問題人們在日常生活中經(jīng)常會遇到這樣的情況：超市的經(jīng)營者希望將經(jīng)常被同時購買的商品放在一起，以增加銷售；保險公司想知道購買保險的客戶一般具有哪些特征；醫(yī)學研究人員希望從已有的成千上萬份病歷中找出患某種疾病的病人的共同特征，從而為治愈這種疾病提供一些幫助；……數(shù)據(jù)倉庫技術介紹企業(yè)面臨的問題經(jīng)過多年的計算機應用和市場積累，許多企業(yè)保存了大量原始數(shù)據(jù)和各種業(yè)務數(shù)據(jù),它是企業(yè)生產(chǎn)經(jīng)營活動的真實記錄由于缺乏集中存儲和管理，這些數(shù)據(jù)不能為本企業(yè)加以利用,不能進行有效的統(tǒng)計、分析及評估，無法將這些數(shù)據(jù)轉換成企業(yè)有用的信息數(shù)據(jù)倉庫技術介紹數(shù)據(jù)爆炸問題自動的數(shù)據(jù)收集工具和成熟的數(shù)據(jù)庫技術導致巨大的數(shù)據(jù)存儲在文件系統(tǒng)、數(shù)據(jù)庫和其它的信息庫中。我們會淹死在數(shù)據(jù)中,但卻為信息、知識所餓!數(shù)據(jù)倉庫技術介紹面臨的挑戰(zhàn)如何在堆積如山的企業(yè)交易數(shù)據(jù)中發(fā)現(xiàn)具有商業(yè)價值的閃光點？如何使您的企業(yè)或組織在激烈的市場競爭中保持對客戶的吸引力？如何預先發(fā)現(xiàn)和避免企業(yè)運作過程中不易察覺的商業(yè)風險？數(shù)據(jù)倉庫技術介紹寶鋼整體產(chǎn)銷信息管理系統(tǒng)L4L2過程控制計算機系統(tǒng)L3（分廠級）生產(chǎn)控制計算機系統(tǒng)寶鋼計算機系統(tǒng)的架構L1基礎自動化基礎自動化數(shù)據(jù)倉庫技術介紹寶鋼的現(xiàn)狀及需求寶鋼擁有許多傳統(tǒng)的OLTP（聯(lián)機事務處理）系統(tǒng)，擔負著許多重要的日常事物處理工作，在寶鋼的生產(chǎn)經(jīng)營活動中扮演著重要角色。經(jīng)過多年的計算機應用，寶鋼積累了大量豐富翔實的原始生產(chǎn)實績數(shù)據(jù)和各種業(yè)務數(shù)據(jù)，它反映了企業(yè)生產(chǎn)經(jīng)營過程中規(guī)律性的信息和知識，由于缺乏集中存儲和管理，對如何充分有效地利用這些數(shù)據(jù)，卻一直沒有很好的解決方法，不能利用它們進行有效的統(tǒng)計、分析及評估，無法將這些數(shù)據(jù)轉換成企業(yè)真正有用的信息。數(shù)據(jù)倉庫技術介紹寶鋼追求的目標寶鋼作為中國的特大型鋼鐵企業(yè)，它的主要建設目標是在激烈的國際國內(nèi)市場競爭中立于不敗之地，并且要加強管理、優(yōu)化資源，追求效益最大化。這就要求使其生產(chǎn)和經(jīng)營過程共同達到優(yōu)化，例如，能夠快速準確地提供報價、確定交貨期、以及確保產(chǎn)品質量等，并且制定有正確的企業(yè)發(fā)展戰(zhàn)略，以適應市場需求的變化，能做出及時反應。數(shù)據(jù)倉庫技術介紹寶鋼股份的質量方針“重用戶、重改進、重效率、重價值，為社會提供世界一流的產(chǎn)品和服務?！?----寶鋼股份質量方針隨著市場競爭的加劇和用戶要求的提高，從大量數(shù)據(jù)中挖掘規(guī)律性知識，制定正確的生產(chǎn)策略和市場策略，顯得越來越重要。數(shù)據(jù)倉庫技術介紹市場需求是技術發(fā)展的源動力數(shù)據(jù)倉庫的出現(xiàn)和發(fā)展是數(shù)據(jù)庫和OLTP技術發(fā)展、數(shù)據(jù)庫應用深化的產(chǎn)物；目的是把數(shù)據(jù)庫中的大量數(shù)據(jù)轉化為有用信息，為企業(yè)更好地進行決策服務。數(shù)據(jù)倉庫技術介紹內(nèi)容提要動機與需求數(shù)據(jù)倉庫技術數(shù)據(jù)倉庫在寶鋼的實踐結束語數(shù)據(jù)倉庫技術介紹在早期，業(yè)務人員考慮如何實現(xiàn)自動化…..計算機發(fā)展史數(shù)據(jù)倉庫技術介紹

在數(shù)據(jù)庫應用的早期，計算機系統(tǒng)所處理的是從無到有的問題，是傳統(tǒng)手工業(yè)務自動化的問題。例如銀行的儲蓄系統(tǒng)、電信的計費系統(tǒng)，它們都屬于典型的聯(lián)機事務處理系統(tǒng)。computer手工業(yè)務自動化數(shù)據(jù)倉庫技術介紹computercomputer 很快就建立了許多應用系統(tǒng)，在當時，一個企業(yè)可以簡單地通過擁有聯(lián)機事務處理的計算機系統(tǒng)而獲得強大的市場競爭力。聯(lián)機事務系統(tǒng)的建立數(shù)據(jù)倉庫技術介紹

聯(lián)機事務系統(tǒng)的建立（續(xù)）當時單位容量的聯(lián)機存儲介質比現(xiàn)在昂貴得多，相對于市場競爭的壓力，將大量的歷史業(yè)務數(shù)據(jù)長時間聯(lián)機保存去用于分析顯然是過于奢侈了。因此，聯(lián)機事務處理系統(tǒng)只涉及當前數(shù)據(jù)，系統(tǒng)積累下的歷史業(yè)務數(shù)據(jù)往往被轉儲到脫機的環(huán)境中。在計算機系統(tǒng)應用的早期，還沒有積累大量的歷史數(shù)據(jù)可供統(tǒng)計與分析。從而，聯(lián)機事務處理成為整個80年代直到90年代初數(shù)據(jù)庫應用的主流。數(shù)據(jù)倉庫技術介紹在數(shù)據(jù)倉庫以前大都是事物處理系統(tǒng)(OLTP)的天下（1965-1990）這個現(xiàn)狀持續(xù)了25年，它主要實現(xiàn)-數(shù)據(jù)的收集-數(shù)據(jù)的存儲-數(shù)據(jù)的在線存取聯(lián)機事務系統(tǒng)的功能數(shù)據(jù)倉庫技術介紹但是在OLTP系統(tǒng)中存在著若干問題-數(shù)據(jù)不是綜合的-沒有歷史數(shù)據(jù)-沒有匯總數(shù)據(jù)聯(lián)機事務系統(tǒng)的問題數(shù)據(jù)倉庫技術介紹computercomputercomputerQ1Q2Q3Q1Q2Q3Q4管理者想要了解公司的情況…數(shù)據(jù)集成問題有多少品種?數(shù)據(jù)倉庫技術介紹computer缺乏數(shù)據(jù)集成不是一個唯一的問題-歷史數(shù)據(jù)的缺乏是另一個應用問題-在過去的三年中，我的帳戶每月平均余額是多少?-我怎樣才能知道這些數(shù)字?-我的帳戶現(xiàn)在有多少錢?-你有2,704.87元歷史數(shù)據(jù)問題數(shù)據(jù)倉庫技術介紹computer另一個問題是匯總….-發(fā)往A公司的貨物在哪里?-在出廠中心，將于下周一運到-我們上個月、去年有多少貨物發(fā)往A公司?-有多少貨物準時到達?晚到?發(fā)生貨損?-我要寫個匯總報告.匯總問題數(shù)據(jù)倉庫技術介紹computer

-貫穿公司的數(shù)據(jù)集成?-公司的歷史數(shù)據(jù)?-詳細數(shù)據(jù)及匯總數(shù)據(jù)?獲取信息的重要因素數(shù)據(jù)倉庫技術介紹 應用在不斷地進步，當聯(lián)機事務處理系統(tǒng)應用到一定階段的時候，企業(yè)家們便發(fā)現(xiàn)單靠擁有聯(lián)機事務處理系統(tǒng)已經(jīng)不足以獲得市場競爭的優(yōu)勢；他們需要對其自身業(yè)務的運作以及整個市場相關行業(yè)的態(tài)勢進行分析，從而做出有利的決策。決策的需要數(shù)據(jù)倉庫技術介紹 決策需要對大量的業(yè)務數(shù)據(jù)包括歷史業(yè)務數(shù)據(jù)進行分析才能得到，而這種基于業(yè)務數(shù)據(jù)的決策分析，我們把它稱之為聯(lián)機分析處理。如果說傳統(tǒng)聯(lián)機事務處理強調(diào)的是更新數(shù)據(jù)庫——向數(shù)據(jù)庫中添加信息，那么聯(lián)機分析處理就是要從數(shù)據(jù)庫中獲取信息、利用信息。聯(lián)機分析處理數(shù)據(jù)倉庫技術介紹

“我們花了20多年的時間將數(shù)據(jù)放入數(shù)據(jù)庫，如今是該將它們拿出來的時候了?！?/p>

----著名的數(shù)據(jù)倉庫專家RalphKimball市場需求是技術發(fā)展的源動力數(shù)據(jù)倉庫技術介紹早期應用系統(tǒng)PC電子表格歸檔文件OLTP系統(tǒng)數(shù)據(jù)倉庫獲得信息如何獲得信息數(shù)據(jù)倉庫技術介紹

第一，所有聯(lián)機事務處理強調(diào)的是數(shù)據(jù)更新處理性能和系統(tǒng)的可靠性，并不關心信息查詢的方便與快捷；聯(lián)機分析和事務處理對系統(tǒng)的要求不同，同一個數(shù)據(jù)庫在理論上難以做到兩全；獲得有用的信息并非想象的那么容易(1)數(shù)據(jù)倉庫技術介紹第二，業(yè)務數(shù)據(jù)往往被存放于分散的異構環(huán)境中，不易統(tǒng)一查詢訪問，而且還有大量的歷史數(shù)據(jù)處于脫機狀態(tài)，形同虛設；獲得有用的信息并非想象的那么容易(2)數(shù)據(jù)倉庫技術介紹第三，業(yè)務數(shù)據(jù)的模式是針對事務處理系統(tǒng)而設計的，數(shù)據(jù)的格式和描述方式并不適合非計算機專業(yè)人員進行業(yè)務上的分析和統(tǒng)計。獲得有用的信息并非想象的那么容易(3)數(shù)據(jù)倉庫技術介紹

針對這一問題，人們專門為業(yè)務的統(tǒng)計分析建立一個數(shù)據(jù)中心，它的數(shù)據(jù)可以從聯(lián)機的事務處理系統(tǒng)、異構的外部數(shù)據(jù)源、脫機的歷史業(yè)務數(shù)據(jù)中得到；它是一個聯(lián)機的系統(tǒng)，專門為分析統(tǒng)計和決策支持應用服務，通過它可滿足決策支持和聯(lián)機分析應用所要求的一切。這個數(shù)據(jù)中心就叫作數(shù)據(jù)倉庫。數(shù)據(jù)倉庫的通俗解釋數(shù)據(jù)倉庫技術介紹

數(shù)據(jù)倉庫是一個作為決策支持系統(tǒng)和聯(lián)機分析應用數(shù)據(jù)源的結構化數(shù)據(jù)環(huán)境。數(shù)據(jù)倉庫的通俗定義數(shù)據(jù)倉庫技術介紹 以辯證的眼光來看，數(shù)據(jù)倉庫的興起實際上是數(shù)據(jù)管理的一種回歸，是螺旋式的上升。今天的數(shù)據(jù)庫就好比當年的層次數(shù)據(jù)庫和網(wǎng)型數(shù)據(jù)庫，它們面向事務處理；今天的數(shù)據(jù)倉庫就好比是當年的關系數(shù)據(jù)庫，它針對聯(lián)機分析。所不同的是，今天的數(shù)據(jù)倉庫不必再為聯(lián)機事務處理的特性而奔忙，由于技術的專業(yè)化，它可更專心于聯(lián)機分析領域的發(fā)展和探索。數(shù)據(jù)庫與數(shù)據(jù)倉庫的辯證關系數(shù)據(jù)倉庫技術介紹傳統(tǒng)的事務處理環(huán)境不適宜于決策支持應用事務處理和分析處理的性能特性不同數(shù)據(jù)集成問題數(shù)據(jù)動態(tài)集成問題歷史數(shù)據(jù)問題數(shù)據(jù)的綜合問題操作型環(huán)境和分析型環(huán)境的分離從數(shù)據(jù)庫到數(shù)據(jù)倉庫數(shù)據(jù)倉庫技術介紹操作型數(shù)據(jù)&分析型數(shù)據(jù)的區(qū)別數(shù)據(jù)倉庫技術介紹業(yè)務系統(tǒng)DSS（決策支持系統(tǒng)）現(xiàn)在1990數(shù)據(jù)集市ODS近線存儲器探索倉庫數(shù)據(jù)倉庫概念的誕生數(shù)據(jù)倉庫技術介紹數(shù)據(jù)倉庫的定義數(shù)據(jù)倉庫是面向主題的、綜合的、不同時間的、穩(wěn)定的時間集合，主要用于支持經(jīng)營管理中的決策制定過程數(shù)據(jù)倉庫之父--BillInmon數(shù)據(jù)倉庫技術介紹數(shù)據(jù)倉庫的四個基本特征數(shù)據(jù)倉庫的數(shù)據(jù)是面向主題的數(shù)據(jù)倉庫的數(shù)據(jù)是集成的數(shù)據(jù)倉庫的數(shù)據(jù)是不可更新的數(shù)據(jù)倉庫的數(shù)據(jù)是隨時間不斷變化的數(shù)據(jù)倉庫技術介紹數(shù)據(jù)倉庫的體系結構DataExtractionTransformationEngineLoaderMetadataManagerSchedulerSAPRDBMSLegacySASExternalInformationDatabaseQualityMetadata數(shù)據(jù)的抽取存儲和管理信息探索RiskCustomerProductMarketFutureWebEISQueryReportingDataMiningDSSVisualizeOLAP數(shù)據(jù)倉庫技術介紹數(shù)據(jù)的抽?。?）數(shù)據(jù)的抽取是數(shù)據(jù)進入倉庫的入口。由于數(shù)據(jù)倉庫是一個獨立的數(shù)據(jù)環(huán)境，它需要通過抽取過程將數(shù)據(jù)從聯(lián)機事務處理系統(tǒng)、外部數(shù)據(jù)源、脫機的數(shù)據(jù)存儲介質中導入到數(shù)據(jù)倉庫。數(shù)據(jù)抽取在技術上主要涉及互連、復制、增量、轉換、調(diào)度和監(jiān)控等方面。數(shù)據(jù)倉庫技術介紹數(shù)據(jù)的抽取（2）數(shù)據(jù)倉庫中的數(shù)據(jù)并不要求與聯(lián)機事務處理系統(tǒng)保持實時同步，因此數(shù)據(jù)抽取可以定時進行，但多個抽取操作執(zhí)行的時間、相互的順序、成敗對數(shù)據(jù)倉庫中信息的有效性則至關重要。數(shù)據(jù)倉庫技術介紹存儲和管理數(shù)據(jù)倉庫的真正關鍵是數(shù)據(jù)的存儲和管理。數(shù)據(jù)倉庫的組織管理方式?jīng)Q定了它有別于傳統(tǒng)數(shù)據(jù)庫，同時也決定了其對外部數(shù)據(jù)的表現(xiàn)形式。要決定采用什么產(chǎn)品和技術來建立數(shù)據(jù)倉庫的核心，則需要從數(shù)據(jù)倉庫的技術特點著手分析。數(shù)據(jù)倉庫技術介紹信息探索信息探索實際上相當于數(shù)據(jù)倉庫的門面，其性能主要集中在多維分析、數(shù)理統(tǒng)計和數(shù)據(jù)挖掘方面。多維分析又是數(shù)據(jù)倉庫的重要表現(xiàn)形式，近幾年來由于互聯(lián)網(wǎng)的發(fā)展，使得多維分析領域的工具和產(chǎn)品更加注重提供基于Web前端聯(lián)機分析界面，而不僅僅是在網(wǎng)上發(fā)布數(shù)據(jù)。數(shù)據(jù)倉庫技術介紹數(shù)據(jù)集市ODS近線存儲器探索倉庫數(shù)據(jù)倉庫的組成數(shù)據(jù)倉庫技術介紹ETL自動處理數(shù)據(jù)集成和轉換數(shù)據(jù)倉庫技術介紹12341、通過不干凈的遺留系統(tǒng)；2、不合適的集成；3、數(shù)據(jù)倉庫的過期；4、用戶需求的改變。如何避免臟數(shù)據(jù)進入數(shù)據(jù)倉庫技術介紹如果數(shù)據(jù)質量不能被信任，則數(shù)據(jù)倉庫將失去價值，數(shù)據(jù)管理是一個循環(huán)往復的過程，包括四個基本功能：定義量度標準報告改善量度標準報告定義改善連續(xù)的改善循環(huán)數(shù)據(jù)質量管理數(shù)據(jù)倉庫技術介紹ODS用于集成相關應用系統(tǒng)并且為決策支持系統(tǒng)提供數(shù)據(jù)基礎SAPOracleFinancialsPeopleSoftBaanhomegrown商業(yè)系統(tǒng)客戶開發(fā)系統(tǒng)ODS“遺產(chǎn)”系統(tǒng)DSS探索數(shù)據(jù)倉庫操作數(shù)據(jù)存儲（ODS）數(shù)據(jù)倉庫技術介紹近線存儲器活動監(jiān)控器交叉介質數(shù)據(jù)管理器擴展數(shù)據(jù)到近線存儲器，可以極大地降低數(shù)據(jù)倉庫環(huán)境的成本，并且可以將存儲能力擴展到無限大近線存儲器數(shù)據(jù)倉庫技術介紹借助探索倉庫--可以極大的降低探索的成本-極大地提高探索速度-探索的能力呈指數(shù)級增長探索倉庫非常特別的查詢tokenbasedtechnologyrelational探索倉庫數(shù)據(jù)倉庫技術介紹什么是企業(yè)數(shù)據(jù)倉庫?

企業(yè)數(shù)據(jù)倉庫是一個環(huán)境,通過有效的信息來滿足和促進企業(yè)的決策制定過程。數(shù)據(jù)倉庫技術介紹企業(yè)數(shù)據(jù)倉庫的另一種定義

它是一種可信的企業(yè)數(shù)據(jù)庫平臺,這些數(shù)據(jù)來自于各種各樣的數(shù)據(jù)源,并且在經(jīng)過抽取、清洗和轉換后根據(jù)用戶的查詢適時地提供給用戶。數(shù)據(jù)倉庫技術介紹-綜合數(shù)據(jù)-分粒度的數(shù)據(jù)-歷史數(shù)據(jù)-共享的數(shù)據(jù)-決策的基礎-大的存儲量企業(yè)數(shù)據(jù)倉庫數(shù)據(jù)倉庫技術介紹-分粒度的數(shù)據(jù)-公司的公共數(shù)據(jù)-長期歷史數(shù)據(jù)-決策的基礎-大的存儲量-輕度索引-允許以多種方式瀏覽數(shù)據(jù)財務銷售市場會計-匯總的數(shù)據(jù)-部門級的數(shù)據(jù)-有限的歷史數(shù)據(jù)-有限的存儲量-重度索引-有限的數(shù)據(jù)視圖數(shù)據(jù)集市數(shù)據(jù)倉庫技術介紹硅數(shù)據(jù)集市與數(shù)據(jù)倉庫有根本性的區(qū)別財務銷售市場會計數(shù)據(jù)集市與數(shù)據(jù)倉庫數(shù)據(jù)倉庫技術介紹采用正確的方法論Development&TestingHighLevel,StrategicSpecificBuild,FocussedProductionEvolving,

Integrated評估需求收集設計構造部署回顧管理及維護數(shù)據(jù)倉庫技術介紹評估: 為數(shù)據(jù)倉庫項目確定企業(yè)的業(yè)務缺陷；需求收集：啟動項目，搜集業(yè)務需求并且定義系統(tǒng)檢驗標準；設計： 分析和設計數(shù)據(jù)倉庫系統(tǒng)體系結構，確認檢驗測試標準；構造： 開發(fā)、檢驗測試、移交數(shù)據(jù)倉庫及應用系統(tǒng)；部署： 投入到生產(chǎn)環(huán)境中并且在企業(yè)范圍內(nèi)保證知識轉移及用戶存取的便利；回顧： 回顧項目開發(fā)過程，評估部署過程及對業(yè)務的影響。SAS快速數(shù)據(jù)倉庫方法數(shù)據(jù)倉庫技術介紹快速數(shù)據(jù)倉庫方法的重點必須得到企業(yè)高層領導的支持和幫助；不依賴于技術，而是一個業(yè)務過程；以業(yè)務為中心，并且由業(yè)務驅動，業(yè)務用戶全程參與；按照約定好的規(guī)則實施；以迭代式方法實現(xiàn)，全局考慮，局部實施(Thinkbig,Startsmall)；數(shù)據(jù)倉庫技術介紹快速數(shù)據(jù)倉庫方法的重點（續(xù)）采用快速應用開發(fā)方法(RAD)；允許柔性和動態(tài)收集需求；首先尋求第一個快速成功的數(shù)據(jù)集市；借助優(yōu)良的項目管理方法幫助；數(shù)據(jù)倉庫技術介紹企業(yè)數(shù)據(jù)倉庫的前景和目標數(shù)據(jù)倉庫成功的因素(如果可能算出ROI)業(yè)務過程和業(yè)務驅動IT的基礎架構(當前和未來)用戶需求分析（數(shù)據(jù)需求、信息需求、報表和分析需求、探索需求以及信息供給需求）企業(yè)關鍵的評估項目數(shù)據(jù)倉庫技術介紹數(shù)據(jù)倉庫規(guī)模和增長性宏觀的企業(yè)數(shù)據(jù)倉庫的物理和邏輯模型主題區(qū)域和實施優(yōu)先級具體實施方案任務和責任首先實施的主題以及它的項目計劃

企業(yè)關鍵的評估項目（續(xù)）數(shù)據(jù)倉庫技術介紹設計階段:維數(shù)據(jù)模型維數(shù)據(jù)模型（邏輯）提供更詳細的數(shù)據(jù)視圖（邏輯）包括一個實體列表多維事實/測量值描述實體之間的關系提供每一個實體的屬性列表包括維數(shù)據(jù)模型的圖形表示業(yè)務用戶更容易理解能夠很好地匹配目標模型數(shù)據(jù)倉庫技術介紹物理倉庫數(shù)據(jù)模型可以利用范式模型匯總表預先合并的視圖和表星型模式雪花模式星型--雪花模式多維數(shù)據(jù)模型(MDDBs)非結構化的數(shù)據(jù)/文檔上述各種模型的混合使用設計階段:物理模型范式模型MDDBs星型模式雪花模式星型--雪花模式匯總表視圖非結構化數(shù)據(jù)

數(shù)據(jù)倉庫技術介紹企業(yè)數(shù)據(jù)倉庫范式化的E-R模型雪花及星型--雪花模式匯總表預先合并的視圖部門數(shù)據(jù)倉庫/數(shù)據(jù)集市匯總表預先合并的視圖和表多維數(shù)據(jù)倉庫（MDDBs）星型模式雪花及星型--雪花模式設計階段:物理模型的適配性不是設計用于直接用戶的查詢設計用于特定的業(yè)務用戶查詢數(shù)據(jù)倉庫技術介紹為什么大多數(shù)數(shù)據(jù)倉庫項目會失?。咳狈︻I導支持（沒有領導理解和支持）缺乏業(yè)務用戶自始至終的項目參與業(yè)務單位之間缺乏協(xié)調(diào)和努力初始范圍過于廣泛和詳細(投入過大,難于調(diào)整等)數(shù)據(jù)質量較差(遺留的和現(xiàn)時的系統(tǒng))缺乏有效合理的實施力量(例如：缺乏項目管理手段、任務和責任不明確等等）數(shù)據(jù)倉庫技術介紹1、搭建面向主題的信息架構；2、綜合統(tǒng)計報表、信息查詢；3、常規(guī)數(shù)據(jù)分析（成本、財務、市場、銷售、…），聯(lián)機分析處理，多維信息查詢；4、決策支持系統(tǒng)、專家系統(tǒng)、…;5、質量改善，SPC;6、關系管理（客戶、供應商、訪問者、…)7、數(shù)據(jù)挖掘、知識發(fā)現(xiàn)；8、…...

數(shù)據(jù)倉庫相關領域的應用數(shù)據(jù)倉庫技術介紹1、及時獲取生產(chǎn)管理綜合信息，為決策者提供科學分析依據(jù)；2、改善管理能力，可以得到憑直覺無法得到的結論；3、對轉瞬即逝的機會快速作出反應，提高競爭能力；4、既能夠管理宏觀信息也能夠管理微觀數(shù)據(jù)，可以追朔歷史；數(shù)據(jù)倉庫的優(yōu)點數(shù)據(jù)倉庫技術介紹5、建立企業(yè)內(nèi)部各部門之間的合作關系。6、提供了面向主題的信息架構，存取數(shù)據(jù)方便，業(yè)務用戶也能方便的取用這些數(shù)據(jù)。7、開拓了進一步探索和研究的廣闊空間數(shù)據(jù)倉庫支持進一步的探究，以發(fā)現(xiàn)數(shù)據(jù)所形成的趨勢、構成的模式及其間的關系，這可引導用戶改進現(xiàn)行的業(yè)務處理過程或作出正確的決策。8、改善客戶關系管理，讓客戶能獲得更多的好處。數(shù)據(jù)倉庫的優(yōu)點（續(xù)）數(shù)據(jù)倉庫技術介紹投資回報率匯總結果平均投資回報率收回投資的平均時間

企業(yè)Source:IDC,TheFoundationsofWisdom,1996321%321%2.73年制造業(yè)的ROI平均值高于其他行業(yè)數(shù)據(jù)倉庫技術介紹內(nèi)容提要動機與需求數(shù)據(jù)倉庫技術數(shù)據(jù)倉庫在寶鋼的實踐結束語數(shù)據(jù)倉庫技術介紹“從10%的人花100%的時間使用工具到100%的人花10%的時間使用工具.”SoundViewFinancialGroupBusinessIntelligenceReport信息用戶所面臨的變化數(shù)據(jù)倉庫技術介紹信息生產(chǎn)者信息消費者高級用戶IT人員報表查閱者活躍的分析人員報表用戶企業(yè)信息環(huán)數(shù)據(jù)倉庫技術介紹業(yè)務用戶

希望得到的不僅是一個含有正確信息的報表，并且需要能進一步分析及格式化報表的基本的功能，以滿足其特定的需要。高級用戶

希望能直接訪問數(shù)據(jù)，進行特別查詢、分析及報表。IT人員

希望能為企業(yè)中的任何人、在任何地方提供對數(shù)據(jù)的訪問，或向他們進行發(fā)布，同時減少他們自己堆集如山的報表和管理的麻煩。用戶所需要的是什么?數(shù)據(jù)倉庫技術介紹寶鋼計算機系統(tǒng)鐵水系統(tǒng)一、二期工程鋼區(qū)寶鋼TCP/IP光纖主干網(wǎng)絡（一、二期工程地域：DECTDM）（三期工程地域：IBMATM）IBMRS60007013-J30x3臺512MBUNISYSU6000/65x2臺512MB檢化驗DECAlpha2100-4/275512MB250轉爐煉鋼DECAlpha2100-4/275x2臺384MB1420冷軋DECAlpha2100-4/275x2臺192MB1580熱軋DECVAX4600Ax4臺128MB電爐/圓坯連鑄DECAlpha2100-4/200x2臺384MB2030冷軋DECVAX4600x2臺256MB2050熱軋DECAlpha4100x2臺1GB高速線材DECAlpha4100-5/300x2臺

512MB1550冷軋前庫PCServerSCOUNIX300噸轉爐煉鋼IBMRS6000/J50x2臺1GB鋼管分公司HP9000K370x2臺512MB寶鋼整體產(chǎn)銷管理系統(tǒng)IBM9672-R25主機

通信前置機IBMRS6000/SPIBMSP主機數(shù)據(jù)倉庫服務器數(shù)據(jù)倉庫技術介紹操作系統(tǒng):OS/390數(shù)據(jù)庫:IBMDB2角色:數(shù)據(jù)倉庫的重要數(shù)據(jù)來源IBM9672（公司產(chǎn)銷系統(tǒng)）數(shù)據(jù)倉庫技術介紹操作系統(tǒng):IBMAIX數(shù)據(jù)庫:SASDataSet角色:數(shù)據(jù)倉庫、數(shù)據(jù)分析處理、報表系統(tǒng)發(fā)布（DominoWebServer）的核心平臺IBMSP(數(shù)據(jù)倉庫服務器）數(shù)據(jù)倉庫技術介紹企業(yè)級數(shù)據(jù)倉庫(按主題)質量(試點，完成) 生產(chǎn)與物流 市場與銷售 成本與財務 設備 能源 部門級數(shù)據(jù)倉庫冷軋熱軋…...數(shù)據(jù)倉庫建設數(shù)據(jù)倉庫技術介紹數(shù)據(jù)倉庫應用企業(yè)數(shù)據(jù)倉庫按主題(實施過程中)信息門戶(Intranet應用）生產(chǎn)管理信息技術質量信息企業(yè)統(tǒng)計信息生產(chǎn)區(qū)域信息(冷軋,熱軋,…)生產(chǎn)管制信息...數(shù)據(jù)倉庫技術介紹質量數(shù)據(jù)倉庫數(shù)據(jù)環(huán)境來源于9672上的DB2下載后的數(shù)據(jù)成為ODD(OperationalDataDefinition)形成22個主題數(shù)據(jù)表采用星狀的數(shù)據(jù)模型支持不同種類的應用數(shù)據(jù)倉庫技術介紹質量數(shù)據(jù)倉庫主題一覽Color電爐和初軋線材電鍍錫電鍍鋅普板熱鍍鋅彩涂電工鋼小方坯熱軋1,2煉鋼板坯1煉鋼鋼錠冷軋1,2煉鋼PONO數(shù)據(jù)倉庫技術介紹質量數(shù)據(jù)倉庫檢化驗主題初軋線材電鍍錫電鍍和熱鍍鋅普板彩涂電爐熱軋1,2煉鋼數(shù)據(jù)倉庫技術介紹數(shù)據(jù)抽取數(shù)據(jù)倉庫技術介紹EGSnProduction事實表維表邏輯表OriginalOrderoriginalorderidOrderorderidbacklogapnpsrnumbermetallurgyindexcodeproductionlinecodeinternalgradesteelgradeTimetimekeyMaterialmaterialidProcessprocessidprocessnameprocesssubgroupprocessgroupplantidplantgroupprocessid(FK)materialid(FK)statuskey(FK)timekey(FK)orderid(FK)originalorderid(FK)materialtrackingnumberprocessbegintimeprocessendtimefnprlengthTempPickling1-1TempPickling2-1TempPicklingP3-1annlcenterspeedcoatingweighttopcrpplengthheadcrpplengthtailctngweightbottomentrycoilnum1entrycoilnum2entrycoilthickentrycoilweightentrycoilwidthexitcoilnum1exitcoilothdimexitcoilthickexitcoilweightexitcoilwidthhfstriptempavghfstriptempmaxhfstriptempminnpacksheetnextplantrhstriptempavgrhstriptempmaxrhstriptempminscfstriptempavgscfstriptempmaxscfstriptempminsfstriptempavgsfstriptempmaxsfstriptempminstrip20Atempstrip10Atempstrip1Ctempstrip2CtempActSheetNStatusstatuskeystatuscoderedundantwithheldwithheldreasondefectcodedefectiddefectnamedefectreasondefecttype電鍍錫生產(chǎn)實際邏輯模型產(chǎn)品質量分析變量...數(shù)據(jù)倉庫技術介紹Orderorder_id:CHAR(10)backlog:CHAR(17)apn:CHAR(4)psr_num:CHAR(11)mic_num:CHAR(6)line_num:CHAR(4)internal_grade:CHAR(8)steel_grade:CHAR(16)Processproc_id:CHAR(4)pname:CHAR(10)process_sub_group:CHAR(10)name:CHAR(10)plant_id:CHAR(10)plant_group:CHAR(10)EGSn_Productionproc_id:CHAR(4)material_id:CHAR(11)status_key:NUMBER(8)timekey:DATEorder_id:CHAR(10)original_order_id:VARCHAR2()material_tracking_id:CHAR(10)production_t_start:DATEproduction_t_end:DATEfnpr_sheet_length:NUMBER(8)Temp_Pickling_1_1:NUMBER(4)Temp_Pickling_2_1:NUMBER(4)Temp_Pickling_3_1:NUMBER(4)annl_center_speed:NUMBER(4)coating_weight_top:NUMBER(4)crpp_length_head:NUMBER(4)crpp_length_tail:NUMBER(4)ctng_weight_bottom:NUMBER(4)entry_coil_num_1:CHAR(10)entry_coil_num_2:CHAR(10)entry_coil_thick:NUMBER(4)entry_coil_weight:NUMBER(8)entry_coil_width:NUMBER(4)exit_coil_num_1:CHAR(10)exit_coil_otr_dim:NUMBER(4)exit_coil_thick:NUMBER(4)exit_coil_weight:NUMBER(8)exit_coil_width:NUMBER(4)hf_strip_temp_avg:NUMBER(3)hf_strip_temp_max:NUMBER(3)hf_strip_temp_min:NUMBER(3)n_pack_sheet:NUMBER(4)next_plant:CHAR(10)rh_strip_temp_avg:NUMBER(3)rh_strip_temp_max:NUMBER(3)rh_strip_temp_min:NUMBER(3)scf_strip_temp_avg:NUMBER(3)scf_strip_temp_max:NUMBER(3)scf_strip_temp_min:NUMBER(3)sf_strip_temp_avg:NUMBER(3)sf_strip_temp_max:NUMBER(3)sf_strip_temp_min:NUMBER(3)strip_20A_temp:NUMBER(3)strip_10A_temp:NUMBER(3)strip_1C_temp:NUMBER(3)strip_2C_temp:NUMBER(3)Act_Sheet_N:NUMBER(4)Statusstatus_key:NUMBER(8)status_code:CHAR(10)redun:CHAR(1)withheld:CHAR(1)wreason:CHAR(8)defect_code:CHAR(10)defect:CHAR(10)dname:CHAR(10)dreason:CHAR(10)dtype:CHAR(10)電鍍錫生產(chǎn)實際物理模型產(chǎn)品質量分析變量數(shù)據(jù)倉庫技術介紹EGSnSampleTestingmaterialid(FK)orderid(FK)processid(FK)productkey(FK)timekey(FK)mtrltrackingnumtesttimeavgtensilermaavgtensilermnhardnessaahardnessanhardnesscahardnesscnhardnessdahardnesswahardnesswnppibappibcppibdppibwppitappitcppitdppitwrabarabcrabdrabwrataratcratdratwrmaxbarmaxbcrmaxbdrmaxbwrmaxtarmaxtcrmaxtdrmaxtwtensileaatensileantensileaeatensileaentensileagatensileagntensiledeltaratensiledeltarntensiler0atensiler0ntensiler45atensiler45ntensiler90atensiler90ntensilereatensilerentensilerehatensilerehntensilerelatensilerelntensilermatensilermntensileyaatensileyantesttimesalloysnbcalloysnbdalloysnbwalloysntaalloysntcalloysntdalloysntwalloysnflagatcbaatcbcatcbdatcbwatctaatctcatctdatctwcapillarybacapillarybccapillarybdcapillarybwcapillarytacapillarytccapillarytdcapillarytwisvbaisvbcisvbdisvbwisvtaisvtcisvtdisvtwoilbaoilbcoilbdoilbwoiltaoiltcoiltdoiltwoxidefilmbaoxidefilmbcoxidefilmbdoxidefilmbwoxidefilmtaoxidefilmtcoxidefilmtdoxidefilmtwphgbaphgbcphgbdphgbwphgtaphgtcphgtdphgtwplvaplvcplvdplvwsamplepositinsncoatbasncoatbcsncoatbdsncoatbwsncoatflagsncoattasncoattcsncoattdsncoattwsurfacecrasurfacecrcsurfacecrdsurfacecrwtcsbatcsbctcsbdtcs