數(shù)據(jù)倉庫與聯(lián)機分析處理技術(shù)綜述.

1、科技信息 2010年第 35 期SCIENCE&TECHNOLOGY INFORMATION0引言數(shù)據(jù)倉庫(Data Warehouse,DW1是信息領域中近年來迅速發(fā)展起來地數(shù)據(jù)庫 新技術(shù)。數(shù)據(jù)倉庫的建立 ,能充分利用已有地數(shù)據(jù)資源 ,把數(shù)據(jù)轉(zhuǎn)換為信息 ,從中挖掘 出知識,提煉成智慧 ,最終創(chuàng)造出效益。所以 ,越來越多地企業(yè)開始認識到數(shù)據(jù)倉庫應 用所帶來地好處。計算機系統(tǒng)中存在著兩類不同地數(shù)據(jù)處理工作 :操作型處理和分析型處理 ,也稱 作 OLTP( 聯(lián)機事務處理和 OLAP( 聯(lián)機分析處理。操作型處理也叫事務處理 ,是指對數(shù)據(jù)庫聯(lián)機地日常操作 ,通常是對一個或一組 記錄地查詢和修改

2、 ,例如火車售票系統(tǒng)、銀行通存通兌系統(tǒng)等。這些系統(tǒng)要求快速 響應用戶請求 ,對數(shù)據(jù)地安全性、完整性以及事務吞吐量要求很高。分析型處理 ,是指對數(shù)據(jù)地查詢和分析操作 ,通常是對海量地歷史數(shù)據(jù)查詢和分 析,例如金融風險預測預警系統(tǒng)、證券股市違規(guī)分析系統(tǒng)。這些系統(tǒng)要訪問地數(shù)據(jù) 量非常大 ,查詢和分析地操作十分復雜。兩者之間地差異 ,使得數(shù)據(jù)倉庫技術(shù)就應運而生了。1數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫和數(shù)據(jù)庫 2 只有一字之差 ,似乎是一樣地概念 ,但實際則不然。數(shù)據(jù)倉 庫是為了構(gòu)建新的分析處理環(huán)境而出現(xiàn)地一種數(shù)據(jù)存儲和組織技術(shù)。由于分析處理 和事務處理具有極不相同地性質(zhì) ,因而兩者對數(shù)據(jù)也有著不同的要求。數(shù)據(jù)倉庫概

3、 念地創(chuàng)始人 W.H.Inmon 在其 Building the Data Warehouse一書中 , 列出了操作型 數(shù)據(jù)與分析型數(shù)據(jù)之間地區(qū)別 ,基于這些區(qū)別 ,可以給出數(shù)據(jù)倉庫的定義 :數(shù)據(jù)倉庫是 一個用以更好地支持企業(yè) (或組織決策分析處理的、面向主題的、集成的、不可更新的 ,隨時間不斷變化的數(shù)據(jù)集合。數(shù)據(jù)倉庫本質(zhì)上和數(shù)據(jù)庫一樣,是長期儲存在計 算機內(nèi)的、有組織、可共享地數(shù)據(jù)集合。數(shù)據(jù)倉庫和數(shù)據(jù)庫主要的區(qū)別是數(shù)據(jù)倉庫中地數(shù)據(jù)具有面向主題的、集成的、 不可更新的和隨時間不斷變化的等四個基本特征。1.1主題與面向主題數(shù)據(jù)倉庫中的數(shù)據(jù)是面向主題進行組織的。主題是一個抽象地概念,是在較高層次上

4、將企業(yè)信息系統(tǒng)中的數(shù)據(jù)綜合、歸類并進行分析利用地抽象;在邏輯意義上 ,它對應企業(yè)中某一宏觀分析領域所涉及的分析對象。比如一家商場,概括分析領域的對象 ,應有地主題包括供應商、商品、顧客等。面向主題地數(shù)據(jù)組織方式是根據(jù) 分析要求將數(shù)據(jù)組織成一個完備的分析領域 ,即主題域。主題域應該具有以下兩個特點 :(1獨立性,如針對商品地分析所要求的是 “商品”主題域 ,它必須具有獨立內(nèi)涵。(2完備性,任何對商品地分析處理要求 ,應該能在 “商品”這一主題域內(nèi)找到該分 析處理所要求的內(nèi)容 ;如果對商品的某一分析處理要求涉及現(xiàn)存 “商品 ”主題之外地 數(shù)據(jù),那么就應當將這些數(shù)據(jù)增加到 “商品”主題中來,從而逐步

5、完善 “商品”主題。或 許有人擔心 ,要求主題地完備性會使得主題包含有過多的數(shù)據(jù)項而顯得過于龐大。1.2數(shù)據(jù)倉庫是集成的數(shù)據(jù)倉庫的數(shù)據(jù)是從原有的分散的數(shù)據(jù)庫數(shù)據(jù)中抽取來的 ,因此數(shù)據(jù)在進入數(shù) 據(jù)倉庫之前 ,必然要經(jīng)過加工與集成 ,統(tǒng)一與綜合。這一步實際是數(shù)據(jù)倉庫建設中最 關(guān)鍵、最復雜的一步。首先 ,要統(tǒng)一原始數(shù)據(jù)中所有矛盾之處 ;然后將原始數(shù)據(jù)結(jié)構(gòu)作一個從面向應用 到面向主題的大轉(zhuǎn)變 ;最后還要進行數(shù)據(jù)綜合和計算 ;1.3 數(shù)據(jù)倉庫是不可更新的數(shù)據(jù)倉庫主要是供決策分析之用的 ,所涉及的數(shù)據(jù)操作主要是數(shù)據(jù)查詢 ,一般情 況下并不進行修改操作。1.4數(shù)據(jù)倉庫是隨時間變化的數(shù)據(jù)倉庫中的數(shù)據(jù)不可更新

6、3, 是指數(shù)據(jù)倉庫的用戶進行分析處理時是不進行 數(shù)據(jù)更新操作的 ,但并不是說 ,在數(shù)據(jù)倉庫的整個生命周期中數(shù)據(jù)集合是不變的。數(shù)據(jù)倉庫的數(shù)據(jù)是隨時間變化不斷變化的 ,這一特征表現(xiàn)在以下三個方面 :(1數(shù)據(jù)倉庫隨時間變化不斷增加新的數(shù)據(jù)內(nèi)容。(2數(shù)據(jù)倉庫隨時間變化不斷刪去舊的數(shù)據(jù)內(nèi)容。(3 數(shù)據(jù)倉庫中包含大量的綜合數(shù)據(jù) ,這些綜合數(shù)據(jù)中很多與時間有關(guān) ,一次,數(shù)據(jù) 倉庫數(shù)據(jù)的鍵碼都包含時間項 ,以表明數(shù)據(jù)的歷史時期。2聯(lián)機分析處理技術(shù)OLAP(On-Line Analytical Processing 即聯(lián)機分析處理 4, 是以海量數(shù)據(jù)為基礎的 復雜分析技術(shù)。 OLAP 支持各級管理決策人員從不同

7、的角度、快速靈活地對數(shù)據(jù)倉 庫中的數(shù)據(jù)進行復雜查詢和多維分析處理 ,輔助各級領導進行正確決策 ,提高企業(yè)的 競爭力。2.1多維數(shù)據(jù)模型多維數(shù)據(jù)模型是數(shù)據(jù)分析時用戶的數(shù)據(jù)視圖 ,是面向分析的數(shù)據(jù)模型 ,用于給分 析人員提供多種觀察的視角和面向分析的操作。2.2多維分析操作常用的 OLAP 多維分析操作有切片 (slice、切塊(dice、旋轉(zhuǎn) (pivot、向上綜合 (roll-up 、向下鉆取 (drill-down 等。通過這些操作 ,使用戶能從多個角度多側(cè)面觀察 數(shù)據(jù)、剖析數(shù)據(jù) ,從而深入地了解包含在數(shù)據(jù)中的信息與內(nèi)涵。3數(shù)據(jù)挖掘技術(shù)面對日益激烈的市場競爭 ,客戶對迅速應答各種業(yè)務問題的能

8、力的要求不斷提高 ,不僅要求回答發(fā)生什么 ,為何發(fā)生 ,還要回答將發(fā)生什么。數(shù)據(jù)挖掘技術(shù)正是支持 回答 “將發(fā)生什么 ”這類業(yè)務問題的。 3.1 數(shù)據(jù)挖掘的概念數(shù)據(jù)挖掘 5是從大量數(shù)據(jù)中發(fā)現(xiàn)并提取隱藏在內(nèi)的、人們事先不知道的但又 可能不用的信息和的一種新技術(shù)。數(shù)據(jù)挖掘技術(shù)涉及數(shù)據(jù)庫技術(shù)、人工智能技術(shù)、機器學習、統(tǒng)計分析等多種技 術(shù),它使決策支持系統(tǒng) (DSS 跨入一個新階段。3.2數(shù)據(jù)挖掘的數(shù)據(jù)源數(shù)據(jù)挖掘的數(shù)據(jù)主要有兩種來源 6, 可以從數(shù)據(jù)倉庫中來的 ,也可以直接從數(shù)據(jù) 庫中來。這些實際的應用數(shù)據(jù)往往是不完全的、有噪聲的、模糊的、隨機的,因此要根據(jù)不同的需求在挖掘之前進行預處理。3.3數(shù)據(jù)倉

9、庫的功能數(shù)據(jù)倉庫的功能 7 主要有以下幾種 :(1概念描述 :就是指歸納總結(jié)出數(shù)據(jù)的某些特性。(2關(guān)聯(lián)分析 :若兩個或多個變量的取值之間存在某種規(guī)律性 ,就稱為關(guān)聯(lián)。(3 分類和預測 :找到一定的函數(shù)或者模型來描述和區(qū)分數(shù)據(jù)類之間的區(qū)別 ,用這 些函數(shù)和模型對未來進行預測。(4 聚類:將數(shù)據(jù)分為多個類 ,使得類內(nèi)部數(shù)據(jù)之 (下轉(zhuǎn)第 764頁數(shù)據(jù)倉庫與聯(lián)機分析處理技術(shù)綜述李大志 1 張阿紅 2(1.南陽理工學院后勤處河南南陽 473000;2.南陽理工學院軟件學院河南南陽 473000【摘要】本文針對數(shù)據(jù)倉庫 DW,OLAP 和數(shù)據(jù)挖掘 DM 三種技術(shù)進行了分 析綜述?！娟P(guān)鍵詞】 DW;OLAP

10、; 數(shù)據(jù)挖掘Data Warehouse and O n-line Analytical Processing Technology Overview【Abstract】 Based on data warehouse DW,OLAP and data mining DM three technology to carry on the analysis are reviewed in this pape【r. Key words】 DW;OLAP;Data Mining IT論壇739科技信息SCIENCE &TECHNOLOGY INFORMATION2010年第 35期(上接第

11、739 頁間的差異最小 ,而類之間數(shù)據(jù)的差異最大。(5 孤立點的檢測 :孤立點是指數(shù)據(jù)中的整體表現(xiàn)行為不一致的那些數(shù)據(jù)集合。(6 趨勢和演變分析 :描述行為隨著時間變化的對象所遵循的規(guī)律或趨勢。4小結(jié)數(shù)據(jù)倉庫 DW ,OLAP 和數(shù)據(jù)挖掘 DM 是作為三種獨立的信息處理技術(shù)出現(xiàn) 的。本文詳細分析了這三種技術(shù) ,數(shù)據(jù)倉庫用于數(shù)據(jù)的存儲和組織 ,OLAP 集中于數(shù) 據(jù)的分析 ,數(shù)據(jù)挖掘則致力于知識的自動發(fā)現(xiàn)?！緟⒖嘉墨I】1 王珊 ,等.數(shù)據(jù)庫技術(shù)叢書之一 :數(shù)據(jù)倉庫技術(shù)與聯(lián)機分析處理 .北京:科技出版社,1998.2 Inmn W H.數(shù)據(jù)倉庫 .王志海,等,譯.北京:機械工業(yè)出版社 ,2000.

12、3Inmn W H , 等.數(shù)據(jù)倉庫管理 .王天佑,譯.北京:電子工業(yè)出版社 ,2000.4Kimball R ,等.數(shù)據(jù)倉庫工 具箱.譚明金,譯.北京:電子工業(yè)出版社 ,2003.5Imhoff C ,等.數(shù)據(jù)倉庫涉及 .于戈,譯.北 京 :機械工業(yè)出版社 ,2004.6Mattison R.Web 倉庫工程與知識管理 .高軍,譯.北京 :清華大學出版 社,2003.7Bain T ,等.SQL Server2000數(shù)據(jù)倉庫與 Analysis Services.邵勇,等,譯.北京: 中國電力出版社 ,2003.作者簡介:李大志（1977,男,河南南陽人 ,助理實驗師。責任編輯 :湯靜 科科

13、保護機制缺位、政策性出口信用保險和海外投資保險制度存在多方面等。3.2.2 金融服務體系不完善非洲國內(nèi)金融市場發(fā)展水平較低 ,難以找到中國金融機構(gòu)的海外分支 ,加之許多 國家市場存在較大的風險 ,因而提供融資服務的金融機構(gòu)往往收取高額的利息 ,企業(yè) 融資成本較高 ,影響了發(fā)展。但是目前 ,中國金融機構(gòu)對企業(yè)的支持大多位于國內(nèi) ,且 作用范圍很有限。3.2.3各種政策間的協(xié)調(diào)不足 中國與非洲開展了政治外交、經(jīng)濟、文化等多個領域的交流和合作。各領域都 有一套促進的政策 ,但總體而言較為分散 ,沒有形成合力。這就造成了政策的協(xié)調(diào)上 難度較大 ,不利于中非間互利共贏長期發(fā)展目標的實現(xiàn)。3.2.4投資行

14、業(yè)領域集中中國每年對非洲投資主要是制造業(yè)。制造業(yè)投資主體總數(shù)占53.4%,但是 ,因為紡織服裝業(yè)也是許多非洲國家的支柱產(chǎn)業(yè)、出口創(chuàng)匯的重要產(chǎn)業(yè),又無法和中國競爭,這就導致非洲一些以紡織服裝業(yè)為主導產(chǎn)業(yè)的國家對中國紡織服裝產(chǎn)品和產(chǎn)業(yè) 在全球的擴張充滿戒備乃至敵意。一些非洲紡織企業(yè)甚至呼吁本國政府支持歐美對 中國紡織品出口重新設限。3.2.5 雙方了解不夠 ,合作中存在文化沖突作為兩種截然不同的文化 ,中非在經(jīng)濟交往和合作中難免會遇到?jīng)_突。把自身 的觀念和文化強加于對方 ,必然會引起沖突 ,給經(jīng)濟合作造成阻礙。另一方面 ,中國企 業(yè)在非洲投資時 ,履行社會責任的意識還比較淡薄 ,許多企業(yè)在環(huán)境保護

15、、勞資關(guān)系 等方面的處理上還欠妥當 ,一些企業(yè)還存在著無序競爭的情況 ,這些都影響了中非合 作的發(fā)展。4中國對非洲投資戰(zhàn)略的建議鑒于以上分析存在的問題 ,中國對非洲投資應從以下幾個方面進行戰(zhàn)略調(diào)整 :4.1提升非洲國家的產(chǎn)業(yè)競爭力對非投資要重點促進東道國的產(chǎn)業(yè)發(fā)展。中國對非投資 ,要實現(xiàn)互利共贏的戰(zhàn) 略目標 ,需要著力促進和提升非洲自身的產(chǎn)業(yè)能力。通過投資 ,完善東道國當?shù)氐漠a(chǎn) 業(yè)鏈,提供相關(guān)技術(shù)、培養(yǎng)專業(yè)技術(shù)人員和管理人才。4.2創(chuàng)新經(jīng)濟合作模式優(yōu)惠貸款是長期以來中國對非援助的主要方式之一。為了在平等相待、互利共 贏的基礎上推進非洲的工業(yè)化 ,增強非洲自身發(fā)展的能力 ,必須轉(zhuǎn)變對非援助的方

16、式?？梢钥紤]由優(yōu)惠貸款等單方面的給予轉(zhuǎn)變?yōu)橥顿Y合作基金等 ,既有利于中非經(jīng) 貿(mào)合作的進一步推進 ,又能夠在一定程度上避免來自西方的抱怨和指責。 4.3 營造適 合企業(yè)發(fā)展的金融環(huán)境非洲國家市場對金融的需求很強 ,但國內(nèi)金融市場不發(fā)達、資本市場體系不完 善,過高的風險使得許多外國金融機構(gòu)望而卻步 ,因此 ,金融服務供求方面存在巨大的 缺口。然而 ,企業(yè)“走”向非洲 ,需要強有力的金融支持 ,尤其在海外融資、風險控制、 信用支持等方面需要更完善的服務?！緟⒖嘉墨I】1項瑩,蔡芳芳 .擴大對非洲直接投資的策略選擇 J.國際經(jīng)濟合作 ,2006(7:4-6.2張剛 .外國石油公司在非洲的競爭趨勢分析 J

17、.國際石油經(jīng)濟 ,2008(16:7-10.3 王圳 .加強中國與其他發(fā)展中國家的經(jīng)貿(mào)合作 J.國經(jīng)濟合作 ,2006(3:16-19.4 馬強 .我國對非洲投資合作問題的分析 .對外經(jīng)貿(mào)實務 ,2008(11:21-23.5李桂 芳.中國企業(yè)對外直接投資分析報告 M. 北京:中國經(jīng)濟出版社 ,2007.6李獻兵 ,郭玉 華 .我國中小企業(yè)在非洲的投資策略研究 J. 中國流通經(jīng)濟 ,2009(3:71-73.責任編輯 :湯靜 科(上接第 754 頁當 250us 的定時中斷到了 ,判斷一個周期是否到 ,到了就重新置初 值 50,置 P2.3口低電平(電機轉(zhuǎn)將 49H (一個周期中為高電平的中斷

18、次數(shù)的內(nèi)容放入 48H 中,否則就將 48H 判斷的內(nèi)容不為 0就減 1,保持 P2.3為低電平本次中斷就結(jié)束 為 0 就跳轉(zhuǎn) ,重新將 49H 的內(nèi)容放入 48H 單元。這樣我們只要通過改變 49H 中的內(nèi) 容就可以改變 PWM 波的占空比。則電機兩端電壓隨占空比變化而變化 ,因而控制 電機轉(zhuǎn)速的變化。 2.3.2 顯示程序簡介本次設計的顯示部分采用的是動態(tài)顯示。所謂動態(tài)顯示 ,就是一位一位地輪流 點亮各位顯示器 (掃描 ,對于每一位顯示器來說 ,每隔一段時間點亮一次。顯示器的亮 度既與導通電流有關(guān) ,也與點亮時間和間隔時間的比例有關(guān)。調(diào)整電流和時間參數(shù) , 也可以實現(xiàn)亮度較高較穩(wěn)定的顯示。若顯示器的位數(shù)不大于8 位,則控制顯示器公共極電位只需一個 8位口（稱為掃描口 ,控制各位顯示器所顯示的字形也需一個 8位口 （稱為段數(shù)據(jù)口。本次設計使用的是 4位共陰極顯示器。 89C51的 P0口作為段數(shù)據(jù) 口,接顯示器的各