




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認(rèn)領(lǐng)
文檔簡介
1、摘要部隊干部政策的制定依賴于對部隊干部信息的全面分析,當(dāng)前的分析模式難以適應(yīng)新的需要,近年的整體解決方案數(shù)據(jù)倉庫和OLAP引進部隊干部隊伍管理,本文基于數(shù)據(jù)倉庫和OLAP技術(shù),分析了干部隊伍管理的多維模型。用實例展示了多維分析,闡述了部隊干部隊伍管理現(xiàn)狀和應(yīng)用新技術(shù)滿足決策者的分析需求,使部隊干部隊伍管理借助智能化帶來決策的科學(xué)化第一章前言1. 1 課題背景歐美等發(fā)達(dá)國家部隊中的高學(xué)歷占據(jù)了較大比重,碩士學(xué)位才能擔(dān)任少校,面臨嚴(yán)峻的軍事競爭,我軍也適時地提出了新型軍事人才培養(yǎng)方案。干部是部隊的頂梁柱,在信息技術(shù)時代大環(huán)境下,部隊干部隊伍管理也進入了新境地,但部隊干部隊伍學(xué)歷層次偏低、素質(zhì)低下,
2、難以適應(yīng)新形勢,其原因是干部隊伍來源渠道多元,年齡跨度大,傳統(tǒng)的管理方式已經(jīng)難以把握干部隊伍的情況,影響正確的決策,現(xiàn)有的干部隊伍信息管理也有很多局限,信息零散,信息載體和格式不一致,需要人工完成信息收集,效率低下,容易出錯。其次是信息繁雜,學(xué)歷培訓(xùn),職務(wù)等級,晉升日期等,要統(tǒng)計歸類這些數(shù)據(jù),尋找其中的規(guī)律,依賴人工完成的難度不可想象,另外,易受個人主觀影響,缺少系統(tǒng)性,借助先進的科技工具勢在必行,部隊干部隊伍管理可以從全面地從不同側(cè)面不同角度和層次分析處理干部信息,擺脫信息孤島現(xiàn)象,客觀掌握隊伍動態(tài)變化,了解人才現(xiàn)狀,做出科學(xué)決策,為部隊?wèi)?zhàn)斗力提供人才后盾。1.2 課題的國內(nèi)外研究現(xiàn)狀數(shù)據(jù)分
3、析技術(shù)有幾個發(fā)展時期,20 世紀(jì)70 年代,為前關(guān)系式數(shù)據(jù)庫,80年代,以網(wǎng)絡(luò)為中心的后關(guān)系型數(shù)據(jù)庫。1993年.F. Codd提出多維數(shù)據(jù)技術(shù)和OLAP,OLAP為企業(yè)解決了許多難題,給企業(yè)帶來的良好效益,部隊雖然配置了業(yè)務(wù)系統(tǒng),但還是在較低層的應(yīng)用,部隊的多維分析應(yīng)用落后,其原因是,干部隊伍復(fù)雜,數(shù)據(jù)倉庫和多維分析的建設(shè)非一日之功; 雖然理論上明確其重要但是具體到實際行為中,不懂得分析的技巧,決策者缺乏信息技術(shù)素質(zhì),掌握不了數(shù)據(jù)倉庫和多維分析的功能,因此,部隊干部隊伍管理之應(yīng)用多維分析技術(shù)是一場牽扯到多層面的革命,必將帶動部隊總體素質(zhì)的提高。第二章數(shù)據(jù)倉庫和OLAP技術(shù)概述2.1 數(shù)據(jù)倉庫
4、概述2.1.1 從傳統(tǒng)數(shù)據(jù)庫到數(shù)據(jù)倉庫隨著經(jīng)濟發(fā)展,數(shù)據(jù)的爆炸式發(fā)展,用戶己經(jīng)不滿足于僅僅信息系統(tǒng)去處理日常數(shù)據(jù),而是需要能夠從企業(yè)信息系統(tǒng)中獲取更多樣更深層的市場變化信息,幫助決策,有事務(wù)處理,處理請求要遍歷大量數(shù)據(jù),系統(tǒng)花銷大。處理時間冗長。數(shù)據(jù)分散不整,要發(fā)揮決策力就要對大量數(shù)據(jù)人工集成,對歷史數(shù)據(jù)駕馭力不夠數(shù)據(jù)倉庫與數(shù)據(jù)庫的區(qū)別對比內(nèi)容數(shù)據(jù)庫數(shù)據(jù)倉庫數(shù)據(jù)內(nèi)容當(dāng)前值歷史的、存檔的、歸納的、計算的數(shù)據(jù)數(shù)據(jù)目標(biāo)面向業(yè)務(wù)操作程序、重復(fù)處理面向主題域、管理決策分析應(yīng)用數(shù)據(jù)特性動態(tài)變化的、技字段更新靜態(tài)、不能直接更新、只定時添加數(shù)據(jù)結(jié)構(gòu)高度結(jié)構(gòu)化、復(fù)雜、適合操作計算簡單、適合分析使用頻率高中到低數(shù)
5、據(jù)訪問量每個記錄只訪問少量記錄有的事務(wù)可能要訪問大量記錄對響應(yīng)時間的要求以秒為單位計算以在七、分, 甚至小時為計量單位2. 1. 2 數(shù)據(jù)倉庫概念和特征數(shù)據(jù)倉庫沒有嚴(yán)格的定義,其基本特征為:面向主題的抽象,內(nèi)容實時更新,保存數(shù)據(jù)時間長,按照時間段綜合歸納的信息。 1.數(shù)據(jù)倉庫的體系結(jié)構(gòu)其中,數(shù)據(jù)源是企業(yè)內(nèi)部信息和外部信息。外部信息包括各類法律法規(guī)等,RDBMS 中的各種業(yè)務(wù)數(shù)據(jù),OLAP 服務(wù)器多角度、多層次的分析。2.數(shù)據(jù)倉庫中的數(shù)據(jù)組織(1) 數(shù)據(jù)倉庫中的數(shù)據(jù)組織結(jié)構(gòu)不同細(xì)節(jié)級的數(shù)據(jù),轉(zhuǎn)換功能的元數(shù)據(jù)、顆粒度、數(shù)據(jù)的分割。數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式:簡單堆積文件、定期輪轉(zhuǎn)綜合文件、連續(xù)文件,
6、是簡單文件的差異化描述,表是其基本結(jié)構(gòu)。數(shù)據(jù)追加,及時捕捉數(shù)據(jù)變化。數(shù)據(jù)倉庫的關(guān)鍵技術(shù)為數(shù)據(jù)的抽取、存儲與管理以及數(shù)據(jù)的表現(xiàn)。2.2 OLAP技術(shù)研究概述2.2.1 0LAP的概念和特征OLAP20 世紀(jì)60 年代末, E.F.Codd用關(guān)系表的形式表示文件,提出OLAP:Online Analytical Processing本質(zhì)是各個視角觀察信息,對信息反應(yīng)速度是5 秒,多維化的邏輯分析和統(tǒng)計分析,共享信息2.2.2 0LAP 中的多維概念和多維分析 (1)維用維定義數(shù)據(jù)的觀察角度。(2) 度量(3) 維的成員,就是維的一個取值。如果時間維分為年、月、日,某年某月某日就是時間維成員。(4)
7、 事實該事件可能選擇的量度有干部數(shù)量、平均年齡等,度量的選擇也需要按照問題的需要來選擇。(5) 多維立方體(cube)維度成員關(guān)聯(lián)組成了多維空間。0LAP 中的多維分析是對多維數(shù)據(jù)的切片、切塊、鉆取,實現(xiàn)觀察數(shù)據(jù)的多維度和層次。OLAP的數(shù)據(jù)組織方式根據(jù)OLAP服務(wù)器端的數(shù)據(jù)組織方式,可以將OLAP分為以下幾種結(jié)構(gòu).關(guān)系型、多維以及混合型。第三章軍隊基層干部管理數(shù)據(jù)倉庫系統(tǒng)的需求分析3.1 軍隊基層干部隊伍管理現(xiàn)狀一系列干部工作政策的頒布,奠定了部隊干部隊伍管理制度基礎(chǔ)?,F(xiàn)代信息技術(shù)促進了部隊信息化建設(shè),使過去漫長的查詢工作提高到了幾分鐘的效率。但是大量數(shù)據(jù)還是無法及時處理,真正的科學(xué)化、決策
8、化建設(shè)還有待改進。人力資源思想、考核選拔機制也傳播到了部隊領(lǐng)域,但部隊對人才情況不摸底,不合理規(guī)劃嚴(yán)重。規(guī)劃的主要指標(biāo)是管理學(xué)歷、年齡、交叉任職、專業(yè)培訓(xùn)等,考評方法不健全,培訓(xùn)形式內(nèi)容滿足不了實際需要。技術(shù)的發(fā)展為數(shù)據(jù)倉庫提供可信度。數(shù)據(jù)倉庫的成功運作,因而部隊干部隊伍管理引進數(shù)據(jù)倉庫、多維分析不須巨大投資,卻可望獲得較大的管理效果。3.2 軍隊基層干部管理多維分析需求需求分析直接影響到數(shù)據(jù)倉庫建設(shè)的成敗。從建立數(shù)據(jù)倉庫的對象,方向性基礎(chǔ)需求要明晰。1.決策類型.2.能引起決策者興致的問題。3.哪些信息源能解決這些問題。本文用專家直觀判定法確定問題邊界:數(shù)據(jù)倉庫設(shè)計的最初要解決上面基礎(chǔ)問題,
9、再確定出一個大致系統(tǒng)邊界,本文采取專家直觀判定法來實現(xiàn)。先調(diào)查高層管理者和決策者。匯總結(jié)果 內(nèi)容基層干部隊伍總體年齡、籍貫、民族、健康、政治面貌等信息結(jié)構(gòu)情況;基層干部隊伍職務(wù)等級、軍銜等級、學(xué)歷、專業(yè)結(jié)構(gòu)情況:營連主宮隊伍年齡、學(xué)歷、生長類別分布情況;營連主官職務(wù)等級、軍銜等級、學(xué)歷、專業(yè)結(jié)構(gòu)情況:各職級、各專業(yè)、各生長類別干部隊伍在各職務(wù)等級平均晉升的年限:各職級、各專業(yè)、各生長類別干部隊伍考核情況:參加過中級培訓(xùn)、專業(yè)培訓(xùn)| 、學(xué)歷升級等培訓(xùn)形式后的干部任職能力的對比配偶隨軍、工作與否對干部考核、晉升的影響;不同職級如團、營、連、排職干部中不同生長類別干部在崗位上的分布差異和晉升、考核情
10、況:在現(xiàn)有的獎懲內(nèi)容中, 那類獎懲對干部的影響最大, 是提高了干部工作的責(zé)任心還是損傷了干部的積極性。專家對提供的初步調(diào)研的問題重要程度進行打分,也可根據(jù)自己的判斷加入問題。在以單位決策者為主的基礎(chǔ)上,吸納了上級和本級干部業(yè)務(wù)人員、部隊政工干部共同參與: 匯總后,單位以研討會的形式召集利益相關(guān)方進行充分討論, 平衡各種不同的觀點,然后由決策者確定。 最終決定第4章 軍隊基層干部隊伍管理系統(tǒng)多維模型設(shè)計4.1設(shè)計理念和基本分析4.1.1 設(shè)計理念歷數(shù)據(jù)倉庫的物質(zhì)基礎(chǔ)是歷史數(shù)據(jù),它的價值是需求。以數(shù)據(jù)本身的驅(qū)動設(shè)計理念和服務(wù)用戶理念。本文結(jié)合了兩者優(yōu)點,在其間找個平衡點。4.1.2 系統(tǒng)結(jié)構(gòu)分析1
11、. 系統(tǒng)結(jié)構(gòu)選擇:系統(tǒng)結(jié)構(gòu)是建立和管理數(shù)據(jù)倉庫的基地。本文采用三層設(shè)計結(jié)構(gòu),建立中心化的星型架構(gòu)。2 多維分析系統(tǒng)設(shè)計流程:數(shù)據(jù)倉庫的模型設(shè)計3個模型,概念模型、邏輯和物理。4.1.3確定主題確定主題需要十分熟悉業(yè)務(wù),是抽象化描述部隊干部隊伍信息。干部業(yè)務(wù)主要有調(diào)配工作管理、任免、轉(zhuǎn)業(yè)干部計劃生育、干部政治面貌等干部業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫表如下數(shù)據(jù)表數(shù)據(jù)內(nèi)容的理解自然信息表主要是對干部一些自認(rèn)信息的描述單位表各單位的編制情況, 如有32 個連隊單位, 共有32 各連長編制身體狀況表包含身高、血型、既往病史、治療時間、傷殘等級等信息獎懲情況表列出了獎懲時間、獎懲單位、獎懲原因、獎懲類別、獎懲等級等訓(xùn)練情
12、況表列出了培訓(xùn)單位、培訓(xùn)起止時間、培訓(xùn)形式、培訓(xùn)專業(yè)、受訓(xùn)等級等戰(zhàn)斗情況表列出了參戰(zhàn)地點、參戰(zhàn)起止時間、戰(zhàn)斗名稱、所在部隊、參戰(zhàn)類別、戰(zhàn)斗名稱等科技獎勵表列出了獲獎時間、項目名稱、項目代號、獎勵名稱、獲獎名次、證書號、獲獎單位等.4.1.4數(shù)據(jù)倉庫的設(shè)計目標(biāo)數(shù)據(jù)倉庫與數(shù)據(jù)庫的設(shè)計目標(biāo)不同,數(shù)據(jù)倉庫與數(shù)據(jù)庫的設(shè)計目標(biāo)不同,它們有不同的報表處理方式,數(shù)據(jù)庫業(yè)務(wù)系統(tǒng)提供的是辦事層用的,如軍官任免晉銜報告表等,數(shù)據(jù)倉庫是是綜合性及分析性信息的報告表如圖4.1.4所示。*收集干部職務(wù)、學(xué)歷、年齡等信息的變化,獲取有關(guān)數(shù)據(jù)*將獲取的干部數(shù)據(jù)按照OLTP 的需求合理的存放*根據(jù)數(shù)據(jù)庫的特征,對數(shù)據(jù)進行合理的
13、存儲優(yōu)化事務(wù)處理性能*確保干部數(shù)據(jù)事務(wù)處理時的安全性*將信息分離,按照主題組織起來*確保干部業(yè)務(wù),檔案,電子表格都進入數(shù)據(jù)倉庫的數(shù)據(jù)具有一致性*合理設(shè)計數(shù)據(jù)粒度,分區(qū)方式,保證數(shù)據(jù)倉庫的運行效率*優(yōu)化存儲方式,提升對干部信息聯(lián)機分析性能 數(shù)據(jù)庫的設(shè)計目標(biāo) 計目標(biāo)4.1.5 數(shù)據(jù)倉庫主題的確定基于干部業(yè)務(wù)系統(tǒng)的分析,定義了基本信息、考核、任免、培訓(xùn)等主題,4.2多維分析維度設(shè)計4.2.1 維度的選擇采用數(shù)據(jù)總線矩陣來設(shè)計干部隊伍管理數(shù)據(jù)倉庫,干部隊伍的主題對應(yīng)矩陣的行,公共維度對應(yīng)矩陣的列, 得出一個Value Chain,描述數(shù)據(jù)倉庫的總體結(jié)構(gòu)。表4.2.1干部隊伍管理的主題矩陣分析主題角度干
14、部隊伍信理任免管理考核管理培訓(xùn)管理單位時間年齡軍齡學(xué)歷性別健康入伍地籍貫民族婚姻休假住房情況海外關(guān)系家庭出身家庭住址聯(lián)系方式隨軍情況政治面貌黨團時間生長類別職務(wù)名稱職務(wù)情況軍銜班子主碼類別詳碼類別交叉任職晉升考核隨機考核定期考核日常量化管理獎懲情況參戰(zhàn)情況參加非作戰(zhàn)大活動民主測評實績測評培訓(xùn)情況從上表的分析可知,干部“”的為特征量,是管理者注重的信息,是設(shè)計要關(guān)注體現(xiàn)的量。沒有標(biāo)識的“”的設(shè)計時不做考慮。4 .2. 2 維表、事實表的選擇在不同角度的主題分析后,之后是要識別它們所包含的信息判斷分辨出事實數(shù)據(jù)和維度數(shù)據(jù),哪些是事實數(shù)據(jù),哪些屬于維度數(shù)據(jù)。如圖4.4.2 分析要講究效率,如分析獎懲
15、,先視之為屬于維的屬性,在屬性下,有不同類型的獎懲,比較合理的是將之看作事實處理,而其他的處理辦法,如規(guī)劃為漸變維會出現(xiàn)重復(fù)冗余信息。 4.2.3維表層次及類的劃分(1 )維表的層次。為快速查詢,數(shù)據(jù)組織形式是概念分層,層次由維成員構(gòu)成,維度包括層次關(guān)系,低層到高層可建立映射關(guān)系。維的層次可根據(jù)數(shù)據(jù)的詳略做簡繁處理,一般而言,繁復(fù)的層次,儲存空間操作麻煩,效率低。本文盡量簡化層次。主要設(shè)計如下表所示,設(shè)計了六層單位維表4.2.3 單位結(jié)構(gòu)表層數(shù)單位一 師(旅)二 團團三 營.營.營四連.連連連連五排排排排排排排排排排六干部干部干部干部干部干部干部干部干部干部上表中,一列稱為父鍵列,一列稱為成員
16、鍵列,兩個維度表列分別描述了維度成員中的父子關(guān)系,如王三單位2 連,其子為2排,這種沿襲關(guān)系一目了然,方便查詢追溯。 表4.2.4 單位維單位維單位ID父單位ID單位名稱單位級別其單位維中度量值的類型如表表4.2.5度量值類型單位IDChar父單位IDChar單位名稱Char單位級別Char(2) 時間維時間維是數(shù)據(jù)倉庫分析最基本的維度,干部隊伍劃分的管理時間維如下表4.2.6 ( 3) 維表的類。用集合論原理把全體維視為全集,將其劃分為互不相交的子類,根據(jù)不同屬性劃分不同的子類,干部集合分別按照職稱、學(xué)歷、性別來分類,如表.8年齡按照年齡段劃分,成績按照成績等級劃分.(4)層
17、次和類的區(qū)別。層次有沿襲關(guān)系,高層次的維,子分支多,類是依據(jù)不同劃分標(biāo)準(zhǔn)描述成員特征的。4.3 數(shù)據(jù)倉庫邏輯模型設(shè)計邏輯模型設(shè)計指導(dǎo)著系統(tǒng)實施,是繼確定主題后的設(shè)計環(huán)節(jié),是對主題的結(jié)構(gòu)更詳細(xì)的描述。4.3.1 邏輯模型的選擇當(dāng)年主流的模型有雪花模型、星模型等,星模型是全部的x個多維表關(guān)聯(lián)其事實表中的x個標(biāo)識符,其外鍵是指針,不同的表中的對應(yīng)值是其主鍵,通過比較維的層次、上鉆和下鉆來完成操作。雪花模型是一個維用多個表來表示,維表結(jié)構(gòu)是二級的,增大了系統(tǒng)的負(fù)擔(dān),但更能體現(xiàn)對象的角度和深度更加方便數(shù)據(jù)操作。干部隊伍管理數(shù)據(jù)倉庫采用星模型,結(jié)構(gòu)是一個或多個維表對應(yīng)多個事實表。如 生長類別維度 表,被多
18、個事實表關(guān)聯(lián)。4.3.2 確定數(shù)據(jù)倉庫的粒度粒度設(shè)計是數(shù)據(jù)倉庫設(shè)計中的關(guān)鍵,它左右著數(shù)據(jù)的量,數(shù)據(jù)存儲設(shè)備的成本會因為數(shù)據(jù)增大而提高成本。按照“日”“月”統(tǒng)計的查詢量有很大區(qū)別,按照每個字段8 個字節(jié)計算,每天檢查1個干部5次, 1 個月的管理數(shù)據(jù)量為: 8*6*30*5=7200字節(jié),匯總數(shù)據(jù)量為8*5=4 0字節(jié)。數(shù)據(jù)粒度的確定與所要回答的問題及它的的應(yīng)用有關(guān)。如圖4.4.9細(xì)節(jié)數(shù)據(jù)提供張某在09年8月1 日普升為上尉的信息代價: 細(xì)節(jié)數(shù)據(jù)應(yīng)付綜合問題要通過大量的計算查詢大量數(shù)據(jù)查詢到。綜合數(shù)據(jù)提供年8月1 日晉升上尉的總數(shù).代價:只許訪問很少的數(shù)據(jù),綜合數(shù)據(jù)便能提供綜合問題答案,但沒具體
19、數(shù)據(jù)。 表 4.3.9 細(xì)節(jié)數(shù)據(jù)綜合數(shù)據(jù)用途:細(xì)節(jié)數(shù)據(jù)提供張某在09年8月1 日普升為上尉的信息代價: 細(xì)節(jié)數(shù)據(jù)應(yīng)付綜合問題要通過大量的計算查詢大量數(shù)據(jù)查詢到。用途:綜合數(shù)據(jù)提供年8月1 日晉升上尉的總數(shù).代價:只許訪問很少的數(shù)據(jù),綜合數(shù)據(jù)便能提供綜合問題答案,但沒具體數(shù)據(jù)。由以上可知,小粒度的設(shè)計,存儲數(shù)據(jù)的空間因為所有細(xì)節(jié)都塞在事實表里,將會因此膨脹: 大粒度設(shè)計,以存儲空間換取數(shù)據(jù)細(xì)節(jié)。數(shù)據(jù)倉庫粒度與存儲空間構(gòu)成了沖突。設(shè)計部隊干部隊伍信息數(shù)據(jù)倉庫時,要提前估計所要創(chuàng)建的表數(shù)、表中的大概數(shù)據(jù)行,和一年中可能產(chǎn)生的數(shù)據(jù)量。經(jīng)計算,軍隊基層干部隊伍信息數(shù)據(jù)倉庫一年的數(shù)據(jù)量大約80000 多行
20、。按時間維分類歷史干部數(shù)據(jù),假設(shè)立體圖對應(yīng)的時間維層次為日,立方實例中的該數(shù)據(jù)將朝時間維中年聚集,如只保留 年 層次數(shù)據(jù),立方體可減少到1/365 。4.3.3 數(shù)據(jù)的分割數(shù)據(jù)的分割就是將數(shù)據(jù)集合分配到相應(yīng)的物理單元中,為了提高效率,把具有某種相關(guān)性的數(shù)據(jù)集,整理到一起, 相對獨立處理數(shù)據(jù).如分析某類學(xué)歷的干部的數(shù)據(jù),某類職稱的干部的數(shù)據(jù), 根據(jù)實際情況來制定數(shù)據(jù)分割的標(biāo)準(zhǔn),可按照時間,空間,單位,類別來分割.數(shù)據(jù)在職務(wù)等級上的分割 數(shù)據(jù)的重構(gòu)和重組數(shù)據(jù)分割更利于數(shù)據(jù)重構(gòu)、重組、掃描, 提高數(shù)據(jù)分析效率。4.3.4 度量值的選擇為了便于決策,人們創(chuàng)建了數(shù)據(jù)倉庫,根據(jù)使用需要來選擇度量值, 將人
21、員數(shù)量和平均年齡作為干部信息主題和培訓(xùn)管理主題的度量值,根據(jù)不同的需要合理的確定不同的度量值.表4.3.10 軍隊基層干部隊伍信息維度表4 .3.5 邏輯模型的建立根據(jù)上述的主題及分析需求,該主題采取星型模型來設(shè)計,下面的主題模型圖中只顯示部分主題維度。左邊欄目的時間、年齡、軍齡. 為分析維度維表維表成員類型時間時間田,年,季,月,日年齡年齡IDNum年齡年齡IDNum班子成員班子成員IDChar團級班子成員, 旅級班子成員 ,非班子成員主碼類別主碼類別IDChar軍事干部,政治干部, 后1Ji干部, 裝備干部,技術(shù)干部詳碼類別詳碼類別IDCharl 類主官, 2 類主官, 3 類主宮,機關(guān)明
22、確,機關(guān)不明確,其他學(xué)歷學(xué)歷IDNum干部自然信息民族Char漢,少數(shù)民族性別Char男,女籍貫Char北京, 上海入伍地Char北京, 上海政治面貌Char黨員, 團員, 群眾婚姻Char己婚隨軍情況Char已隨軍隨隊,隨軍未隨隊,符合隨軍未隨軍, 不符合隨軍國防定向生, 直接接收地方大學(xué)生, 軍校青年學(xué)員,戰(zhàn)士學(xué)員生長類別生長類別IDChar國防定向生, 直接接收地方大學(xué)生, 軍校青年學(xué)員,戰(zhàn)士學(xué)員單位單位IDNum父單位IDChar單位名Char單位級別Char軍, 師, 旅, 團, 營, 排單位分布Char排, 部隊連, 部隊營, 團、旅、師、軍機關(guān)及直屬單位職務(wù)職務(wù)IDNum職務(wù)名稱
23、Char排長, 副連長, 連長, 指導(dǎo)員,參謀 職務(wù)等級Char正排, 副連, 正連, 副營, 正營, 副團 職級時間Time年月日職務(wù)時間Time年月日4.4多維模型所支持的分析操作為了用戶各個側(cè)面和視角觀察和了解數(shù)據(jù),剖析數(shù)據(jù)包括切片、旋轉(zhuǎn)等,在部隊部隊伍管理倉庫中,從各個角度分析干部。(1) 1.切片(slice)切片就是沿著數(shù)據(jù)集的軸線操作,是為了從三維以上的高維度觀察數(shù)據(jù)結(jié)構(gòu)。如干部的多維結(jié)構(gòu)包括時間、年齡,職務(wù)等級等,從職務(wù)等級的切片,可觀察到干部數(shù)量在這個維度上的變化。如圖切片(2) 2.切塊(dice)切塊就是將數(shù)據(jù)集分離為小塊,與切片不同的是,切塊是操作,數(shù)據(jù)區(qū)間兩個以上的維
24、度,切片只是單一維度上的選取。3.鉆取(dril)鉆取即轉(zhuǎn)換不同的維度層次,分為上下兩個方向進行高低的維度層次的轉(zhuǎn)換。從高低維度層次為下鉆,低高維度層次為上鉆。(4)旋轉(zhuǎn)(pivot)旋轉(zhuǎn)是轉(zhuǎn)換維度的行列,把維度的行變?yōu)榱?,也可把列旋轉(zhuǎn)變?yōu)樾小?4.5 數(shù)據(jù)倉庫物理模型設(shè)計將邏輯模型置于物理系統(tǒng)中就是數(shù)據(jù)倉庫的物理模型。主要是具體化數(shù)據(jù)的存儲結(jié)構(gòu)、索引策略、存儲優(yōu)化分配等。要做到這一步,首先須熟悉數(shù)據(jù)庫管理系統(tǒng)。(1)設(shè)計存儲結(jié)構(gòu)。按數(shù)據(jù)特性設(shè)計物理實現(xiàn),對數(shù)據(jù)進行分類,存取頻率高的設(shè)置在高速存儲設(shè)備上,本系統(tǒng)的數(shù)據(jù)倉庫結(jié)合考量了多種因素,使用RAID。 (2)設(shè)計索引策略?,F(xiàn)在,多以 B 樹
25、作為索引,該索引用一個樹結(jié)構(gòu)和指向唯一的行號的指針,在部隊干部隊伍數(shù)據(jù)倉庫中,這種指向方式不適合,采用BitMap索引。(3)設(shè)計存儲策略。在部隊干部隊伍管理系統(tǒng)中將生長類別、職務(wù)、等屬性統(tǒng)一起來,將表及表間字段的映射,納入數(shù)據(jù)集市中,在其他地方復(fù)用。第五章軍隊基層干部隊伍管理多維分析系統(tǒng)的設(shè)計與實現(xiàn)5.1系統(tǒng)結(jié)構(gòu)設(shè)計好的部隊干部隊伍管理系統(tǒng)必須功能完整,有一個科學(xué)的系統(tǒng)框架如圖5.1 所示。 數(shù)據(jù)源 數(shù)據(jù)存儲與管理 OLAP服務(wù)器 前端工具在微軟SQL Server 2005數(shù)據(jù)庫管理系統(tǒng)上新加了Analysis services的數(shù)據(jù)挖掘的功能。集成了OLAP。5.2 數(shù)據(jù)的ETL操作5.
26、2.1 ETL的概念及過程ETL 過程就是對不同定義和不同類型數(shù)據(jù)源進行抽取( Extraction ) 去掉差異,一致性處理,再進行轉(zhuǎn)換, (Transforrn)、加工處理裝載(Load)到數(shù)據(jù)模型中。下面是ETL部隊干部隊伍管理的主要步驟 (1 ) 部隊干部隊伍管理數(shù)據(jù)模型的確立。(2)檢查、確認(rèn)系統(tǒng)所需要的數(shù)據(jù),如: 部隊伍管理數(shù)據(jù)信息主題中,檢查、確認(rèn)詳碼類別。(3)源數(shù)據(jù)到目標(biāo)數(shù)據(jù)關(guān)系。如數(shù)據(jù)源的自然信息表到數(shù)據(jù)倉庫中的干部信息維表中的性別、政治面貌等字段的映射關(guān)系。(4) 選擇全面的數(shù)據(jù)抽取規(guī)則。(5) 進行數(shù)據(jù)轉(zhuǎn)換和清洗。轉(zhuǎn)換數(shù)據(jù)類型,如將部隊干部隊伍信息中 自然信息表的“0”
27、“1”表示的性別屬性值,轉(zhuǎn)換為多維分析中的男和女是屬性值。(6)經(jīng)過處理后的數(shù)據(jù),就可裝載到目標(biāo)表。第一次是裝載全部的數(shù)據(jù)倉庫。之后的裝載是為了體現(xiàn)數(shù)據(jù)的變化。5.2.2 ETL工具選擇和實現(xiàn)本文ETL工具選擇SSIS即Microsoft SQL Server 2005 Integration Services, ETL的實現(xiàn)SSIS 用包和組件來管理處理數(shù)據(jù),包創(chuàng)建后,用數(shù)據(jù)流完成提取源數(shù)據(jù)、轉(zhuǎn)換數(shù)據(jù)、定義數(shù)據(jù)目標(biāo)的任務(wù)。如圖所示的SSIS 包部署到SQLServer 上。再將SSIS 包導(dǎo)入SQLServer,數(shù)據(jù)源的數(shù)據(jù)屬性要被SQL識別需要用DTS 來進行數(shù)據(jù)源中的數(shù)據(jù)屬性的轉(zhuǎn)變。5.
28、2 聯(lián)機分析工具的設(shè)計與實現(xiàn)5.2.1 聯(lián)機分析工具的系統(tǒng)設(shè)計ADOMD象調(diào)用API訪問數(shù)據(jù)倉庫中的數(shù)據(jù),以可視化的圖表展現(xiàn)給用戶,此功能有5個模塊,后臺服務(wù)器為如圖(1) 多維數(shù)據(jù)集連接模塊。這個模塊是系統(tǒng)初始啟動模塊,也是鏈接SSAS和其他模塊的樞紐,此設(shè)計采用向?qū)J?,有自動添加連接參數(shù)功能,啟發(fā)引導(dǎo)用戶一步步完成連接操作進程。 ( 2) 數(shù)據(jù)導(dǎo)航模塊。此模塊為立方體導(dǎo)航和度量維度導(dǎo)航兩部分組合而成,立方體導(dǎo)航用下拉列表的方式呈現(xiàn)多維數(shù)據(jù)。以導(dǎo)航樹的方式數(shù)據(jù)立方體中維度及度量。(3) 可視化分析展現(xiàn)模塊。數(shù)據(jù)立方體的鉆取切片等操作都用此模塊實現(xiàn)。( 4) 生成報表模塊。用戶此模塊可根據(jù)需
29、要調(diào)整報表、增添其中的信息。5.2.2 主要技術(shù)實現(xiàn)本工具的系統(tǒng)實現(xiàn)采用VB.NET 編程語言, 后臺服務(wù)器為Server 2005 Analysis Services,查詢與訪問以及元數(shù)據(jù)的操作用ADOMD.NET和AMO。(1 )連接數(shù)據(jù)倉庫獲取OLAP 服務(wù)器及其上的多維數(shù)據(jù)集,用.NET的反射組件來實現(xiàn)連接; 要完成連接OLAP ,還需設(shè)置ADOMD 對象屬性如: 設(shè)置連接屬性connectionString = Data Source= & Server.Text & ;Provider = MSOLAP ;/Server.Text 數(shù)據(jù)庫名稱。(2 ) 數(shù)據(jù)導(dǎo)航及可視化分析展現(xiàn)Du
30、ndas Chart for WinForm-OLAP Services控件有眾多API 函數(shù)庫,來完這一步,本系統(tǒng)使用了CubeSeector 、CubeDimensionBrowser , Chart、Grid、AxisBuiJder 五個組件來實現(xiàn)立方體、維度導(dǎo)航、圖形展示、透視表展示以及軸操作,綁定數(shù)據(jù)源用OlapManager ,同時綁定五個組件與OlapManager實現(xiàn)與數(shù)據(jù)立方體通信。此外, 在系統(tǒng)中通過設(shè)置OlapManager 的DataProvider 屬性將其綁定到ADOMD 對象,即可實現(xiàn)數(shù)據(jù)導(dǎo)航及可視化展現(xiàn)。核心代碼:Friend WithEvents Manager As Dundas.Olap.Manager.OJapManagerMe. CubeSelector.OlapManager = Me.Mall1agerMe.
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 殘疾人勞動權(quán)益保護勞動合同簽訂流程詳解
- 浙江省紹興市越城區(qū)2025年八年級下學(xué)期期末數(shù)學(xué)試題及參考答案
- 大學(xué)生先進班級主要事跡材料范文(17篇)
- 建設(shè)工程施工勞務(wù)承包合同(6篇)
- (關(guān)于耳垂采血的)復(fù)習(xí)試題含答案
- 公司合規(guī)環(huán)保管理制度
- 優(yōu)化備考策略的軟件測試工程師試題及答案
- 2024年中國創(chuàng)投市場數(shù)據(jù)報告
- 醫(yī)德醫(yī)風(fēng)演講稿范文(19篇)
- 數(shù)據(jù)庫用戶角色與權(quán)限管理試題及答案
- 《法律的基本原則》
- 酒店客房技能實訓(xùn)中式鋪床
- 血液透析病人個性化治療
- 物理競賽所有公式
- 回火爐安全操作規(guī)程
- 《輸變電工程建設(shè)標(biāo)準(zhǔn)強制性條文》施工實施計劃
- APQP項目小組人員能力矩陣圖
- 外墻及外門窗淋水、噴水試驗標(biāo)準(zhǔn)
- 光纜遷移 施工方案
- 釹鐵硼材料倒角公差標(biāo)準(zhǔn)
- 凍融循環(huán)作用下粉砂土力學(xué)特性試驗研究
評論
0/150
提交評論