大數(shù)據(jù)融合共享平臺技術(shù)方案_第1頁
大數(shù)據(jù)融合共享平臺技術(shù)方案_第2頁
大數(shù)據(jù)融合共享平臺技術(shù)方案_第3頁
大數(shù)據(jù)融合共享平臺技術(shù)方案_第4頁
大數(shù)據(jù)融合共享平臺技術(shù)方案_第5頁
已閱讀5頁,還剩73頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

大數(shù)據(jù)融合共享平臺

技術(shù)方案

目錄

第一章建設(shè)目標(biāo).......................................3

1.1總體規(guī)劃......................................3

1.2建設(shè)目標(biāo)......................................3

第二章總體設(shè)計(jì).......................................5

2.1大數(shù)據(jù)中心系統(tǒng)架構(gòu)設(shè)計(jì)........................5

2.2數(shù)據(jù)流向設(shè)計(jì)..................................7

2.3標(biāo)準(zhǔn)規(guī)范設(shè)計(jì)..................................8

第三章詳細(xì)設(shè)計(jì)......................................12

3.1數(shù)據(jù)共享交換平臺設(shè)計(jì).........................12

3.2信息資源目錄設(shè)計(jì).............................21

3.3數(shù)據(jù)管理平臺.................................30

3.4數(shù)據(jù)應(yīng)用平臺設(shè)計(jì).............................49

3.5接口設(shè)計(jì).....................................58

第四章安全方案設(shè)計(jì)..................................69

4.1計(jì)算機(jī)網(wǎng)絡(luò)安全設(shè)計(jì)...........................69

4.2防火墻.......................................70

4.3病毒防護(hù)系統(tǒng).................................70

4.4對業(yè)務(wù)與數(shù)據(jù)災(zāi)難備份恢復(fù)的設(shè)計(jì)...............71

4.5信息安全與保密管理...........................73

第一章建設(shè)目標(biāo)

1.1總體規(guī)劃

在統(tǒng)一標(biāo)準(zhǔn)框架下,面向智慧城市建設(shè)的信息資源共享和開

發(fā)需求,依據(jù)國家智慧城市建設(shè)相關(guān)標(biāo)準(zhǔn),采用云計(jì)算、大數(shù)據(jù)

等信息化技術(shù)手段,統(tǒng)籌整合法人、地理信息、宏觀經(jīng)濟(jì)、人口

數(shù)據(jù)資源,構(gòu)建統(tǒng)一的基礎(chǔ)數(shù)據(jù)資源體系、標(biāo)準(zhǔn)規(guī)范體系、安全

體系、四大基礎(chǔ)庫、公共專題庫、公共業(yè)務(wù)庫及四大公共平臺,

建立政務(wù)信息的共享和交換機(jī)制,面向其他委辦部門、對外提供

多層次、可擴(kuò)展、安全可靠的共享服務(wù)接口,有效支持各類應(yīng)用

系統(tǒng)的開發(fā)和運(yùn)行,實(shí)現(xiàn)對信息資源的深度利用,實(shí)現(xiàn)不同部門

異構(gòu)系統(tǒng)間的資源共享和業(yè)務(wù)協(xié)同,有效避免城市重復(fù)投資、重

復(fù)建設(shè)、資源浪費(fèi)等問題。

1.2建設(shè)目標(biāo)

城市大數(shù)據(jù)中心(一期)建設(shè)目標(biāo)為四個平臺、三個基礎(chǔ)信

息庫,分別為數(shù)據(jù)共享交換平臺、信息資源目錄管理平臺、數(shù)據(jù)

管理平臺、數(shù)據(jù)應(yīng)用平臺和基礎(chǔ)信息庫(法人庫、宏觀經(jīng)濟(jì)庫、

地理信息庫)。其中基礎(chǔ)信息庫為本期項(xiàng)目建設(shè)的重點(diǎn)內(nèi)容;數(shù)

據(jù)共享交換平臺、數(shù)據(jù)管理平臺為大數(shù)據(jù)中心的數(shù)據(jù)生產(chǎn)平臺,

負(fù)責(zé)獲取、整合數(shù)據(jù),為基礎(chǔ)信息庫提供技術(shù)支撐和管理能力,

3

并對上層應(yīng)用系統(tǒng)提供數(shù)據(jù)服務(wù);數(shù)據(jù)應(yīng)用平臺為大數(shù)據(jù)中心的

應(yīng)用平臺,結(jié)合法人庫、宏觀經(jīng)濟(jì)庫、地理信息庫、公共專題庫、

公共業(yè)務(wù)庫提供基于GIS、報表的數(shù)據(jù)展示和在線數(shù)據(jù)查詢等功

能。

1、數(shù)據(jù)共享交換平臺

負(fù)責(zé)各委辦局?jǐn)?shù)據(jù)的采集,通過交換平臺將共建部門的業(yè)務(wù)

數(shù)據(jù)匯總到數(shù)據(jù)中心。同時提供跨部門的數(shù)據(jù)共享與交換。

2、數(shù)據(jù)管理平臺

通過ETL工具將數(shù)據(jù)從ODS庫整合到委辦局業(yè)務(wù)庫,提供

數(shù)據(jù)的處理、元數(shù)據(jù)管理、數(shù)據(jù)申請授權(quán)、錯誤數(shù)據(jù)反饋、數(shù)據(jù)

運(yùn)行監(jiān)控、數(shù)據(jù)服務(wù)等功能。

3、信息資源目錄管理平臺

信息資源目錄管理平臺主要實(shí)現(xiàn)了做為法人庫、宏觀經(jīng)濟(jì)庫、

地理信息庫三大基礎(chǔ)庫及其它智慧應(yīng)用數(shù)據(jù)源的委辦局信息資

源的管理。

4、數(shù)據(jù)應(yīng)用平臺

數(shù)據(jù)應(yīng)用平臺針對不同的用戶提供靈活的信息查詢、分主題

的統(tǒng)計(jì)分析、領(lǐng)導(dǎo)駕駛艙、等豐富的數(shù)據(jù)應(yīng)用服務(wù),并支持主題

應(yīng)用的擴(kuò)展功能。

5、基礎(chǔ)信息庫

基礎(chǔ)信息庫建設(shè)包括法人庫、宏觀經(jīng)濟(jì)庫、地理基礎(chǔ)信息庫。

4

主要功能有:綜合采集、梳理、交換、整合、建立法人基礎(chǔ)信息

庫、宏觀經(jīng)濟(jì)庫,以及地理基礎(chǔ)信息庫的整合重構(gòu)方案設(shè)計(jì)。

第二章總體設(shè)計(jì)

2.1大數(shù)據(jù)中心系統(tǒng)架構(gòu)設(shè)計(jì)

總體框架自下至上包括基礎(chǔ)設(shè)施層、數(shù)據(jù)支撐層、數(shù)據(jù)資源

層、服務(wù)支撐層、資源展示層以及用戶層6層。

戶政府委辦部門企業(yè);I公眾

資源展示與應(yīng)用

源典型應(yīng)用

展O

示公眾/企業(yè)網(wǎng)上

領(lǐng)導(dǎo)決策完善

服務(wù)一體化

城市實(shí)體空間網(wǎng)格化社會服

可視化務(wù)管理

務(wù)

標(biāo)

準(zhǔn)

規(guī)

數(shù)

據(jù)

數(shù)據(jù)共享交換平臺

計(jì)算機(jī)網(wǎng)絡(luò)(政務(wù)網(wǎng)/互聯(lián)網(wǎng)/VPN專網(wǎng))

云平臺

虛擬軟件存儲設(shè)備負(fù)載均衡操作系統(tǒng)

圖3-1系統(tǒng)總體架構(gòu)圖

基礎(chǔ)設(shè)施層:實(shí)現(xiàn)了面向全區(qū)各政府部門提供計(jì)算服務(wù)、網(wǎng)

絡(luò)服務(wù)、安全服務(wù)、存儲服務(wù)、信息資源服務(wù)、以及運(yùn)行環(huán)境、

5

共性支撐、通用組件等支撐軟件服務(wù)??芍握?wù)部門業(yè)務(wù)應(yīng)用、

政務(wù)領(lǐng)域應(yīng)用、領(lǐng)導(dǎo)決策應(yīng)用及其他應(yīng)用,數(shù)據(jù)共享交換平臺的

建設(shè)依托區(qū)已有的政務(wù)云進(jìn)行統(tǒng)一建設(shè)部署。

數(shù)據(jù)支撐層:圍繞政務(wù)信息資源建設(shè)的總體規(guī)劃,實(shí)現(xiàn)不同

來源數(shù)據(jù)的交換,整合加工,并按照不同應(yīng)用模式設(shè)置整合基礎(chǔ)

庫、專題庫等多種數(shù)據(jù)庫體系,并且實(shí)現(xiàn)海量信息資源的一體化

整合、管理與監(jiān)控,對外提供不同層面的數(shù)據(jù)服務(wù)支撐。本期主

要建設(shè)法人、地理、宏觀經(jīng)濟(jì)3大基礎(chǔ)數(shù)據(jù)庫。

服務(wù)層:以數(shù)據(jù)服務(wù)總線為核心,為圍繞數(shù)據(jù)資源的注冊管

理、服務(wù)安全管理以及服務(wù)運(yùn)行監(jiān)控等需求,建設(shè)配套的支撐系

統(tǒng)和服務(wù)功能,提供多種形式的服務(wù)接口,實(shí)現(xiàn)平臺服務(wù)管理與

監(jiān)控需要。通過服務(wù)二次開發(fā)接口,實(shí)現(xiàn)平臺數(shù)據(jù)、功能和服務(wù)

能力的對外提供。

應(yīng)用層(資源展示層及用戶層):搭建統(tǒng)一資源展示門戶系

統(tǒng)針對管理員、政務(wù)用戶和公眾用戶的不同應(yīng)用需求,提供基于

平臺各支撐系統(tǒng)的原子服務(wù),并聚合成相應(yīng)的功能接口集,以支

撐構(gòu)建于平臺基礎(chǔ)上的各類應(yīng)用。同時基于平臺可搭建多類典型

應(yīng)用。

安全保障及標(biāo)準(zhǔn)規(guī)范體系:提供統(tǒng)一的身份認(rèn)證及權(quán)限管理

功能。遵循信息系統(tǒng)建設(shè)相關(guān)的國家標(biāo)準(zhǔn)和行業(yè)標(biāo)準(zhǔn),保障平臺

的安全穩(wěn)定運(yùn)行和統(tǒng)一規(guī)劃實(shí)施。本項(xiàng)目依托已有安全保障體系

6

建設(shè)。

2.2數(shù)據(jù)流向設(shè)計(jì)

大數(shù)據(jù)中心數(shù)據(jù)流向如下圖所示:

數(shù)據(jù)來源數(shù)據(jù)交換大數(shù)據(jù)中心數(shù)據(jù)服務(wù)應(yīng)用系統(tǒng)

原始數(shù)據(jù)

數(shù)

據(jù)數(shù)據(jù)應(yīng)

數(shù)

數(shù)

共ODS用平臺

據(jù)

據(jù)

務(wù)

務(wù)

務(wù)

業(yè)

U詢

錯誤數(shù)據(jù)反饋

圖3-2大數(shù)據(jù)中心數(shù)據(jù)流向圖

主要原則有如下幾條:

1、所有來源系統(tǒng)的數(shù)據(jù)均通過數(shù)據(jù)共享交換平臺集成到數(shù)

據(jù)中心ODS庫;

2、數(shù)據(jù)中心里的數(shù)據(jù)分兩類,即大數(shù)據(jù)庫數(shù)據(jù)和ODS庫數(shù)

據(jù)。其中,大數(shù)據(jù)庫數(shù)據(jù):數(shù)據(jù)經(jīng)過清洗轉(zhuǎn)換后的數(shù)據(jù),包括,

三大基礎(chǔ)庫(法人庫、宏觀經(jīng)濟(jì)庫、地理信息庫),公共業(yè)務(wù)庫,

公共專題庫。這兩類數(shù)據(jù)的主要區(qū)別在于以下幾方面;

數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)不同:ODS庫中的數(shù)據(jù),直接集成原始信息系

統(tǒng),數(shù)據(jù)完整性、一致性較差;大數(shù)據(jù)庫中存儲的數(shù)據(jù),是數(shù)據(jù)

整合清洗后(保證完整性、一致性、及時性)的數(shù)據(jù);

7

數(shù)據(jù)服務(wù)方式不同:ODS庫中的數(shù)據(jù),數(shù)據(jù)中心提供有認(rèn)證

的入庫查詢服務(wù);大數(shù)據(jù)庫中的數(shù)據(jù),由大數(shù)據(jù)管理平臺開發(fā)數(shù)

據(jù)服務(wù)API(DataAPI),再經(jīng)數(shù)據(jù)服務(wù)總線提供數(shù)據(jù)服務(wù)。

數(shù)據(jù)中心是HadoopHDFS承載的傳統(tǒng)關(guān)系型數(shù)據(jù)庫(Oracle,

DB2,etc)和非關(guān)系型數(shù)據(jù)庫(Hive,HBase,etc)實(shí)現(xiàn)。傳統(tǒng)

關(guān)系型數(shù)據(jù)主要用于結(jié)構(gòu)化數(shù)據(jù)存儲,非關(guān)系型數(shù)據(jù)庫主要用戶

非結(jié)構(gòu)化數(shù)據(jù)以及平展數(shù)據(jù)存儲。這兩類數(shù)據(jù)庫承擔(dān)數(shù)據(jù)處理任

務(wù)的區(qū)別主要是:基于Hadoop大數(shù)據(jù)平臺的數(shù)據(jù)庫(簡稱:大數(shù)

據(jù)庫),相對于傳統(tǒng)數(shù)據(jù)庫不承擔(dān)ODS庫數(shù)據(jù)存儲處理。

ODS庫、法人庫、宏觀經(jīng)濟(jì)庫、地理信息庫,除實(shí)時庫建設(shè)

外,均進(jìn)行歷史庫的建設(shè),用于政府?dāng)?shù)據(jù)倉庫的建設(shè)和數(shù)據(jù)歷史

的追溯。

2.3標(biāo)準(zhǔn)規(guī)范設(shè)計(jì)

通過全方位的標(biāo)準(zhǔn)規(guī)范體系建設(shè),將城市信息資源加工、整

合、交換共享、應(yīng)用和管理各個環(huán)節(jié)業(yè)務(wù)有機(jī)地連接起來,為信

息資源的共享服務(wù)提供技術(shù)準(zhǔn)則和指導(dǎo)。

>設(shè)計(jì)原則

本項(xiàng)目中對涉及的各類標(biāo)準(zhǔn)的選取和制定應(yīng)遵循以下原則:

1、按照“國家標(biāo)準(zhǔn)(或國際標(biāo)準(zhǔn))一行業(yè)標(biāo)準(zhǔn)(或部頒標(biāo)準(zhǔn))

一地方標(biāo)準(zhǔn)一內(nèi)部規(guī)范”的次序進(jìn)行選取。優(yōu)先采用國家標(biāo)準(zhǔn)(或

8

國際標(biāo)準(zhǔn)),沒有國家標(biāo)準(zhǔn),則采用相關(guān)的行業(yè)標(biāo)準(zhǔn)(或部頒標(biāo)

準(zhǔn)),依次類推依此類推。

2、在技術(shù)標(biāo)準(zhǔn)的選取過程中,優(yōu)先選擇成熟的主流業(yè)界標(biāo)準(zhǔn)

和通用化、平臺無關(guān)的技術(shù)規(guī)范,盡量不使用私有技術(shù)和非主流

標(biāo)準(zhǔn)。

3、當(dāng)出現(xiàn)沒有任何標(biāo)準(zhǔn)規(guī)范可供采用或相關(guān)成文標(biāo)準(zhǔn)均不適

用的情況,建設(shè)方要輔助各管理機(jī)構(gòu)進(jìn)行相關(guān)技術(shù)和業(yè)務(wù)規(guī)范的

制定,盡可能為數(shù)據(jù)共享交換平臺提供最全面的技術(shù)和管理支持。

>內(nèi)容設(shè)計(jì)

系統(tǒng)標(biāo)準(zhǔn)體系是在引用現(xiàn)有國家、行業(yè)標(biāo)準(zhǔn)的相關(guān)標(biāo)準(zhǔn)的基

礎(chǔ)上,結(jié)合實(shí)際情況,制定相應(yīng)的技術(shù)規(guī)范體系,主要包括以下

幾方面的內(nèi)容:

1、標(biāo)準(zhǔn)規(guī)范體系建設(shè):建設(shè)平臺統(tǒng)一的標(biāo)準(zhǔn)規(guī)范體系,明確

標(biāo)準(zhǔn)體系建設(shè)的指導(dǎo)思想、主要流程以及標(biāo)準(zhǔn)內(nèi)容等。

2、數(shù)據(jù)類標(biāo)準(zhǔn)建設(shè):基于國家及智慧城市有關(guān)標(biāo)準(zhǔn),結(jié)合平

臺建設(shè)實(shí)際需求和業(yè)務(wù)特點(diǎn),通過規(guī)范、完整的信息資源描述邏

輯,形成城市信息資源的元數(shù)據(jù)、數(shù)據(jù)元、資源目錄、數(shù)據(jù)交換

等標(biāo)準(zhǔn),支持全面描述各類信息資源的信息。

3、管理類標(biāo)準(zhǔn)建設(shè):為了保證系統(tǒng)建設(shè)過程中的規(guī)范化管理,

需要制定項(xiàng)目管理標(biāo)準(zhǔn)規(guī)范體系,包括軟件工程管理規(guī)范、平臺

運(yùn)維管理規(guī)范、驗(yàn)收與監(jiān)理制度、軟件開發(fā)標(biāo)準(zhǔn)、系統(tǒng)測試和評

9

估等標(biāo)準(zhǔn)規(guī)范。

引用參考國際標(biāo)準(zhǔn)規(guī)范引用參考行業(yè)標(biāo)準(zhǔn)

引用參考國家標(biāo)準(zhǔn)引用參考地方標(biāo)準(zhǔn)

圖3-3標(biāo)準(zhǔn)規(guī)范體系建設(shè)

>數(shù)據(jù)類標(biāo)準(zhǔn)規(guī)范

基于國家及智慧城市有關(guān)標(biāo)準(zhǔn),結(jié)合平臺建設(shè)實(shí)際需求和業(yè)

務(wù)特點(diǎn),通過規(guī)范、完整的信息資源描述邏輯,形成城市信息資

源的元數(shù)據(jù)、數(shù)據(jù)元、資源目錄、數(shù)據(jù)交換等標(biāo)準(zhǔn)規(guī)范,支持全

面描述各類信息資源的信息。主要用于數(shù)據(jù)整合、數(shù)據(jù)接入、交

換和發(fā)布等功能,便于數(shù)據(jù)的采集整合、更新維護(hù)以及數(shù)據(jù)管理,

便于數(shù)據(jù)質(zhì)量的控制。

元數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范:

在遵循國家標(biāo)準(zhǔn)和行業(yè)標(biāo)準(zhǔn)的基礎(chǔ)上,根據(jù)本地?cái)?shù)據(jù)實(shí)際情

況,形成本地的元數(shù)據(jù)標(biāo)準(zhǔn)。本系統(tǒng)的元數(shù)據(jù)規(guī)范和標(biāo)準(zhǔn)主要包

括業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)和管理元數(shù)據(jù)三類。

資源目錄與分類代碼標(biāo)準(zhǔn)規(guī)范:

資源目錄與分類代碼標(biāo)準(zhǔn)主要用于描述平臺數(shù)據(jù)資源與服務(wù)

資源的邏輯組織與分類展示,其由若干個子標(biāo)準(zhǔn)構(gòu)成。

數(shù)據(jù)共享交換標(biāo)準(zhǔn)規(guī)范:

數(shù)據(jù)整合是平臺建設(shè)的基礎(chǔ),涉及到多種數(shù)據(jù)的整合手段,

10

其中數(shù)據(jù)交換通過服務(wù)總線實(shí)現(xiàn)應(yīng)用對接等都需要定義一套通

用的數(shù)據(jù)交換標(biāo)準(zhǔn),基于此標(biāo)準(zhǔn)實(shí)現(xiàn)各個系統(tǒng)間數(shù)據(jù)的共享和交

換,并支持未來更多系統(tǒng)與平臺的對接。

其它數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范:

數(shù)據(jù)字典標(biāo)準(zhǔn):該標(biāo)準(zhǔn)規(guī)定了信息資源數(shù)據(jù)庫及其內(nèi)部各類

數(shù)據(jù)的數(shù)據(jù)字典編寫的內(nèi)容、格式、方法及其技術(shù)要求。

數(shù)據(jù)交換格式標(biāo)準(zhǔn):該標(biāo)準(zhǔn)規(guī)定了數(shù)據(jù)資源交換的格式要求。

信息資源庫數(shù)據(jù)表結(jié)構(gòu)規(guī)范:該標(biāo)準(zhǔn)規(guī)定了信息資源庫的數(shù)

據(jù)庫表結(jié)構(gòu)。

數(shù)據(jù)維護(hù)與更新規(guī)范:該標(biāo)準(zhǔn)規(guī)定了數(shù)據(jù)維護(hù)、更新、管理

流程以及技術(shù)要求。

數(shù)據(jù)質(zhì)量規(guī)范:該標(biāo)準(zhǔn)規(guī)范了信息資源數(shù)據(jù)的質(zhì)量要求和質(zhì)

量標(biāo)準(zhǔn)。

數(shù)據(jù)組織及數(shù)據(jù)庫命名規(guī)則:該標(biāo)準(zhǔn)規(guī)定了信息資源庫的數(shù)

據(jù)組織以及數(shù)據(jù)庫命名規(guī)則。

屬性數(shù)據(jù)結(jié)構(gòu):該標(biāo)準(zhǔn)規(guī)定了信息資源庫的屬性數(shù)據(jù)結(jié)構(gòu)。

>管理類標(biāo)準(zhǔn)規(guī)范

為保證平臺建設(shè)過程中的規(guī)范化管理,需要制定項(xiàng)目管理標(biāo)

準(zhǔn)規(guī)范體系,包括軟件工程管理規(guī)范、平臺運(yùn)維管理規(guī)范、驗(yàn)收

與監(jiān)理制度、軟件開發(fā)標(biāo)準(zhǔn)、系統(tǒng)測試和評估等標(biāo)準(zhǔn)規(guī)范和各種

管理辦法。

11

第三章詳細(xì)設(shè)計(jì)

3.1數(shù)據(jù)共享交換平臺設(shè)計(jì)

平臺主要實(shí)現(xiàn)政府信息化及其大數(shù)據(jù)應(yīng)用建設(shè)的需求,滿足

一個中心、四個庫的實(shí)施及其應(yīng)用,滿足政府采集、交換各部門

數(shù)據(jù),以及政府?dāng)?shù)據(jù)平臺自定義公開等政府?dāng)?shù)據(jù)相關(guān)業(yè)務(wù)的需求;

3.1.1模塊結(jié)構(gòu)與功能關(guān)系設(shè)計(jì)

功能業(yè)務(wù)描述:共享交換平臺分為五個模塊

數(shù)據(jù)傳輸模塊

共享交換的主要模塊,2-4模塊為其提供支持,實(shí)現(xiàn)應(yīng)用單位

前置交換信息庫之間的信息處理和穩(wěn)定可靠、不間斷的信息傳遞

和數(shù)據(jù)同步。

JOB管理模塊

實(shí)現(xiàn)對【數(shù)據(jù)傳輸模塊】交換過程的流程配置、部署、執(zhí)行

和整個信息交換系統(tǒng)運(yùn)行進(jìn)行監(jiān)控、管理,包括交換流程管理、

交換監(jiān)控和管理。

抽取組件模塊

根據(jù)【數(shù)據(jù)傳輸模塊】配置整合及訂閱流程過程中,針對各

個流程、字段選擇不同的組件處理方式,將需要處理和轉(zhuǎn)換的字

段根據(jù)指定格式進(jìn)行動態(tài)轉(zhuǎn)換。

12

上游配置模塊

為【數(shù)據(jù)傳輸模塊】提供數(shù)據(jù)采集數(shù)據(jù)源。

數(shù)據(jù)服務(wù)模塊

服務(wù)模塊的主要產(chǎn)出物。使用方通過訂閱模式訂閱關(guān)注的資

源,當(dāng)資源同步到交換中心后,再通過中心將資源發(fā)送到資源的

訂閱者。

模塊關(guān)系如下圖所示:

上游配置

數(shù)據(jù)源配置數(shù)據(jù)元標(biāo)準(zhǔn)存儲適配

源配置目標(biāo)配置對標(biāo)工具前置適配中心適配

抽取組件數(shù)據(jù)傳輸JOB管理

抽取/交換策略配置傳輸安全適阻;數(shù)據(jù)同步前置節(jié)點(diǎn)管理JOB管理

去重組年組咋組全量組周期交手動交加密/打包/前置機(jī)數(shù)

件件換組件換組件解密解包據(jù)同步JOB監(jiān)控

元數(shù)據(jù)記錄中心數(shù)據(jù)監(jiān)聽

數(shù)據(jù)服務(wù)

交換數(shù)據(jù)訂閱

數(shù)據(jù)共享交換平臺功能結(jié)構(gòu)圖

3.1.2運(yùn)行設(shè)計(jì)

>運(yùn)行模塊的組合

【統(tǒng)計(jì)局】需求【農(nóng)業(yè)局】、【糧食局】數(shù)據(jù)。

13

>運(yùn)行描述

業(yè)務(wù)數(shù)據(jù)的獲取由適配器與業(yè)務(wù)系統(tǒng)共同完成,由資源擁有

方的系統(tǒng)管理員完成所需的配置。系統(tǒng)中各種數(shù)據(jù)采集適配器針

對需要采集的數(shù)據(jù)進(jìn)行實(shí)時采集、監(jiān)聽

(1)統(tǒng)計(jì)局根據(jù)需求確定自己所需數(shù)據(jù)。

(2)通過資源配置模塊建立統(tǒng)計(jì)局和農(nóng)業(yè)局資源庫信息。

(3)交換節(jié)點(diǎn)的網(wǎng)絡(luò)與中心網(wǎng)絡(luò)并非全時段互聯(lián)互動,只有

固定時段才能連通網(wǎng)絡(luò),此時適配器仍然正常工作,并采集各個

應(yīng)用單位共享數(shù)據(jù)的增量數(shù)據(jù)保存至前置交換庫中,并實(shí)時將增

量數(shù)據(jù)采集并提交至交換系統(tǒng)參與交換流程。

(4)交換過程中非需求數(shù)據(jù)根據(jù)清洗接口組件去除,并實(shí)時

監(jiān)聽去除數(shù)據(jù)條數(shù)。

(5)配置完成交換規(guī)則后進(jìn)行JOB化操作。

14

(6)提供消息確認(rèn)和消息選擇性重發(fā)機(jī)制以實(shí)現(xiàn)前置交換子

系統(tǒng)之間可靠的信息傳遞功能,實(shí)現(xiàn)交換信息內(nèi)容的“不丟、不

錯、不重”進(jìn)行數(shù)據(jù)傳送。

3.1.3出錯處理設(shè)計(jì)

>出錯輸出信息

錯誤類型說明:

DC_M100INP頁面表單驗(yàn)證

DC_M!OOCON后臺連接錯誤

DC_M1000P業(yè)務(wù)校驗(yàn)錯誤

出錯輸出信息表

序號錯誤標(biāo)題輸出信息錯誤類型

1主機(jī)名稱輸主機(jī)IP地址輸入錯DC_MI01INP

入錯誤誤

2端口名輸入端口格式輸入錯誤DC_MI02INP

錯誤

3用戶名輸入用戶名格式錯誤DC_MI03INP

錯誤

4密碼輸入錯密碼格式錯誤DC_MI04INP

5增量范圍設(shè)增量區(qū)間設(shè)置超出DC_MI05INP

置異常范圍。

6測試數(shù)據(jù)庫數(shù)據(jù)庫連接出錯,請DC_MI01CON

15

連接錯誤聯(lián)系系統(tǒng)管理員

7網(wǎng)絡(luò)連接不網(wǎng)絡(luò)無法連接,請聯(lián)DC_MI02CON

通系系統(tǒng)管理員

8建立數(shù)據(jù)轉(zhuǎn)由于XXX原因,建立DC_MI01OP

換流程失敗數(shù)據(jù)轉(zhuǎn)換流程失敗。

9刪除數(shù)據(jù)轉(zhuǎn)由于XXX原因,刪除DC_MI02OP

換流程失敗數(shù)據(jù)轉(zhuǎn)換流程失敗。

10修改數(shù)據(jù)轉(zhuǎn)由于XXX原因,修改DC_MI03OP

換流程失敗數(shù)據(jù)轉(zhuǎn)換流程失敗。

11定時任務(wù)執(zhí)XXX定時任務(wù)執(zhí)行異DC_MI04OP

行異常常。

12去重組件執(zhí)XXXJOB執(zhí)行清洗組DC_MI05OP

行異常件異常。

13新建JOB錯JOB創(chuàng)建失敗。DC_MI06OP

誤。

14刪除JOB錯JOB刪除失敗。DC_MI07OP

誤。

15執(zhí)行JOB錯JOB運(yùn)行失敗。DC_MI08OP

誤。

>出錯處理對策

出錯處理對策表

序號錯誤標(biāo)題處理對策

16

1主機(jī)名稱輸入錯誤主機(jī)名稱輸入框變成紅色警示狀

態(tài),光標(biāo)定位在相應(yīng)的數(shù)據(jù)項(xiàng)錄入

處。

2端口名輸入錯誤主機(jī)名稱輸入框變成紅色警示狀

態(tài),光標(biāo)定位在相應(yīng)的數(shù)據(jù)項(xiàng)錄入

處。

3用戶名輸入錯誤主機(jī)名稱輸入框變成紅色警示狀

態(tài),光標(biāo)定位在相應(yīng)的數(shù)據(jù)項(xiàng)錄入

處。

4密碼輸入錯誤主機(jī)名稱輸入框變成紅色警示狀

態(tài),光標(biāo)定位在相應(yīng)的數(shù)據(jù)項(xiàng)錄入

處。

5測試數(shù)據(jù)庫連接嘗試多次連接數(shù)據(jù)庫。

6網(wǎng)絡(luò)連接不通提示客戶檢查網(wǎng)路連接設(shè)備。

7建立數(shù)據(jù)轉(zhuǎn)換流程失根據(jù)情況不同返回當(dāng)前頁或提示

敗用戶解決方案。

8刪除數(shù)據(jù)轉(zhuǎn)換流程失不做處理。

9修改數(shù)據(jù)轉(zhuǎn)換流程失根據(jù)情況不同返回當(dāng)前頁或提示

敗用戶解決方案。

10增量范圍設(shè)置異常生成參考格式數(shù)據(jù)。

11定時任務(wù)執(zhí)行異常嘗試重新啟動。

17

12去重組件執(zhí)行異?;貪L之前數(shù)據(jù),重新執(zhí)行。

13新建JOB錯誤。返回當(dāng)前頁面、不做處理。

14刪除JOB錯誤。返回當(dāng)前頁面、不做處理。

15執(zhí)行JOB錯誤。返回當(dāng)前頁面、不做處理。

3.1.4功能模塊設(shè)計(jì)

序號功能模塊子模塊功能描述

數(shù)據(jù)交換系統(tǒng)的作用在于以一種新

的體系架構(gòu)實(shí)現(xiàn)公共信息的統(tǒng)一交

1

換,通過交換實(shí)現(xiàn)數(shù)據(jù)共享交換平

臺數(shù)據(jù)的同步和共享

前置子系統(tǒng)作為整個交換系統(tǒng)的交

前置子模換端,負(fù)責(zé)與業(yè)務(wù)系統(tǒng)適配,支持

1.1

塊應(yīng)用單位業(yè)務(wù)信息庫與交換中心之

間的信息雙向交換

傳輸子系統(tǒng)是一個黑盒的數(shù)據(jù)傳輸

系統(tǒng),負(fù)責(zé)實(shí)現(xiàn)信息的安全、可靠、

傳輸子模

1.2穩(wěn)定、高效的信息交換,實(shí)現(xiàn)信息

的打包、轉(zhuǎn)換、傳遞、路由、解包

等功能

數(shù)據(jù)交換服務(wù)

1.3中心處理中心處理子系統(tǒng)是數(shù)據(jù)共享交換平

18

子模塊臺的中心數(shù)據(jù)處理模塊,負(fù)責(zé)交換

數(shù)據(jù)的處理、交換數(shù)據(jù)的整合、數(shù)

據(jù)共享交換平臺中心文件服務(wù)、數(shù)

據(jù)轉(zhuǎn)換以及組件處理等工作

數(shù)據(jù)采集采用ETL策略,蜂巢系統(tǒng)

進(jìn)行實(shí)施;數(shù)據(jù)采集模塊采用集群

2

(C/S)方式實(shí)現(xiàn),主服務(wù)器要對每

數(shù)據(jù)采集實(shí)現(xiàn)

一個節(jié)點(diǎn)進(jìn)行管理

調(diào)度與監(jiān)控,分為中心調(diào)度監(jiān)控和

節(jié)點(diǎn)調(diào)度監(jiān)控;中心控制整個網(wǎng)絡(luò)

3

系統(tǒng);節(jié)點(diǎn)僅僅控制自身的采集任

調(diào)度與監(jiān)控

務(wù)與調(diào)度

大文件傳輸平臺用于實(shí)現(xiàn)委辦局到

基礎(chǔ)數(shù)據(jù)庫之間的文件傳輸,平臺

生主要用于工作文件、視音頻文件、

圖片等多種文件,并提供傳輸管理

文件傳輸

功能

采集任務(wù)如果失敗,可以重啟操作

5任務(wù)失敗處理

根據(jù)需求通過頁面可視化配置清洗

6清洗模塊配置

規(guī)則,完成規(guī)整化處理

19

對采集過程中無效空數(shù)據(jù)、重復(fù)數(shù)

7清洗自動效驗(yàn)

據(jù)自動過濾

對數(shù)據(jù)源和目標(biāo)數(shù)據(jù)兩段的數(shù)據(jù)規(guī)

范進(jìn)行核對,例如(字段名稱,字

8

段類型,字段長度等)保證兩端的

結(jié)果數(shù)據(jù)對標(biāo)

一致性

對清洗過程跟蹤。根據(jù)各個清洗規(guī)

9:則組件,實(shí)現(xiàn)可插拔的頁面可視化

元數(shù)據(jù)記錄

配置

前端數(shù)據(jù)庫、中心數(shù)據(jù)庫、節(jié)點(diǎn)數(shù)

10據(jù)庫可以按照各種關(guān)系型數(shù)據(jù)庫存

數(shù)據(jù)庫適配存儲

實(shí)現(xiàn)前置機(jī)目錄結(jié)構(gòu)和其他節(jié)點(diǎn)同

11前置目錄同步

可視化頁面監(jiān)控前置節(jié)點(diǎn)的活動狀

12態(tài),對各節(jié)點(diǎn)的啟、停、故障等進(jìn)

前置節(jié)點(diǎn)管理

行監(jiān)控

頁面可以使用編輯、運(yùn)行、停止、

數(shù)據(jù)交換任務(wù)控

13等,對定制完備的采集策略進(jìn)行控

對于不同的網(wǎng)絡(luò)結(jié)構(gòu),采取與業(yè)務(wù)

14

網(wǎng)路結(jié)構(gòu)與解決系統(tǒng)松耦合的數(shù)據(jù)采集策略;可以

20

方案在節(jié)點(diǎn)與數(shù)據(jù)中心之間以通信服務(wù)

器(前置機(jī))的方式進(jìn)行解決

數(shù)據(jù)中心接受FTP方式的數(shù)據(jù)上傳,

FTP方式定義多

15但是所有以FTP方式上傳的數(shù)據(jù)結(jié)

格式數(shù)據(jù)

構(gòu)必須在數(shù)據(jù)字典中已經(jīng)定義確認(rèn)

通過頁面以目錄樹為級別導(dǎo)出該目

16交換數(shù)據(jù)訂閱錄下的數(shù)據(jù)和數(shù)據(jù)結(jié)構(gòu)。文件格式

可以是文檔、PDF、Json等形式

數(shù)據(jù)存儲采用關(guān)系型數(shù)據(jù)庫實(shí)現(xiàn);

17應(yīng)用層以關(guān)系數(shù)據(jù)庫實(shí)現(xiàn)數(shù)據(jù)倉庫

數(shù)據(jù)存儲平臺

的星型數(shù)據(jù)結(jié)構(gòu)

邏輯模型是每一個數(shù)據(jù)結(jié)構(gòu)展現(xiàn)的

基本數(shù)據(jù)模塊,邏輯模型主要定義

1ft

基于數(shù)據(jù)展現(xiàn)的多個數(shù)據(jù)結(jié)構(gòu)之間

邏輯模型

的關(guān)系

數(shù)據(jù)交換,雙方通過平臺達(dá)成共識

19的權(quán)限后,互相開放特定的數(shù)據(jù)瀏

數(shù)據(jù)交換

覽、下載使用權(quán)限

3.2信息資源目錄設(shè)計(jì)

目錄管理與服務(wù)系統(tǒng)包括信息資源目錄子系統(tǒng)和信息資源編

21

目管理子系統(tǒng)。目錄子系統(tǒng)的建設(shè),以目錄方式實(shí)現(xiàn)資源共享,

是公共信息平臺實(shí)現(xiàn)信息資源共享的有效手段,使用目錄體系可

以以更靈活的方式實(shí)現(xiàn)更多應(yīng)用單位、更多資源的接入與共享。

編目管理子系統(tǒng)作為公共服務(wù)平臺信息資源目錄體系的載體,

采用一種非落地的信息共享模式,是對交換共享模式的補(bǔ)充。在

目錄式共享中,各應(yīng)用單位對各自共享的資源有完整的控制權(quán),

可有效地解決交換模式中各應(yīng)用單位因擔(dān)心違反相關(guān)規(guī)定而不

愿意批量提供數(shù)據(jù)的問題。

3.2.1模塊結(jié)構(gòu)與功能關(guān)系設(shè)計(jì)

功能業(yè)務(wù)描述:系統(tǒng)包括五個模塊,分別是目錄編制、目

錄管理、目錄審核、系統(tǒng)管理和目錄訂閱。五個模塊之間存

在一定的依賴和調(diào)用關(guān)系,可參考下面的設(shè)計(jì)圖。目錄編制

模塊依賴系統(tǒng)管理模塊提供的資源標(biāo)識符、資源分類和元數(shù)

據(jù)管理的相關(guān)功能,目錄編制完成之后進(jìn)入目錄管理模塊,

在目錄管理模塊進(jìn)行相關(guān)的狀態(tài)操作,如發(fā)布,撤回,升級

和下架等,同時依賴目錄審核模塊提供的審核功能,通過審

核的目錄才能發(fā)布和進(jìn)行后續(xù)操作。被發(fā)布的目錄可以被目

錄訂閱模塊獲取,在此模塊被訂閱,實(shí)現(xiàn)對編目資源的訪問。

目錄訂閱也依賴目錄審核模塊,表現(xiàn)為兩點(diǎn):1.在目錄訂閱模

塊申請的訂閱,需要在目錄審核模塊進(jìn)行審核,通過審核的

訂閱的才能生效,向下執(zhí)行;2.當(dāng)前用戶不具備訪問某個目錄

22

的權(quán)限時,可以通過申請?zhí)厥鈾?quán)限,獲取一定時間區(qū)間中訂

閱權(quán)限,申請?zhí)厥鈾?quán)限需要在目錄審核模塊中進(jìn)行審核,通

過審核的特殊權(quán)限申請才能生效,向下執(zhí)行,最終實(shí)現(xiàn)訂閱。

3.2.2運(yùn)行設(shè)計(jì)

>運(yùn)行模塊的組合

(1)目錄編制

(2)目錄訂閱

23

>運(yùn)行流程

系統(tǒng)的核心功能為目錄編制和目錄訂閱,目錄編制指目錄資

源擁有單位(作為資源持有者)為本單位指定資源進(jìn)行編目,并

發(fā)布至系統(tǒng)的過程;目錄訂閱指應(yīng)用單位(作為資源訪問者)通

過本系統(tǒng)獲取已經(jīng)發(fā)布的資源的過程。

(1)目錄資源擁有單位有資源發(fā)布需求,進(jìn)入目錄編制模塊,

完成該目錄的核心信息、資源信息和授權(quán)信息的填寫,提交該目

錄;單位主管在目錄審核模塊對該目錄進(jìn)行審核;通過審核的目

錄在目錄管理模塊被發(fā)布后,即可被其它授權(quán)應(yīng)用單位訂閱。

(2)應(yīng)用單位有訪問系統(tǒng)中非本單位資源的需求,進(jìn)入目錄訂

閱模塊,填寫訂閱信息,申請訂閱;該資源責(zé)任人在目錄審核模

塊對本次訂閱進(jìn)行審批;通過審核的訂閱,向其它系統(tǒng)發(fā)出訂閱

信息,實(shí)現(xiàn)對訂閱資源的訪問。如果應(yīng)用單位不具備訪問該資源

的權(quán)限,則需要先在目錄訂閱模塊申請?zhí)厥鈾?quán)限;該資源責(zé)任人

在目錄審核模塊對本次權(quán)限申請進(jìn)行審批;通過審核的申請,將

24

讓該用戶獲取訂閱權(quán)限。

3.2.3出錯處理設(shè)計(jì)

>出錯輸出信息

錯誤類型說明:

RC_M100INP頁面表單驗(yàn)證

RC_M100CON后臺連接錯誤

RC_M1000P業(yè)務(wù)校驗(yàn)錯誤

出錯輸出信息表

序號錯誤標(biāo)題輸出信息錯誤類型

RC_MIOOINP

1用戶名或密碼錯用戶名或密碼錯誤

RC_MIOOINP

2數(shù)據(jù)不在設(shè)定范****的********

圍內(nèi)之間

RC_MIOOINP

3數(shù)據(jù)未輸入****必須輸入

RC_MIOOOP

4重復(fù)訂閱您已訂閱該資源

RC_MIOOCON

5網(wǎng)絡(luò)不通網(wǎng)絡(luò)無法連接,請聯(lián)系系

統(tǒng)管理員

RC_MIOOOP

6未選取請選擇***

RC_MIOOOP

7選取多項(xiàng)請選擇一項(xiàng)***

>出錯處理對策

出錯處理對策表

25

序號錯誤標(biāo)題處理對策

1數(shù)據(jù)不在設(shè)定范圍內(nèi)流程停在錄入界面,光標(biāo)定位在相

應(yīng)的數(shù)據(jù)項(xiàng)錄入處

2數(shù)據(jù)未輸入流程停在錄入界面,光標(biāo)定位在相

應(yīng)的數(shù)據(jù)項(xiàng)錄入處

3重復(fù)訂閱流程停在錄入界面,光標(biāo)定位在相

應(yīng)的數(shù)據(jù)項(xiàng)錄入處

4網(wǎng)絡(luò)不通

5未選取流程停在錄入界面,光標(biāo)定位在相

應(yīng)的數(shù)據(jù)項(xiàng)錄入處

6選取多項(xiàng)流程停在錄入界面,光標(biāo)定位在相

應(yīng)的數(shù)據(jù)項(xiàng)錄入處

3.2.4功能模塊設(shè)計(jì)

功能描述

號功能模塊

包括資源標(biāo)識符結(jié)構(gòu)管理、資源標(biāo)識符應(yīng)用

資源標(biāo)識符

1單位配置、應(yīng)用單位標(biāo)識符中心配置、核心

管理

元數(shù)據(jù)定義等功能。

編目子系統(tǒng)的核心元數(shù)據(jù)定義提供對核心

2元數(shù)據(jù)定義

元數(shù)據(jù)的定義管理,包括核心元數(shù)據(jù)查詢、

26

添加、編輯和刪除功能,同時提供核心元數(shù)

據(jù)詳細(xì)信息查看的功能。

目錄發(fā)布主要提供在編目中心已注冊的目

錄的發(fā)布功能(支持批量),在發(fā)布時可指定

允許訪問資源或目錄的應(yīng)用單位列表,以及

3目錄發(fā)布

資源訪問權(quán)限要求,通過發(fā)布目錄,可以將

前置目錄發(fā)布到全市統(tǒng)一的門戶中供各級

應(yīng)用單位進(jìn)行檢索、查看和申請。

針對無效的目錄或需要進(jìn)行下線的目錄信

息,系統(tǒng)提供目錄撤消的功能,該功能可對

4目錄撤消

已發(fā)布的目錄進(jìn)行撤消和下線,目錄撤消后

可重新進(jìn)入發(fā)布流程。

提供目錄驅(qū)動交換功能,資源使用方通過目

錄方式獲取資源信息后,通過平臺提供的申

請流程向平臺管理者與資源擁有方進(jìn)行申

請,得到管理者與資源擁有方同意后,由平

交換互動(訂

5臺自動開始按配置的規(guī)則進(jìn)行信息資源的

閱)

交換與共享。目錄系統(tǒng)提供數(shù)據(jù)交換驅(qū)動

入口,調(diào)用對交換系統(tǒng)提供的相關(guān)接口,實(shí)

現(xiàn)與交換系統(tǒng)的互聯(lián)互通,并能對交換系統(tǒng)

業(yè)務(wù)數(shù)據(jù)及各類服務(wù)提供資源編目功能。

6查詢統(tǒng)計(jì)查詢統(tǒng)計(jì)功能提供服務(wù)狀態(tài)的統(tǒng)計(jì),如目錄

27

評價、訪問量統(tǒng)計(jì)等信息,目錄評價主要提

供各應(yīng)用單位對已發(fā)布目錄的評價信息查

詢功能,訪問量統(tǒng)計(jì)能夠根據(jù)各應(yīng)用單位對

該目錄的瀏覽數(shù)量進(jìn)行統(tǒng)計(jì)。過程信息查詢

提供目錄在編目中心的過程信息記錄。

在發(fā)布時可指定允許訪問資源或目錄的應(yīng)

用單位列表及資源訪問權(quán)限要求,只有被

允許的單位或個人才能訪問特定的資源。當(dāng)

特殊權(quán)限申出現(xiàn)特殊原因或業(yè)務(wù)需要,某些單位和個人

7

請希望在某個時間段內(nèi)訪問原先不能訪問的

資源時,可使用特殊權(quán)限審批功能,通過流

程化管理,可在指定的時間段內(nèi)暫時開放資

源及目錄的訪問權(quán)限。

目錄編制包含結(jié)構(gòu)化編目和非結(jié)構(gòu)化編目,

兩種編目均可在前置環(huán)境中進(jìn)行。結(jié)構(gòu)化數(shù)

據(jù)編目,編目系統(tǒng)提供對異構(gòu)數(shù)據(jù)庫等結(jié)構(gòu)

化數(shù)據(jù)進(jìn)行手工或自動編目,支持主流關(guān)系

8目錄編制型數(shù)據(jù)庫,包括Oracle、DB2、MSSQL、

MYSQL等異構(gòu)數(shù)據(jù)庫。除了可以對數(shù)據(jù)

庫等結(jié)構(gòu)化數(shù)據(jù)進(jìn)行編目外,也可以對非結(jié)

構(gòu)化的數(shù)據(jù)進(jìn)行編目,如文件、圖片、視頻

等進(jìn)行編目,通過文件交換系統(tǒng)實(shí)現(xiàn)文件的

28

共享服務(wù)。

提供前置編目信息的查詢服務(wù),支持快速查

詢和自定義查詢,可以通過資源標(biāo)示符、資

源名稱、關(guān)鍵字、分類方式、編目日期等多

9目錄查詢

種條件進(jìn)行查詢,并支持查詢結(jié)果的目錄詳

細(xì)信息查看,從而讓用戶快速定位信息資源

位置。

提供前置編目信息提交至平臺中心的服務(wù),

編目信息經(jīng)過提交后,在編目中心等待審核

10目錄提交人員進(jìn)行審批,并最終發(fā)布。提供編目信息

批量發(fā)布功能,并能夠查詢已提交的編目信

息。

編目信息審核主要提供給編目前置管理員

使用,編目信息經(jīng)審核后方能向編目中心提

11目錄審核

交,在編目信息審核后可以進(jìn)行該條編目信

息的查看。

目錄管理提供編目信息的修改和刪除功能,

前置編目人員可以對編目的信息進(jìn)行修改,

包括編目信息的核心元數(shù)據(jù)項(xiàng)、核心表數(shù)據(jù)

12目錄管理

項(xiàng)、字段數(shù)據(jù)項(xiàng)等內(nèi)容。修改完畢后,可以

對編目重新進(jìn)行提交、審核和注冊。同時,

前置編目人員也可以通過編目信息刪除的

29

方式刪除多余的編目信息。

目錄狀態(tài)同步主要提供平臺門戶與后臺數(shù)

據(jù)的手動同步功能,系統(tǒng)提供自動同步檢測

目錄狀態(tài)同

13的功能,能夠自動檢測目錄狀態(tài)不一致的狀

況,然后通過對相應(yīng)的編目數(shù)據(jù)進(jìn)行手工同

步,可實(shí)現(xiàn)目錄狀態(tài)的同步更新。

3.3數(shù)據(jù)管理平臺

平臺主要實(shí)現(xiàn)政府信息化及大數(shù)據(jù)應(yīng)用建設(shè)的需求,滿足一

個中心、四個庫的實(shí)施及其應(yīng)用,滿足政府采集、交換各部門數(shù)

據(jù),以及政府?dāng)?shù)據(jù)平臺公開等政府?dāng)?shù)據(jù)相關(guān)業(yè)務(wù)的需求;

3.3.1模塊結(jié)構(gòu)與功能關(guān)系

系統(tǒng)用戶層面:相關(guān)管理員可以對系統(tǒng)用戶及用戶行為安全

進(jìn)行相關(guān)管理與配置。具體體現(xiàn)為,系統(tǒng)管理-管理員可以對平

臺注冊機(jī)構(gòu)用戶權(quán)限及可訪問信息作管理;安全管理-配置平臺

用戶會話及身份,保證接入數(shù)據(jù)的安全訪問;

數(shù)據(jù)交換層面:相關(guān)管理人員可以對數(shù)據(jù)標(biāo)準(zhǔn),數(shù)據(jù)交換共

享過程中任意環(huán)節(jié)的管理與配置。具體體現(xiàn)為,標(biāo)準(zhǔn)管理-管理

數(shù)據(jù)接入過程中各種數(shù)據(jù)標(biāo)準(zhǔn)及元數(shù)據(jù)信息;數(shù)據(jù)管理-查看和

管理數(shù)據(jù)同步信息及數(shù)據(jù)整合模型;前置機(jī)管理-管理前置機(jī)相

關(guān)信息;質(zhì)檢管理-校驗(yàn)數(shù)據(jù)標(biāo)準(zhǔn)及其可用性配置;交換監(jiān)控-整

30

體把控整個交換過程,提供數(shù)據(jù)回溯,統(tǒng)計(jì)分析。

系統(tǒng)維護(hù)層面:運(yùn)維人員可以對系統(tǒng)的運(yùn)行進(jìn)行告警配置及

維護(hù)。體現(xiàn)為運(yùn)行監(jiān)控-對系統(tǒng)運(yùn)行中的一些基本信息的了解及

統(tǒng)計(jì)分析,便于運(yùn)維人員的巡檢;系統(tǒng)維護(hù)-維護(hù)系統(tǒng)相關(guān)基礎(chǔ)

信息及系統(tǒng)表創(chuàng)建等。

如圖所示:

系系統(tǒng)管理安全管理

統(tǒng)組織機(jī)構(gòu)管理統(tǒng)一身份認(rèn)證

用用戶管理單點(diǎn)登錄

戶權(quán)限管理密鑰管理

層字典表管理數(shù)據(jù)備份、還原

目錄權(quán)限管理數(shù)據(jù)安全保密授權(quán)管理

數(shù)標(biāo)準(zhǔn)管理

數(shù)

據(jù)數(shù)據(jù)管理

代碼管理前置機(jī)管理

據(jù)

管質(zhì)檢管理交換監(jiān)控

數(shù)據(jù)元管理概要信息

數(shù)據(jù)字典管理元數(shù)據(jù)信息數(shù)據(jù)來源元數(shù)據(jù)管理

核心模型管理同步信息數(shù)據(jù)變遷元數(shù)據(jù)管理切換數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)回溯

領(lǐng)域瑛型管理記錄瀏覽信息資源元數(shù)據(jù)管理質(zhì)量管理交換過程監(jiān)控

庫體結(jié)構(gòu)管理整合模型系統(tǒng)運(yùn)行元數(shù)據(jù)管理數(shù)據(jù)質(zhì)檢統(tǒng)計(jì)分析

系運(yùn)行監(jiān)控系統(tǒng)維護(hù)

統(tǒng)應(yīng)用啟停訪問統(tǒng)計(jì)系統(tǒng)日志管理

維運(yùn)行報告運(yùn)行狀態(tài)監(jiān)控標(biāo)準(zhǔn)規(guī)范導(dǎo)入與導(dǎo)出

護(hù)故障預(yù)警運(yùn)行平臺性能監(jiān)控?cái)?shù)據(jù)統(tǒng)計(jì)工具

故障巡松郵件接口系統(tǒng)表創(chuàng)建工具

數(shù)據(jù)管理平臺功能結(jié)構(gòu)圖

3.3.2運(yùn)行設(shè)計(jì)

>運(yùn)行模塊的組合

運(yùn)行監(jiān)控中對服務(wù)、硬件、數(shù)據(jù)庫監(jiān)控的流程控制

如圖所示:

31

數(shù)據(jù)管理平臺流程控制圖

Web用戶登錄、注冊、修改用戶信息和退出

如圖所示:

32

注冊信息遠(yuǎn)程用戶登錄模塊

注冊信息「

(Ml.1.1)

V/

吧嘴制模塊一用戶信息.

ORACLE

Web用戶

用戶信息Web用戶修改用戶信

息模塊用戶信息」

(Ml.1.9)

退出指令>Web用戶退出模塊

(ML1.10)

數(shù)據(jù)管理平臺登錄退出圖

(3)數(shù)據(jù)元、模型管理、庫體結(jié)構(gòu)管理

如圖所示:

標(biāo)準(zhǔn)管理功能結(jié)構(gòu)圖

(4)代碼標(biāo)準(zhǔn)管理

33

如圖所示:

標(biāo)準(zhǔn)管理代碼標(biāo)準(zhǔn)功能結(jié)構(gòu)圖

⑸數(shù)據(jù)字典管理

如圖所示:

加載代碼

標(biāo)準(zhǔn)列表,代碼標(biāo)準(zhǔn)代碼標(biāo)準(zhǔn)信息

代碼標(biāo)準(zhǔn)

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論