集團(tuán)大數(shù)據(jù)平臺項目實(shí)施整體方案

1、集團(tuán)大數(shù)據(jù)平臺工程實(shí)施整體方案1.1 工程實(shí)施總體目標(biāo)我方承諾根據(jù)集團(tuán)集團(tuán)公司對工程建設(shè)的要求,認(rèn)真研 究調(diào)研,制定切實(shí)有效的實(shí)施方案,并根據(jù)實(shí)際情況,提交 相應(yīng)實(shí)施方案文檔,其中技術(shù)文檔內(nèi)容主要包括工程需求分 析文檔、系統(tǒng)設(shè)計及技術(shù)文檔、開發(fā)測試及部署規(guī)劃、試點(diǎn) 及系統(tǒng)上線規(guī)劃及具體內(nèi)容等.治理文檔主要包括人員及組 織治理、環(huán)境及資源需求方案、設(shè)備規(guī)劃及使用、工程進(jìn)度 方案及里程碑治理、過程質(zhì)量及風(fēng)險限制方案以及培訓(xùn)交接 方案等.我方將根據(jù)工程進(jìn)度,及時分配調(diào)度充足人員入場,在 甲方監(jiān)督下,在符合相關(guān)監(jiān)管部門的審計制度和集團(tuán)內(nèi)控審 計要求的前提下,根據(jù)甲方工程實(shí)施方案及進(jìn)度要求,完成 大數(shù)據(jù)

2、平臺的搭建、應(yīng)用開發(fā)、聯(lián)調(diào)測試、集成部署和培訓(xùn) 等方面的工作.1.2 工程治理工程治理由我方工程經(jīng)理以及集團(tuán)工程經(jīng)理在所方案實(shí)施的工程過程中執(zhí)行.工作范圍確定工程方案、進(jìn)行工程方案限制；監(jiān)控工程狀態(tài)、產(chǎn)生定期的工程狀態(tài)報告；負(fù)責(zé)工程期間的溝通治理,召集并主持定期的工程狀況會議；對工程范圍、本錢、風(fēng)險、人力、干系人等進(jìn)行全過程的管控；其它與工程相關(guān)的事務(wù).我方的責(zé)任負(fù)責(zé)與本公司內(nèi)部有關(guān)的協(xié)調(diào)工作；負(fù)責(zé)與集團(tuán)的工程經(jīng)理合作,共同負(fù)責(zé)工程中的協(xié)調(diào)工作；與集團(tuán)的工程經(jīng)理協(xié)調(diào)配合, 完成以上工程治理工作.集團(tuán)的責(zé)任負(fù)責(zé)與本公司內(nèi)部有關(guān)的協(xié)調(diào)工作；負(fù)責(zé)與我方的工程經(jīng)理合作,共同負(fù)責(zé)工程中的協(xié)調(diào)工作；與我方

3、的工程經(jīng)理協(xié)調(diào)配合, 完成以上工程治理工作.1.3 業(yè)務(wù)確認(rèn)工作范圍業(yè)務(wù)需求確認(rèn),對大數(shù)據(jù)平臺的業(yè)務(wù)需求結(jié)合當(dāng)前實(shí) 際業(yè)務(wù)情況進(jìn)行確認(rèn).工作完成后需提交的結(jié)果集團(tuán)大數(shù)據(jù)平臺需求列表我方的責(zé)任指定相關(guān)業(yè)務(wù)/技術(shù)參謀和用戶的相關(guān)業(yè)務(wù)部門進(jìn)行 業(yè)務(wù)確認(rèn)、分析執(zhí)行以上陳述的工作,并提交階段性工作結(jié)果集團(tuán)的責(zé)任指定參與業(yè)務(wù)需求確認(rèn)的工程組和業(yè)務(wù)部門的相關(guān)人 員協(xié)調(diào)業(yè)務(wù)需求確認(rèn)確認(rèn)過程中的業(yè)務(wù)人員、時間安排 等有關(guān)事項對集團(tuán)大數(shù)據(jù)平臺業(yè)務(wù)需求列表進(jìn)行確認(rèn)1.4 數(shù)據(jù)調(diào)研工作范圍分析集團(tuán)大數(shù)據(jù)平臺需求列表,調(diào)查集團(tuán)該期工程相 關(guān)數(shù)據(jù)源情況,確定功能需求列表并編制功能規(guī)格說 明書,分析數(shù)據(jù)工作完成后需提交的結(jié)

4、果集團(tuán)大數(shù)據(jù)平臺功能列表集團(tuán)大數(shù)據(jù)平臺需求功能規(guī)格說明書我方的責(zé)任進(jìn)行集團(tuán)大數(shù)據(jù)平臺系統(tǒng)需求說明書和數(shù)據(jù)源信息的 分析,確定功能需求列表,編制需求功能規(guī)格說明書提交功能需求列表、需求功能規(guī)格說明書集團(tuán)的責(zé)任指定參與需求分析、數(shù)據(jù)源分析的工程組和業(yè)務(wù)部門 的相關(guān)人員協(xié)調(diào)需求分析與數(shù)據(jù)調(diào)研過程中的業(yè)務(wù)人員、時間安 排等有關(guān)事項提供進(jìn)行數(shù)據(jù)源分析的相關(guān)信息簽署最后形成的功能需求列表 根據(jù)需要,決定是否進(jìn)行并組織評審?集團(tuán)大數(shù)據(jù)平臺需求功能規(guī)格說明書?1.5系統(tǒng)設(shè)計階段我方將配合甲方完成系統(tǒng)設(shè)計階段的調(diào)研、座談及總結(jié) 工作,根據(jù)甲方要求認(rèn)真做好需求分析工作、系統(tǒng)設(shè)計工作、模型設(shè)計工作等,尤其對于量收系

5、統(tǒng)進(jìn)行權(quán)限細(xì)致的摸查和 匯總,梳理系統(tǒng)各項應(yīng)用及與其它系統(tǒng)接口,編寫應(yīng)用說明 及接口標(biāo)準(zhǔn),形成完整可行的遷移方案,將各方面工作內(nèi)容 形成文檔或標(biāo)準(zhǔn),提交甲方.工作范圍：對量收系統(tǒng)進(jìn)行詳細(xì)摸查梳理；制定量收系統(tǒng)遷移部署方案；根據(jù)甲方業(yè)務(wù)需求和以往的經(jīng)驗(yàn),設(shè)計邏輯數(shù)據(jù)模型(LDM );提交系統(tǒng)邏輯數(shù)據(jù)模型 Erwin文件；進(jìn)行邏輯數(shù)據(jù)模型的維護(hù)治理；基于所設(shè)計的邏輯數(shù)據(jù)模型,對物理數(shù)據(jù)模型進(jìn)行設(shè)計；提交系統(tǒng)物理數(shù)據(jù)模型 Erwin文件；進(jìn)行相關(guān)知識、技術(shù)的轉(zhuǎn)移；進(jìn)行物理數(shù)據(jù)模型維護(hù)；根據(jù)業(yè)務(wù)需求,進(jìn)行系統(tǒng)功能概要設(shè)計和詳細(xì)設(shè)計；提交概要設(shè)計說明書；提交詳細(xì)設(shè)計說明書;1.6 集成部署階段我方將根據(jù)

6、需求及實(shí)際情況,完成軟硬件集成方案的編 寫并完成實(shí)施部署工作.工作范圍：提供軟硬件必要的選型測試及選型方案建議；編寫軟硬件集成及網(wǎng)絡(luò)配置方案；對甲方采購的系統(tǒng)軟硬件提供現(xiàn)場安裝調(diào)試效勞；對自有軟件提供安裝介質(zhì)和授權(quán)許可證；1.7 ETL過程設(shè)計工作范圍1本期工程所涉及的來自各業(yè)務(wù)系統(tǒng)的數(shù)據(jù)抽取由各業(yè)務(wù)系統(tǒng)開發(fā)方負(fù)責(zé)之后、為進(jìn)行數(shù)據(jù)清洗、 轉(zhuǎn)換、質(zhì)量檢查、數(shù)據(jù)歸并、加載等所必需的技術(shù)設(shè)計.2大數(shù)據(jù)平臺數(shù)據(jù)加工規(guī)那么整理與確認(rèn)3進(jìn)行源數(shù)據(jù)到物理表的映射4設(shè)計數(shù)據(jù)轉(zhuǎn)換與加載的標(biāo)準(zhǔn),包括加載流程.5設(shè)計ETL治理過程工作完成后需提交的結(jié)果ETL設(shè)計文檔包括數(shù)據(jù)清洗、轉(zhuǎn)換、加載流程與加 載程序設(shè)計等內(nèi)容

7、我方的責(zé)任大數(shù)據(jù)平臺數(shù)據(jù)加工規(guī)那么整理與確認(rèn)設(shè)計來自各業(yè)務(wù)系統(tǒng)、其它數(shù)據(jù)源的數(shù)據(jù)的轉(zhuǎn)換與加 載標(biāo)準(zhǔn),包括加載流程.設(shè)計ETL治理過程集團(tuán)的責(zé)任協(xié)助設(shè)計數(shù)據(jù)的轉(zhuǎn)換與加載標(biāo)準(zhǔn),包括加載流程協(xié)助設(shè)計ETL治理過程1.8 ETL開發(fā)與測試工作范圍1本期工程所涉及的、來自各業(yè)務(wù)系統(tǒng)的業(yè)務(wù)數(shù)據(jù)從數(shù)據(jù) 源系統(tǒng)抽取之后、經(jīng)過清洗、轉(zhuǎn)換、質(zhì)量檢查、數(shù)據(jù)歸并、 加載所需要的開發(fā),以及其它數(shù)據(jù)加工和全國中央、省中央 功能所需要的后臺開發(fā)2加載治理流程開發(fā)3修改、調(diào)整和測試 ETL腳本工作完成后需提交的結(jié)果1全部ETL程序/腳本文件2加載有樣本數(shù)據(jù)的數(shù)據(jù)庫3 ETL流程治理限制我方的責(zé)任1執(zhí)行以上陳述的工作,提交階段

8、性工作結(jié)果2進(jìn)行有關(guān)ETL的知識轉(zhuǎn)移集團(tuán)的責(zé)任1按工程進(jìn)度要求負(fù)責(zé)從各數(shù)據(jù)源系統(tǒng)抽取并提供樣本數(shù)據(jù)ASCII代碼文本文件2協(xié)助并參與各業(yè)務(wù)系統(tǒng)抽取數(shù)據(jù)的質(zhì)量檢查3協(xié)助并參與對數(shù)據(jù)的轉(zhuǎn)換、加載標(biāo)準(zhǔn)的設(shè)計4協(xié)助并參與對數(shù)據(jù)的轉(zhuǎn)換、加載程序/腳本的開發(fā)5協(xié)助并參與對加載了樣本數(shù)據(jù)的數(shù)據(jù)庫進(jìn)行測試6配合進(jìn)行有關(guān)ETL的知識轉(zhuǎn)移7簽署工程實(shí)施文件1.9系統(tǒng)開發(fā)階段我方在工程實(shí)施中將依據(jù)需求及功能原型,采取快速迭 代開發(fā)法進(jìn)行系統(tǒng)開發(fā).并在甲方參與情況下,依據(jù)開發(fā)計 劃及里程碑節(jié)點(diǎn),對階段交付成果進(jìn)行審核和測試,識別由 與進(jìn)度方案及質(zhì)量方案的偏差并加以修改.開發(fā)過程及開發(fā)環(huán)境全程向甲方開放,便于雙方溝通交

9、 流,也便于工程技術(shù)、方法及成果向甲方人員移交工作范圍1根據(jù)系統(tǒng)功能需求列表、需求功能規(guī)格說明書開發(fā)相關(guān) 功能2定期審核、修改、調(diào)整和測試功能3提交全部功能的源代碼和可執(zhí)行代碼4進(jìn)行大數(shù)據(jù)平臺全部功能的開發(fā)和測試1.10系統(tǒng)測試階段在系統(tǒng)開發(fā)階段,我方將根據(jù)方案及實(shí)際進(jìn)度,合理安 排各階段軟件測試工作,包括功能測試、性能測試、集成測 試及驗(yàn)收測試等.在設(shè)計及實(shí)施和階段對于相應(yīng)測試提交測 試方案,規(guī)劃好測試范圍、參數(shù)、工具、測試方法、方案以 及異常處理方法等內(nèi)容,并在測試結(jié)束后提交包括測試方 法、時間、過程、結(jié)果及結(jié)論等在內(nèi)的測試報告.我方將根據(jù)ISO9000的相關(guān)標(biāo)準(zhǔn)向甲方提供以下系統(tǒng) 測試相

10、關(guān)文檔測試方案:測試方案由甲方和我方共同制定.包括：測試范圍、參數(shù)、測試方法、方案以及異常處理方法等.?系統(tǒng)測試方案?得到甲方同意方可執(zhí)行；測試設(shè)計：測試設(shè)計說明由測試員提供,為在工程設(shè)計階段定義的 軟件需求規(guī)定測試方法和步驟,規(guī)定測試采用的工具.?系 統(tǒng)測試方案?得到甲方同意方可執(zhí)行.測試實(shí)例及說明：測試實(shí)例及說明由測試員提供,主要是對每一個測試實(shí) 例規(guī)定輸入、預(yù)期結(jié)果和實(shí)施條件；測試報告：?測試報告?由測試員提供,包括測試方法、時間、過程、結(jié)果及結(jié)論等內(nèi)容,并要得到甲方確實(shí)認(rèn)；止匕外,整個系統(tǒng)測試過程中遵守以下規(guī)定：測試員按測試標(biāo)準(zhǔn)進(jìn)行測試,并把結(jié)果記錄在系統(tǒng)測試結(jié)果表中；當(dāng)修改軟件以解決

11、遇到的問題時,應(yīng)遵照變更限制的流程進(jìn)行；任何軟件問題被修改后,測試員和開發(fā)者合作制定下一輪測試方案,并確定哪些實(shí)例和規(guī)程將被重復(fù)； 當(dāng)所有的軟件問題均被解決后,對測試的結(jié)果進(jìn)行評審.1.11系統(tǒng)上線及驗(yàn)收由甲方和我方共同參與,組成工程驗(yàn)收小組,制定驗(yàn) 收細(xì)那么和驗(yàn)收方式,建立驗(yàn)收檔案,主要內(nèi)容包括驗(yàn)收內(nèi) 容、功能、測試結(jié)果、工程負(fù)責(zé)人、驗(yàn)收人等.如果奧項 功能或設(shè)備驗(yàn)收通過,工程負(fù)責(zé)人和驗(yàn)收人應(yīng)簽字認(rèn)可. 如果莫項功能或設(shè)備驗(yàn)收未通過,應(yīng)記錄下原因并且提由 整改舉措.依據(jù)合同的有關(guān)規(guī)定,對系統(tǒng)根據(jù)如下的步驟 實(shí)施驗(yàn)收：1我方自行組織完成功能、性能和壓力測試并通過.2我方提由系統(tǒng)驗(yàn)收申請.3制定

12、系統(tǒng)驗(yàn)收方案.4雙方成立系統(tǒng)驗(yàn)收小組.5進(jìn)行系統(tǒng)驗(yàn)收測試.6進(jìn)行系統(tǒng)初驗(yàn)評審.7形成系統(tǒng)初驗(yàn)報告.8產(chǎn)品移交.9試運(yùn)行.10進(jìn)行系統(tǒng)終驗(yàn)評審.系統(tǒng)驗(yàn)收:根據(jù)工程的方案要求,完成以下工作并經(jīng)過正式的系 統(tǒng)測試后,由我方向甲方遞交由甲方最終用戶簽字的上線 運(yùn)行證書,經(jīng)甲方認(rèn)可后,甲方即組織工程初步驗(yàn)收,并 形成初步驗(yàn)收報告,驗(yàn)收合格甲方提供系統(tǒng)初驗(yàn)合格證書:系統(tǒng)初驗(yàn)前的系統(tǒng)軟、非本合同相關(guān)硬件設(shè)施應(yīng)滿足 如下條件：1所有相關(guān)硬件設(shè)備包括：效勞器、存儲、網(wǎng)絡(luò)設(shè)備 安裝到位并投入使用.2所有軟件平臺安裝并運(yùn)行正常.3系統(tǒng)各物理模塊和邏輯模塊經(jīng)過測試運(yùn)行正常.4系統(tǒng)經(jīng)過集成測試并運(yùn)行正常.5系統(tǒng)經(jīng)過壓力

13、測試并運(yùn)行正常.6業(yè)務(wù)軟件和業(yè)務(wù)處理流程經(jīng)過用戶認(rèn)可.在系統(tǒng)進(jìn)行驗(yàn)收前,應(yīng)保證先提交以下文檔：7系統(tǒng)實(shí)施方案8業(yè)務(wù)需求列表9系統(tǒng)設(shè)計說明書11 物理模型12前端應(yīng)用設(shè)計說明書概要設(shè)計和詳細(xì)設(shè)計13工程模塊測試、集成測試、壓力測試報告14應(yīng)用系統(tǒng)測試報告15用戶手冊16培訓(xùn)手冊17工程治理文檔18用戶認(rèn)可報告.進(jìn)行驗(yàn)收主要觀察系統(tǒng)和應(yīng)用是否到達(dá)以下目標(biāo)或滿足下列標(biāo)準(zhǔn)：檢查工程是否到達(dá)合同及附件的各項指標(biāo)要求；根據(jù)技術(shù)標(biāo)準(zhǔn)、建設(shè)標(biāo)準(zhǔn),檢查各項技術(shù)指標(biāo)是否達(dá)到要求；對系統(tǒng)或設(shè)備進(jìn)行測試是否到達(dá)設(shè)計要求.1.12 提交物我方在本工程實(shí)施建議方案中所指明的效勞工程的提交件為:1.規(guī)劃階段大數(shù)據(jù)平臺工程實(shí)

14、施方案2.規(guī)劃階段大數(shù)據(jù)平臺工程人員名單3.規(guī)劃階段大數(shù)據(jù)平臺工程建設(shè)方案4.需求階段大數(shù)據(jù)平臺業(yè)務(wù)需求列表5.需求階段大數(shù)據(jù)平臺功能需求列表6.需求階段大數(shù)據(jù)平臺業(yè)務(wù)需求功能規(guī)格說明書7.需求階段大數(shù)據(jù)平臺業(yè)務(wù)系統(tǒng)功能列表FRL8.系統(tǒng)設(shè)計階段大數(shù)據(jù)平臺環(huán)境部署方案9.系統(tǒng)設(shè)計階段大數(shù)據(jù)平臺邏輯數(shù)據(jù)模型10.系統(tǒng)設(shè)計階段大數(shù)據(jù)平臺物理模型11.系統(tǒng)設(shè)計階段大數(shù)據(jù)平臺數(shù)據(jù)庫詳細(xì)設(shè)計說明書12.系統(tǒng)設(shè)計階段大數(shù)據(jù)平臺ETL設(shè)計說明書概要設(shè)計和詳細(xì)設(shè)計13.系統(tǒng)設(shè)計階段大數(shù)據(jù)平臺前端應(yīng)用設(shè)計說明書概要設(shè)計和詳細(xì)設(shè)計14.開發(fā)測試階段大數(shù)據(jù)平臺功能測試用例15.開發(fā)測試階段大數(shù)據(jù)平臺業(yè)務(wù)測試報告16

15、.開發(fā)測試階段大數(shù)據(jù)平臺模塊性能測試報告報告17.開發(fā)測試階段大數(shù)據(jù)平臺前端應(yīng)用程序說明書18.開發(fā)測試階段大數(shù)據(jù)平臺ETL程序說明書19.開發(fā)測試階段大數(shù)據(jù)平臺接口說明20.上線及驗(yàn)收階段大數(shù)據(jù)平臺用戶操作手冊21.上線及驗(yàn)收階段系統(tǒng)上線和試運(yùn)行方案22.上線及驗(yàn)收階段大數(shù)據(jù)平臺培訓(xùn)手冊23.上線及驗(yàn)收階段大數(shù)據(jù)平臺系統(tǒng)安裝手冊24.上線及驗(yàn)收階段大數(shù)據(jù)平臺日常維護(hù)手冊25.上線及驗(yàn)收階段大數(shù)據(jù)平臺廠商建設(shè)報告26.上線及驗(yàn)收階段大數(shù)據(jù)平臺廠商容災(zāi)方案1.13 系統(tǒng)的交接與知識轉(zhuǎn)移我方負(fù)責(zé)將集團(tuán)大數(shù)據(jù)平臺相關(guān)知識與技術(shù)向甲方人 員轉(zhuǎn)移,完成大數(shù)據(jù)平臺開發(fā)、測試、運(yùn)行維護(hù)、分析挖 掘等技術(shù)向甲方人員的轉(zhuǎn)移,滿足甲方開展后續(xù)數(shù)據(jù)工作 的需要.在工程實(shí)施過程中,我方將通過多種方式向業(yè)主方進(jìn) 行系統(tǒng)技術(shù)知識的轉(zhuǎn)移,通過雙方的合作和努力,爭取達(dá) 到業(yè)主方可以獨(dú)立進(jìn)行系統(tǒng)維護(hù)的水平,承當(dāng)未來整個集 團(tuán)大數(shù)據(jù)平臺的運(yùn)行維護(hù)效勞.1人員參與方式.工程過程中,甲方技術(shù)人員全程參 與包括設(shè)計和開發(fā)的整個過程,我方技術(shù)人員與集團(tuán)技術(shù)人員將在工程過程中,進(jìn)行從設(shè)計、開發(fā)測試到上線的全 流程密切交流,保證甲方技術(shù)人員掌握系統(tǒng)各方面知識.2培訓(xùn)方式