2項(xiàng)目建設(shè)目標(biāo)

1、九江銀行大數(shù)據(jù)平臺(tái)-基礎(chǔ)平臺(tái)及歷史數(shù)據(jù)平臺(tái)建設(shè)項(xiàng)目招標(biāo)范圍說明書1項(xiàng)目簡(jiǎn)介隨著大數(shù)據(jù)技術(shù)的日益成熟，人們對(duì)數(shù)據(jù)價(jià)值的認(rèn)識(shí)越來越深， 金融渠道不斷拓寬，大數(shù)據(jù)在金融服務(wù)中的價(jià)值日益顯現(xiàn)， 九江銀行 希望借助大數(shù)據(jù)技術(shù)進(jìn)一步推動(dòng)業(yè)務(wù)的發(fā)展，為我行在金融業(yè)大數(shù)據(jù) 的競(jìng)爭(zhēng)過程中取得先機(jī)，為后續(xù)的應(yīng)用建設(shè)和業(yè)務(wù)發(fā)展打下良好基 礎(chǔ)。2項(xiàng)目建設(shè)目標(biāo)本次項(xiàng)目建設(shè)目標(biāo)是希望為我行建立可擴(kuò)展的大數(shù)據(jù)基礎(chǔ)平臺(tái)，并基于大數(shù)據(jù)基礎(chǔ)平臺(tái)建設(shè)我行的歷史數(shù)據(jù)憑條。通過引入業(yè)內(nèi)領(lǐng)先的大數(shù)據(jù)基礎(chǔ)平臺(tái)、應(yīng)用平臺(tái)，借鑒他行建設(shè)經(jīng)驗(yàn)結(jié)合我行實(shí)際情況，構(gòu)建符合我行的發(fā)展需求的大數(shù)據(jù)平臺(tái)3總體內(nèi)容本次項(xiàng)目實(shí)施內(nèi)容包括如下幾部分：大數(shù)據(jù)基礎(chǔ)

2、平臺(tái)建設(shè)、歷史 數(shù)據(jù)平臺(tái)。3.1大數(shù)據(jù)基礎(chǔ)平臺(tái)建設(shè)引入基于HADOO技術(shù)體系的大數(shù)據(jù)平臺(tái)、建設(shè)分布式計(jì)算系 統(tǒng)，提高數(shù)據(jù)分析、挖掘的能力，同時(shí)降低數(shù)據(jù)存儲(chǔ)和計(jì)算的成本。 本次大數(shù)據(jù)平臺(tái)主要通過采購(gòu)市場(chǎng)上主流的商業(yè)發(fā)行版Hadoop平臺(tái)，對(duì)于大數(shù)據(jù)發(fā)行廠商及平臺(tái)要求如下：3.1.1商務(wù)要求1、 投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品所屬公司注冊(cè)時(shí)間大于3年。2、 投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品所屬公司需具備：注冊(cè)資金5000 萬元以上，并提供證明文件。3、 投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品所屬公司需具備：具有IS09001管 理體系認(rèn)證或CMMI3軟件能力成熟度模型3級(jí)認(rèn)證及以上，并提供 證明文件。4、投標(biāo)大數(shù)據(jù)平臺(tái)的軟件

3、產(chǎn)品需具備：中華人民共和國(guó)國(guó)家版權(quán) 局自主知識(shí)產(chǎn)權(quán)的計(jì)算機(jī)軟件著作權(quán)等級(jí)證書，并提供證明文件。5、投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品需具備：國(guó)內(nèi)銀行總行級(jí)客戶大數(shù) 據(jù)平臺(tái)案例不少于15個(gè)，并提供證明文件。6、投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品需具備：?jiǎn)蝹€(gè)用戶200個(gè)節(jié)點(diǎn)以上 的國(guó)內(nèi)客戶案例，并提供證明文件。7、依據(jù)產(chǎn)品成本進(jìn)行合理報(bào)價(jià)，首次購(gòu)買需要提供一年免費(fèi)服務(wù)，服務(wù)期滿后每年服務(wù)費(fèi)不高于產(chǎn)品成交價(jià)格的10%。8參與投標(biāo)產(chǎn)品必須為最新的發(fā)行版本，包括全部的組件，需列明組件及版本清單。9、能夠在平臺(tái)遇到開源組建 bug的時(shí)候提供快速的開源組建代 碼研發(fā)、bug修復(fù)能力，為用戶提供安全、可靠的平臺(tái)運(yùn)行軟件。10、根

4、據(jù)生產(chǎn)6個(gè)節(jié)點(diǎn)，開發(fā)4個(gè)節(jié)點(diǎn)，測(cè)試4個(gè)節(jié)點(diǎn)，給出合 理的價(jià)格及計(jì)費(fèi)方式（單價(jià)，總價(jià)，開發(fā)測(cè)試節(jié)點(diǎn)是否收費(fèi)，開發(fā)測(cè) 試環(huán)境與生產(chǎn)環(huán)境版本一致）,給出后續(xù)購(gòu)買節(jié)點(diǎn)單價(jià)。3.1.2技術(shù)要求平臺(tái)功能：1、支持SQL2003語法規(guī)則95%以上，支持 Oracle PL/SQL存儲(chǔ)過 程；2、 支持批量增刪查改、Merge into等語法，并支持ACID分布式 事務(wù)處理，保證數(shù)據(jù)最終一致性；3、支持非結(jié)構(gòu)化數(shù)據(jù)檢索；4、支持界面化安裝及管理；5、兼容標(biāo)準(zhǔn)Hadoop及相關(guān)組件API接口；6、支持對(duì)接常見BI工具，如SmartBI、Tableau、帆軟等軟件；7、 平臺(tái)支持完整的多租戶權(quán)限管控體系，支持基于

5、用戶、用戶組 和角色的權(quán)限管控，支持資源與數(shù)據(jù)兩層權(quán)限管控；8支持通過Kerberos認(rèn)證協(xié)議進(jìn)行用戶身份認(rèn)證；9、支持基于數(shù)據(jù)層面的用戶操作審計(jì)日志，并支持審計(jì)告警。10、大數(shù)據(jù)平臺(tái)軟件能支持運(yùn)行在主流 x86架構(gòu)通用服務(wù)器、一 體機(jī)之上，并能支持運(yùn)行在基于 Power芯片的Power Linux服務(wù)器之 上。11、大數(shù)據(jù)平臺(tái)軟件能兼容主流 Linux操作系統(tǒng)，例如SuSe RedHat、CentOS等；平臺(tái)高可用：12、系統(tǒng)中不允許存在單點(diǎn)故障，任何一個(gè)角色故障后都應(yīng)有備 份機(jī)器承擔(dān)原失效節(jié)點(diǎn)工作，并在監(jiān)控頁面上對(duì)錯(cuò)誤狀態(tài)進(jìn)行顯示標(biāo) 識(shí)；13、系統(tǒng)發(fā)上硬件故障時(shí)支持自動(dòng)監(jiān)測(cè)錯(cuò)誤并修復(fù)數(shù)據(jù)，

6、無需人 工干預(yù)，并支持細(xì)粒度的任務(wù)出錯(cuò)處理，對(duì)長(zhǎng)時(shí)間的數(shù)據(jù)處理任務(wù)在 運(yùn)行中發(fā)生故障后，無需重新運(yùn)行整個(gè)應(yīng)用任務(wù)，只需要運(yùn)行失敗的 子任務(wù)即可完成數(shù)據(jù)處理任務(wù)；14、支持分布式數(shù)據(jù)庫表異地遠(yuǎn)程復(fù)制，并支持雙向復(fù)制，實(shí)現(xiàn) 異地災(zāi)備。平臺(tái)性能：15、在常見的2-路服務(wù)器上，平均每個(gè)CPUCore不低于每秒1000 萬記錄的掃描速度，不低于每秒100萬記錄的聚合速度；16、按關(guān)鍵字檢索單表記錄延時(shí)小于 200ms,單個(gè)節(jié)點(diǎn)并發(fā)度超過1000；17、按關(guān)鍵字檢索多表關(guān)聯(lián)記錄延時(shí)小于 1s,單個(gè)節(jié)點(diǎn)并發(fā)度超 過 1000；18、多表關(guān)聯(lián)檢索并匯總統(tǒng)計(jì)延時(shí)小于 1s,單個(gè)節(jié)點(diǎn)并發(fā)度超過100；19、 流數(shù)

7、據(jù)處理在萬兆網(wǎng)絡(luò)條件下，單節(jié)點(diǎn)不低于200MB/S的處 理吞吐能力，簡(jiǎn)單業(yè)務(wù)處理延時(shí)能達(dá)到毫秒級(jí)；20、性能要求在招標(biāo)前可通過其他測(cè)試記錄或證明文件證明，入 場(chǎng)后必須在我行使用的通用2-路服務(wù)器和4-路服務(wù)器上達(dá)到要求。3.1.3服務(wù)要求1、投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品需提供原廠售后服務(wù)承諾函并加蓋公章2、 投標(biāo)大數(shù)據(jù)平臺(tái)的軟件產(chǎn)品需提供原廠售后人員社保證明，并 保證后續(xù)服務(wù)人員和投標(biāo)承諾的人員一致。3、技術(shù)支持：5X 8 服務(wù)響應(yīng)時(shí)段為：9:00 - 18:00、400電話7x24小時(shí)待機(jī)、郵件回復(fù)、IM遠(yuǎn)程服務(wù)、論壇支持、企業(yè)論壇賬號(hào)服務(wù)、技術(shù)專家電話直連、配置優(yōu)化咨詢、完整配置手冊(cè)、緊急問題

8、現(xiàn)場(chǎng)服務(wù)、提供 年度和季度巡檢及巡檢報(bào)告、月度電話回訪；4、培訓(xùn)：提供一個(gè)月的原廠培訓(xùn)，包括大數(shù)據(jù)平臺(tái)及架構(gòu)培訓(xùn)、大數(shù)據(jù)平臺(tái)開發(fā)培訓(xùn) 、大數(shù)據(jù)平臺(tái)數(shù)據(jù)挖掘培訓(xùn)等。3.2歷史數(shù)據(jù)平臺(tái)基于大數(shù)據(jù)基礎(chǔ)數(shù)據(jù)平臺(tái)構(gòu)建我行歷史數(shù)據(jù)平臺(tái)，提高歷史數(shù)據(jù) 的存儲(chǔ)和查詢效率，對(duì)歷史數(shù)據(jù)進(jìn)行統(tǒng)一管理，為下游系統(tǒng)提供數(shù)據(jù) 查詢接口。數(shù)據(jù)查詢柜面網(wǎng)銀接口服務(wù)歷史數(shù)據(jù)平臺(tái)建設(shè)內(nèi)容包括但不限于以下內(nèi)容:1、結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)，遷移和保存行內(nèi)各業(yè)務(wù)系統(tǒng)或外部接入的 重要數(shù)據(jù)，完成必要的數(shù)據(jù)加工，提升數(shù)據(jù)查詢效率和查詢 范圍。2、提供可擴(kuò)展的配置化數(shù)據(jù)接入形式， 支持多種數(shù)據(jù)源，包括 但不限于：文本（固定分隔符、定長(zhǎng)形式）、關(guān)系型

9、數(shù)據(jù)庫、 API 等。3、支持對(duì)接Cog nos、SmartBI、帆軟等常用BI工具。4、提供對(duì)外服務(wù)接口，支持對(duì)接我行 ESB為下游系統(tǒng)提供數(shù) 據(jù)查詢接口，支持單筆查詢、批量查詢、異步查詢等多種形 式，如支持網(wǎng)銀系統(tǒng)賬單查詢、報(bào)表系統(tǒng)報(bào)表查詢等。5、提供數(shù)據(jù)目錄服務(wù)，展示平臺(tái)中已接入的數(shù)據(jù)內(nèi)容，支持元 數(shù)據(jù)管理，及其他的統(tǒng)計(jì)信息。6、其他管理功能，如用戶管理、角色管理、權(quán)限管理、任務(wù)調(diào) 度、系統(tǒng)配置管理，接口管理等，其中任務(wù)調(diào)度需支持對(duì)接 我行統(tǒng)一調(diào)度工具。7、完成歷史流水?dāng)?shù)據(jù)遷移，給出其他歷史數(shù)據(jù)遷移規(guī)劃和建 議。8基于上述要求，給出我行歷史數(shù)據(jù)平臺(tái)建設(shè)規(guī)劃和技術(shù)方案提供可落地的知識(shí)轉(zhuǎn)移方

10、案。4 總體需求4.1商務(wù)需求能夠根據(jù)上述總體內(nèi)容完成我行大數(shù)據(jù)平臺(tái)建設(shè)，并根據(jù)上述內(nèi)容給出總體規(guī)劃和各模塊規(guī)劃及落地方案。投標(biāo)可由應(yīng)用廠商和平臺(tái)廠商聯(lián)合投標(biāo)，一家應(yīng)用廠商只能選擇 一家平臺(tái)廠商進(jìn)行聯(lián)合投標(biāo)，對(duì)于重復(fù)出現(xiàn)（含完全控股或子公司） 的應(yīng)用廠商直接取消投標(biāo)資格。投標(biāo)公司與實(shí)施公司必須為同一公 司，不得出現(xiàn)由集團(tuán)總公司投標(biāo)后由子公司進(jìn)行實(shí)施，入場(chǎng)時(shí)需提供入場(chǎng)人員工作合同復(fù)印件并加蓋公司印章。若多家應(yīng)用廠商聯(lián)合同一家平臺(tái)廠商進(jìn)行投標(biāo)，平臺(tái)廠商只進(jìn)行一次講標(biāo)即可。投標(biāo)后技術(shù)講標(biāo)必須由項(xiàng)目經(jīng)理講標(biāo)，若入場(chǎng)后發(fā)現(xiàn)項(xiàng)目經(jīng)理與 講標(biāo)人不一致，視為違約，行方可拒絕簽訂合同。4.2技術(shù)需求4.2.1

11、架構(gòu)和規(guī)劃基于上述總體內(nèi)容要求，完成對(duì)我行大數(shù)據(jù)建設(shè)的規(guī)劃，及對(duì)歷史數(shù)據(jù)平臺(tái)建設(shè)規(guī)劃。未來構(gòu)造在大數(shù)據(jù)平臺(tái)之上的應(yīng)用系統(tǒng)規(guī)劃及大數(shù)據(jù)平臺(tái)配套系 統(tǒng)的規(guī)劃，給出相應(yīng)3年內(nèi)大數(shù)據(jù)平臺(tái)的擴(kuò)展性方案、 預(yù)估數(shù)據(jù)存儲(chǔ) 量折線圖、以及預(yù)估所需投入預(yù)算。4.2.2 物理系統(tǒng)架構(gòu)1、大數(shù)據(jù)平臺(tái)主機(jī)應(yīng)滿足高可用和可擴(kuò)展性。,當(dāng)一個(gè)服務(wù)器或節(jié)點(diǎn)發(fā)生故障時(shí)， 整個(gè)系統(tǒng)應(yīng)保證能持續(xù)運(yùn)行，不會(huì)造成整個(gè)平臺(tái)系統(tǒng)宕機(jī)事故。大數(shù)據(jù)平臺(tái)主機(jī)和存儲(chǔ)系統(tǒng)應(yīng)具有投資保護(hù)的能力， 新舊不 同型號(hào)的平臺(tái)可以共存于同一個(gè)系統(tǒng)內(nèi)，共同對(duì)外提供服務(wù)。大數(shù)據(jù)平臺(tái)主機(jī)和存儲(chǔ)系統(tǒng)的配置方案應(yīng)提供合理的配置依 據(jù)。423系統(tǒng)性能要求對(duì)系統(tǒng)性能的總體要

12、求包括：1 .數(shù)據(jù)平臺(tái)處理時(shí)間需滿足數(shù)據(jù)管理平臺(tái)支持的應(yīng)用系統(tǒng)的正 常運(yùn)行。2. 大數(shù)據(jù)量查詢的快速響應(yīng)能力。3. 混合負(fù)載管理能力：應(yīng)提供集成的混合負(fù)載管理能力，能夠 同時(shí)滿足ETL信息訪問、備份的混合處理性能要求。4. 數(shù)據(jù)有效裝載量：是指數(shù)據(jù)庫實(shí)際可以容納的數(shù)據(jù)量，而且 系統(tǒng)在裝載了該有效數(shù)據(jù)量后，仍然可以滿足本招標(biāo)書所列的所有性 能指標(biāo)。5. 具有高性能的數(shù)據(jù)加載以及處理計(jì)算能力。6 .批量任務(wù)處理時(shí)間要求重要時(shí)點(diǎn)不超過 2小時(shí)，日常不超過 1個(gè)小時(shí)。4.2.4其他要求1 .系統(tǒng)和平臺(tái)建設(shè)符合九江銀行對(duì)系統(tǒng)安全、數(shù)據(jù)安全、網(wǎng)絡(luò) 安全及權(quán)限管理的要求。2. 系統(tǒng)能夠支持快速二次開發(fā)，并提

13、供開發(fā)支持。3. 系統(tǒng)應(yīng)采用平臺(tái)化設(shè)計(jì)，支持功能性拓展。4. 系統(tǒng)擴(kuò)充方便，設(shè)置修改靈活，操作維護(hù)簡(jiǎn)單，能夠適應(yīng)業(yè)務(wù)的快速變化及發(fā)展。5. 系統(tǒng)安全、可靠，供用戶進(jìn)行有效的維護(hù)與使用，系統(tǒng)運(yùn)行維 護(hù)要求自動(dòng)化、參數(shù)化和交易化。6. 系統(tǒng)嚴(yán)格按照軟件工程要求提供詳細(xì)的各類文檔。7 .系統(tǒng)使用方便，支持B/S架構(gòu)。8. 系統(tǒng)和應(yīng)用的運(yùn)行管理與監(jiān)控簡(jiǎn)單易用，易于管理和維護(hù)， 系統(tǒng)所有運(yùn)行管理操作應(yīng)該做到菜單化，方便運(yùn)維管理。能與九江銀 行現(xiàn)有的監(jiān)控系統(tǒng)對(duì)接；具有硬件故障診斷服務(wù)工具，能收集錯(cuò)誤信 息并將錯(cuò)誤信息發(fā)送給指定用戶；各設(shè)備、系統(tǒng)或應(yīng)用發(fā)生故障時(shí)， 能立即顯示故障節(jié)點(diǎn)和故障原因，并能用多種方式告警；批量處理時(shí) 間要控制在合理的范圍內(nèi)，要有批量處理的預(yù)計(jì)時(shí)間；批量處理的錯(cuò) 誤提示必須明確。9. 系統(tǒng)能夠支持IE8、IE10、Chrome等主流瀏覽器。10. 系統(tǒng)及應(yīng)用必須遵守我行已有的開發(fā)規(guī)范及數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范。11 .產(chǎn)品支持我行要求的操作系統(tǒng)及中間件（redhat6.4 , redhat6.6 , We