基于大數(shù)據(jù)處理的管理模式下信息處理框架設計,信息管理論文

PAGEPAGE7基于大數(shù)據(jù)處理的管理模式下信息處理框架設計,信息管理論文題目第一章第二章第三章第四章第五章基于大數(shù)據(jù)處理的管理形式下信息處理框架設計總結/以下為以下為以下為以下為參考文獻第5章基于大數(shù)據(jù)處理的管理形式下信息處理框架設計在大數(shù)據(jù)背景下，管理的關鍵就是信息數(shù)據(jù)的整合與分析，在各個模塊中，信息系統(tǒng)的存在尤為重要，數(shù)據(jù)的傳遞、收集、服務的提供都離不開信息系統(tǒng)，它是對整個管理形式的一個關鍵支撐。5.1需求分析首先，對于通信系統(tǒng)而言，數(shù)據(jù)流動和交換能力、存儲能力和計算能力是必須的。在大數(shù)據(jù)背景下的海量數(shù)據(jù)信息支撐下，實時的數(shù)據(jù)采集和處理、數(shù)據(jù)驅動的決策制定所需的海量數(shù)據(jù)的存儲和分析，都需要信息系統(tǒng)能夠提供高度動態(tài)、高度延展的基礎能力保證。其次，實現(xiàn)海量多形式數(shù)據(jù)的實時準確的分享也是必須的。數(shù)據(jù)是為企業(yè)業(yè)務提供必須的能力的關鍵因素。無論對于智能生產(chǎn)、網(wǎng)絡銷售還是智慧物流，都需要由數(shù)據(jù)驅動，實現(xiàn)多個業(yè)務的有機整合，協(xié)同工作。這就需要企業(yè)信息系統(tǒng)能夠像人體中的循環(huán)系統(tǒng)一樣，對于不同的上層業(yè)務應用提供統(tǒng)一的數(shù)據(jù)支持，針對不同業(yè)務，應對的數(shù)據(jù)格式，數(shù)據(jù)訪問形式的不同需求，實現(xiàn)多格式、多形式數(shù)據(jù)的統(tǒng)一管理，實時分享。最后，還需要有靈敏敏捷的平臺支撐。面對市場需求和客戶群體的快速演變，怎樣實現(xiàn)快速應對是企業(yè)發(fā)展的根本所在。無論是智能生產(chǎn)、網(wǎng)絡銷售還是智慧物流，都面對這由于數(shù)據(jù)速度快速這樣特點而需要快速響應這一問題。這樣就需要企業(yè)的信息系統(tǒng)在現(xiàn)有業(yè)務功能的基礎上，具備迅速重新組合提供新服務的能力。為了支撐這些新服務，能敏捷地調(diào)整本身能力提供和服務管理也是必備的功能。傳統(tǒng)的豎井式系統(tǒng)構架難以實現(xiàn)靈敏動態(tài)的能力保障來應對快速多變的業(yè)務需求，業(yè)務應用也只能實現(xiàn)單獨的業(yè)務單元，這樣一來，企業(yè)的業(yè)務應用就會隨著業(yè)務的變動而產(chǎn)生更改，甚至可能會導致業(yè)務集成的重構。除此之外，對于數(shù)據(jù)容量、數(shù)據(jù)流量及數(shù)據(jù)流動的實時性等方面，在傳統(tǒng)的應用集成形式之下都存在著明顯的限制。一種新的，能夠提供大規(guī)模分布式系統(tǒng)中離散通信、存儲和處理能力，并以靈敏、可靠、透明的形式提供應上層平臺和應用的新信息系統(tǒng)的構建成為了必須。它需要能提供針對海量多格式、多形式數(shù)據(jù)的跨平臺、跨應用的統(tǒng)一支撐平臺；還必須提供高度敏捷的高可用、實時響應的系統(tǒng)平臺以支持快速變化的功能目的。5.2信息處理構架基于云計算平臺技術面向大規(guī)模分布式系統(tǒng)的資源會聚、管理和調(diào)度功能得到了最大的利用，能夠提供高性能可線性延展的分布式通信、存儲和計算能力，比照傳統(tǒng)的豎井式系統(tǒng)構造，這種構造能夠更好的適應時代需求，能夠應對由于大數(shù)據(jù)所帶來的信息處理壓力，使企業(yè)的管理愈加快速有效。在這里種形式下，信息交換將成為重點，應用或服務間的互動將由信息交換來定義〔包含信息數(shù)據(jù)模型，牽涉互動的不同服務在互動行為中的角色〕，系統(tǒng)中數(shù)據(jù)流依靠于分布式數(shù)據(jù)總線實現(xiàn)，而事件驅動、RESTful架構及常見的SOA形式都能夠采用數(shù)據(jù)驅動集成形式描繪敘述。這樣，信息系統(tǒng)中業(yè)務應用與基礎構架之間的界線就模糊了。業(yè)務能力的開發(fā)、部署和運營都依靠于系統(tǒng)支撐平臺所提供的資源、能力和管理功能。基于以上思路，我們能夠得出基于云計算平臺的企業(yè)新型信息系統(tǒng)構架〔如此圖5.1〕。此構架在邏輯上可分成能力層、平臺層和資源層。能力層包含分布式數(shù)據(jù)總線〔通信能力〕，分布式統(tǒng)一存儲系統(tǒng)〔存儲能力〕，分布式工作流和調(diào)度引擎〔計算能力和資源調(diào)度〕；平臺層包含統(tǒng)一服務管理框架，統(tǒng)一服務交付框架，統(tǒng)一數(shù)據(jù)管理和訪問，以及自動化運維管理系統(tǒng)。系統(tǒng)的各個模塊如下：〔1〕運維管理系統(tǒng)運維管理系統(tǒng)在現(xiàn)有的大量跨域、異構軟硬件基礎設施之上，快速搭建統(tǒng)一的資源和服務管理系統(tǒng)，提供面向系統(tǒng)平臺和業(yè)務應用的高效的運維服務。它提供基礎設施管理平臺的快速構建能力，以及通過自動化方式進行大規(guī)模業(yè)務應用部署及全生命周期管理、資源和應用的監(jiān)控報警，自動化故障排查修復等能力。運維管理系統(tǒng)集成了策略引擎、分布式工作流、資源服務管理調(diào)度等機制，在搭建高性能的基礎設施和應用服務運行平臺的基礎上，保證資源及服務的延展性、容錯性和流動性，進而實現(xiàn)整體管理的高效和透明化?！?〕分布式數(shù)據(jù)總線分布式數(shù)據(jù)總線支持常見的通信形式和通信模型，用于將系統(tǒng)中各個組成部分連接在一起，通過提供高容錯、高性能的數(shù)據(jù)傳輸和交換支持系統(tǒng)的各個組成部分之間的通信和協(xié)作。它起到神經(jīng)中樞和循環(huán)系統(tǒng)的作用，從根本上保證了系統(tǒng)的實時性、動態(tài)適應性、延展性及松耦合性等。〔3〕數(shù)據(jù)采集系統(tǒng)數(shù)據(jù)采集系統(tǒng)是整個信息系統(tǒng)中數(shù)據(jù)的源頭，所有來自企業(yè)內(nèi)部和外部各個方面的數(shù)據(jù)都通過其進入到信息系統(tǒng)之中，它會對進入系統(tǒng)的數(shù)據(jù)進行過濾和整理?！?〕數(shù)據(jù)存儲系統(tǒng)分布式文件系統(tǒng)用于對總數(shù)量和總容量都很大的各類圖片、視頻等多媒體文件，以及其他非構造化數(shù)據(jù)的實時高效存儲和訪問。分布式實時數(shù)據(jù)庫用于用戶行為數(shù)據(jù)和系統(tǒng)日志數(shù)據(jù)等數(shù)量大、關聯(lián)弱的構造化數(shù)據(jù)的實時性和高效性的存儲和訪問。關系型數(shù)據(jù)庫集群用于實現(xiàn)海量強關系型構造化數(shù)據(jù)的存儲和快熟訪問?！?〕數(shù)據(jù)服務系統(tǒng)數(shù)據(jù)服務系統(tǒng)是系統(tǒng)平臺與上層應用之間的橋梁。它通過對信息系統(tǒng)中的數(shù)據(jù)層，能力層實現(xiàn)功能抽象，采用面向服務體系構架理念將系統(tǒng)平臺中不同的功能單元通過服務之間定義良好的接口聯(lián)絡起來，消除不同功能模塊以及數(shù)據(jù)提供者之間的技術差異，使不同的平臺服務和業(yè)務應用協(xié)調(diào)運行，實現(xiàn)不同功能模塊之間的數(shù)據(jù)交換與流動。〔6〕服務交付服務交付框架是數(shù)據(jù)流的終點，是用戶使用信息系統(tǒng)的入口。對于用戶請求進行處理、施行用戶認證等相關斷定。通過可延展的前端服務器集群和根據(jù)業(yè)務需求制定的負載平衡機制，來實現(xiàn)高性能可靠的服務交付能力。包括安全管理、接入管理等功能?！?〕分布式工作流引擎分布式工作流引擎是系統(tǒng)中的執(zhí)行者，用于實現(xiàn)對于基于大規(guī)模系統(tǒng)的分布式工作流進行定義、調(diào)度和執(zhí)行，用于支撐大規(guī)模系統(tǒng)的自動化運維和分布式計算框架的實現(xiàn)。在這一基于云計算平臺的新信息系統(tǒng)下，高速可靠、易于擴展的數(shù)據(jù)交換和傳輸存儲成為了可能。系統(tǒng)能夠在網(wǎng)絡情況不良好的情況之下仍然保證數(shù)據(jù)通道的暢通性及數(shù)據(jù)交換的可靠性和安全性。分布在網(wǎng)絡之上的各個組件間的數(shù)據(jù)流能夠得到很好的控制。這樣一來，海量數(shù)據(jù)的統(tǒng)一訪問和集中存儲得到了解決，數(shù)據(jù)實時性得到提高；通過大規(guī)模軟件的快速部署、配置及基于策略的資源調(diào)度和管理機制，資源的自動部署和靈敏調(diào)