數(shù)據(jù)業(yè)務虛擬化平臺模型的構(gòu)建

數(shù)據(jù)業(yè)務虛擬化平臺模型的構(gòu)建

1主機資源、設(shè)備以及熱資源整合現(xiàn)在，考慮到存儲需求的快速擴展和數(shù)據(jù)處理數(shù)據(jù)的快速擴展，我們需要簡單、快速、兼容地實現(xiàn)數(shù)據(jù)偏移，并快速完成文件備份。升級換代后,我們又將面臨另外一個問題,原有的系統(tǒng)主機資源、存儲設(shè)備是否還能夠利舊并重復使用?有沒有辦法將新舊多個物理設(shè)備整合起來,共同使用?虛擬化技術(shù)可以將運算、網(wǎng)絡與存儲資源集中,構(gòu)成可以動態(tài)分配的資源池(RescourcePool),從而能夠應對大量運算單元的同時高速存取,能夠動態(tài)擴充容量而不影響系統(tǒng)效能,并且具備高可靠度與復原能力。通過建設(shè)統(tǒng)一的數(shù)據(jù)業(yè)務虛擬化平臺的模型,可以實現(xiàn)對資源的有效利用,在安全可靠和海量計算存儲的基礎(chǔ)上,在動態(tài)資源池中將運算、網(wǎng)絡與存儲資源集中,形成高效的應用軟件開發(fā)和運行平臺。2平臺模型如何虛擬化數(shù)據(jù)業(yè)務2.1資源池及運營管理平臺本文提出的虛擬化平臺以云計算為依托,能夠支持豐富的基于云計算的典型應用類型,整個系統(tǒng)架構(gòu)分為資源池管理平臺、資源池統(tǒng)一調(diào)度、主機資源池、存儲資源池、網(wǎng)絡資源池,如圖1所示。⑴資源池管理平臺也叫資源運營管理平臺,它作為統(tǒng)一虛擬化平臺中的核心模塊,負責整個資源池資源的統(tǒng)一管理和調(diào)度,負責整個平臺運行監(jiān)控、運維以及整個資源的商業(yè)運營流程支撐。⑵資源池統(tǒng)一調(diào)度:統(tǒng)一平臺中所有資源呈現(xiàn)和管理實體,接受資源池運營管理平臺的指令。⑶主機資源池負責資源池中所有計算資源的管理和調(diào)度。資源池管理包括虛擬機資源、物理機資源部分。⑷存儲資源池負責資源池中所有存儲資源的管理和調(diào)度。存儲資源池包括塊存儲和文件存儲。塊存儲資源虛擬化支持不同廠商SAN設(shè)備的異構(gòu)化,屏蔽各種設(shè)備硬件差異;文件存儲通過業(yè)界成熟、流行的云存儲技術(shù)來實現(xiàn),屏蔽存儲位置的差異,為業(yè)務平臺提供按需分配、彈性擴展的存儲服務。⑸網(wǎng)絡資源池負責資源池中所有網(wǎng)絡資源的管理和調(diào)度,為業(yè)務平臺提供外部接入、設(shè)備訪問、業(yè)務管理、網(wǎng)絡隔離等所需要的網(wǎng)絡連接服務。作為統(tǒng)一的應用系統(tǒng),必須保障系統(tǒng)對用戶的響應速度和服務質(zhì)量,因此系統(tǒng)需要較高的可靠性,在系統(tǒng)發(fā)生故障或因事故造成中斷后,能確保數(shù)據(jù)的準確性、完整性和一致性,并具備迅速恢復的能力。在進行本系統(tǒng)架構(gòu)設(shè)計、應用設(shè)計、數(shù)據(jù)庫設(shè)計、系統(tǒng)部署等工作時都充分考慮了性能問題,同時系統(tǒng)需要具有良好的開放性,保證系統(tǒng)具有較長的生命力,滿足將來系統(tǒng)發(fā)展的要求。2.2接口協(xié)議及規(guī)則配置●平臺模型采用了微內(nèi)核設(shè)計技術(shù)。在微內(nèi)核結(jié)構(gòu)中,操作系統(tǒng)的內(nèi)核只需要提供最基本、最核心的一部分操作,其他的管理程序被最大程度地置于內(nèi)核之外,使得操作系統(tǒng)內(nèi)部結(jié)構(gòu)簡單清晰,程序代碼的維護非常方便。外部程序可以獨立運行,只有當程序需要內(nèi)核的協(xié)助時,才通過相關(guān)接口對內(nèi)核發(fā)出請求調(diào)用,便于擴展和增加其他plug-in組件?！褚?guī)則配置采用python語言實現(xiàn)。python語言語法簡潔清晰,并且具有功能強大的類庫,能夠方便地把用其他語言編寫的各種模塊結(jié)合在一起,然后對其中有特別需要的部分采用更適合的語言改寫,清晰而又一致的風格保證了產(chǎn)品的高擴展性和可定制性?！衿脚_采用OSGi插件框架,區(qū)別于目前大多數(shù)基于MVC的分層設(shè)計,具有高可復用性、高效性,可以動態(tài)改變系統(tǒng)行為。具有熱插拔的插件體系結(jié)構(gòu)可以方便地插入第三方插件,可對特定的軟件開發(fā)特定的插件,進行監(jiān)控管理。●數(shù)據(jù)業(yè)務虛擬化平臺采用JMX進行監(jiān)控和配置,可以跨越一系列異構(gòu)的操作系統(tǒng)平臺、系統(tǒng)體系結(jié)構(gòu)和網(wǎng)絡傳輸協(xié)議,靈活地開發(fā)無縫集成的系統(tǒng)、網(wǎng)絡和服務管理的應用,提高了系統(tǒng)的可管理性。3平臺模型如何實現(xiàn)數(shù)據(jù)服務3.1資源池用戶通過統(tǒng)一數(shù)據(jù)業(yè)務虛擬化平臺能夠提供資源的各種視圖,供各類人員查看了解,同時平臺可提供各種功能管理和使用資源池。數(shù)據(jù)業(yè)務虛擬化平臺分為管理門戶和服務門戶,管理門戶供統(tǒng)一平臺的各類管理員使用,服務門戶主要面向統(tǒng)一平臺的各種用戶。設(shè)備管理用來接入和管理統(tǒng)一平臺資源池中的各種物理設(shè)備,包括主機設(shè)備、存儲設(shè)備和網(wǎng)絡設(shè)備。資源池中的每一臺物理設(shè)備在管理門戶進行基本的配置后,納入管理平臺統(tǒng)一管理。為了滿足用戶對資源的各種不同需求,達到資源共享、軟硬件解耦的目的,資源池中的各種設(shè)備進行虛擬化后納入資源池中,供用戶使用。管理平臺能夠管理現(xiàn)有主流的虛擬化產(chǎn)品,通過這些虛擬化產(chǎn)品對外提供各種規(guī)格的虛擬機。根據(jù)屬性不同,資源池中的各種物理資源和虛擬資源可組成不同的資源池,管理平臺對資源池統(tǒng)一管理、監(jiān)控、調(diào)度等,滿足用戶的資源使用要求。平臺可以對系統(tǒng)中各項資源的運行情況和操作進行監(jiān)控記錄,為系統(tǒng)的日常維護提供依據(jù),包括資源池拓撲展示、資源監(jiān)控、告警管理、日志管理、備份恢復等。3.2不統(tǒng)一主機的資源池構(gòu)建實驗為驗證本文提出的數(shù)據(jù)業(yè)務虛擬化平臺利用資源,提高處理效率的能力,下面介紹兩個驗證性測試。測試一:將4種不同數(shù)量的數(shù)據(jù)集分組,分別在本地與虛擬化平臺上運行。本地環(huán)境為SUSELinux、Intel四核2.6GHz、8GByte內(nèi)存,實驗驗證結(jié)果見表1。由表1可以看出,虛擬化平臺的執(zhí)行效率大大高于單機系統(tǒng)的執(zhí)行效率,而且數(shù)據(jù)量越大,這種優(yōu)勢就越明顯。測試二:選擇上海移動為測試局點,搭建數(shù)據(jù)業(yè)務虛擬化平臺,構(gòu)建資源池,用37臺服務器主機和304個CPUcore,虛擬化替代原有的78臺物理服務器主機,在Cluster中將物理和虛擬設(shè)備統(tǒng)一進行管理。通過物理設(shè)備查看其上的每一臺虛擬機,可以看出,在業(yè)務的高峰值CPU的最大利用率與以前相比不僅沒有升高,反而有了降低,虛擬化平臺的峰值最大使用率最高不超過40%。上述兩個測試充分論證了本文提出的數(shù)據(jù)業(yè)務虛擬化平臺能夠有效解決業(yè)務平臺的重復建設(shè)多、資源利用率低、維護難度大、安全級別差等多個問題,實現(xiàn)了閑置資產(chǎn)、資源的有效利用。4基于mazdapc機的促銷創(chuàng)新本文提出的數(shù)據(jù)業(yè)務虛擬化平臺模型將已有設(shè)備進行梳理,使得閑置資源得到有效利用,全面支撐業(yè)務平臺的平滑割接和彈性擴展。該平臺通過各種虛擬化技術(shù)將服務器資源、存儲資源、網(wǎng)絡資源整合起來,構(gòu)建了一個組織完善的資源池,動態(tài)管理和分配各項設(shè)備和資源,實現(xiàn)了對所有資源的統(tǒng)一化、集中化、智能化調(diào)度和管理。同時考慮系統(tǒng)安全、負載均衡、數(shù)據(jù)備份等需求,利舊現(xiàn)網(wǎng)設(shè)備,充分利用現(xiàn)有的網(wǎng)絡資源。Aspect為馬自達車主提供平板電腦應用程序全球客戶聯(lián)絡和微軟平臺解決方案提供商Aspect公司近期開發(fā)了一款平板電腦應用程序——MazdaConnect,幫助馬自達加拿大公司提升消費者體驗,并進一步提升該公司與用戶之間的服務體驗。MazdaConnect為用戶提供的功能包括經(jīng)銷商地址導航、車主手冊以及與社交媒體平臺的即時連接。這款雙語應用程序是馬自達加拿大公司2011年12月銷售業(yè)績成為史上最佳的助力之一。作為馬自達加拿大公司經(jīng)銷店促銷活動的一部分,凡在2011年12月購買馬自達公司車輛的車主,都獲得了一臺預裝有MazdaConnect應用程序的平板電腦。馬自達公司開展此次促銷的目的是讓消費者了解其MazdaConnect技術(shù),這套技術(shù)設(shè)計用于改善駕駛性能以及節(jié)油效率。Aspect的數(shù)字團隊專注于不斷提升用戶體驗,為眾多公司開發(fā)數(shù)字社區(qū)和移動應用,使其能夠為最終用戶提供滲透式、互動品牌體驗。憑借對于用戶獨特需求的全面了解,Aspect的數(shù)字解決方案可幫助各公司進一步密切與客戶的聯(lián)系。華為完成全球首個LTECategory4商用網(wǎng)測試2012年5月4日,全球領(lǐng)先的信息與通信解決方案供應商華為技術(shù)有限公司在歐洲完成全球首個基于商用LTE網(wǎng)絡的Category4測試。該測試呈現(xiàn)了完美的LTE性能,數(shù)據(jù)下載速率達到理論值150Mbit/s。此次商用網(wǎng)測試是基于華為在歐洲部署的商用LTE網(wǎng)絡及Category4終端。該終端采用業(yè)界首款支持LTER9協(xié)議的海思LTE多模芯片。此次測試對LTE技術(shù)發(fā)展具有重大意義,將有助于應對移動寬帶時代的數(shù)據(jù)流量快速增長,從而將為最終用戶提供無與倫比的移動寬帶新體驗。華為一直