云計(jì)算（第三版）配套之29第8章OpenStack開(kāi)源虛擬化平臺(tái)（三）

8.1OpenStack背景介紹8.2計(jì)算服務(wù)Nova8.3對(duì)象存儲(chǔ)服務(wù)Swift8.4鏡像服務(wù)GlanceSwiftOpenStack開(kāi)源云計(jì)算工程的子工程之一可擴(kuò)展的對(duì)象存儲(chǔ)系統(tǒng)比方復(fù)制和存檔數(shù)據(jù)，圖像或視頻效勞，存儲(chǔ)次級(jí)靜態(tài)數(shù)據(jù)，開(kāi)發(fā)數(shù)據(jù)存儲(chǔ)整合的新應(yīng)用，存儲(chǔ)容量難以估計(jì)的數(shù)據(jù)，為Web應(yīng)用創(chuàng)立基于云的彈性存儲(chǔ)。8.3對(duì)象存儲(chǔ)效勞Swift擴(kuò)展性冗余性持久性28.3對(duì)象存儲(chǔ)效勞Swift8.3.1Swift特性8.3.2應(yīng)用場(chǎng)景8.3.3Swift主要組件8.3.4Swift根本原理8.3.5實(shí)例分析48.3對(duì)象存儲(chǔ)效勞SwiftSwift特性1.高數(shù)據(jù)持久性數(shù)據(jù)的可靠性，是指數(shù)據(jù)存儲(chǔ)到系統(tǒng)中后，到某一天數(shù)據(jù)喪失的可能性。2.完全對(duì)稱的系統(tǒng)架構(gòu)“對(duì)稱〞意味著Swift中各節(jié)點(diǎn)可以完全對(duì)等，能極大地降低系統(tǒng)維護(hù)本錢。3.無(wú)限的可擴(kuò)展性一是數(shù)據(jù)存儲(chǔ)容量無(wú)限可擴(kuò)展，二是Swift性能〔如QPS、吞吐量等〕可線性提升。4.無(wú)單點(diǎn)故障整個(gè)Swift集群中，也沒(méi)有一個(gè)角色是單點(diǎn)的，并且在架構(gòu)和設(shè)計(jì)上保證無(wú)單點(diǎn)業(yè)務(wù)是有效的。5.簡(jiǎn)單、可依賴簡(jiǎn)單表達(dá)在實(shí)現(xiàn)易懂、架構(gòu)優(yōu)美、代碼整潔；可依賴是指Swift經(jīng)測(cè)試、分析之后，可以放心大膽地將Swift用于最核心的存儲(chǔ)業(yè)務(wù)上8.3對(duì)象存儲(chǔ)效勞Swift8.3.1Swift特性8.3.2應(yīng)用場(chǎng)景8.3.3Swift主要組件8.3.4Swift根本原理8.3.5實(shí)例分析68.3對(duì)象存儲(chǔ)效勞Swift應(yīng)用場(chǎng)景網(wǎng)盤類產(chǎn)品的存儲(chǔ)引擎為Glance存儲(chǔ)鏡像文件存儲(chǔ)日志文件數(shù)據(jù)備份倉(cāng)庫(kù)Swift提供的效勞與AmazonS3相同，適用于許多應(yīng)用場(chǎng)景。7其中Storage和Consistency效勞均允許在StorageNode上。8.3對(duì)象存儲(chǔ)效勞Swift應(yīng)用場(chǎng)景Swift主要有三個(gè)組成局部：ProxyServer、StorageServer和ConsistencyServer。88.3對(duì)象存儲(chǔ)效勞Swift應(yīng)用場(chǎng)景使用OpenStack的認(rèn)證效勞Keystone，目的在于實(shí)現(xiàn)統(tǒng)一OpenStack各個(gè)工程間的認(rèn)證管理。8.3對(duì)象存儲(chǔ)效勞Swift8.3.1Swift特性8.3.2應(yīng)用場(chǎng)景8.3.3Swift主要組件8.3.4Swift根本原理8.3.5實(shí)例分析108.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件對(duì)外提供對(duì)象效勞API查找效勞地址轉(zhuǎn)發(fā)用戶請(qǐng)求至相應(yīng)的賬戶、容器或者對(duì)象效勞進(jìn)行橫向擴(kuò)展來(lái)均衡負(fù)載12代理效勞ProxyServer認(rèn)證效勞AuthenticationServer驗(yàn)證訪問(wèn)用戶的身份信息獲得一個(gè)對(duì)象訪問(wèn)令牌〔Token〕驗(yàn)證訪問(wèn)令牌的有效性緩存下來(lái)直至過(guò)期時(shí)間118.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件緩存的內(nèi)容包括對(duì)象效勞令牌、賬戶和容器的存在信息緩存效勞可采用Memcached集群，Swift會(huì)使用一致性散列算法來(lái)分配緩存地址34緩存效勞CacheServer賬戶效勞AccountServer提供賬戶元數(shù)據(jù)和統(tǒng)計(jì)信息維護(hù)所含容器列表的效勞每個(gè)賬戶的信息被存儲(chǔ)在一個(gè)SQLite數(shù)據(jù)庫(kù)中。128.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件提供容器元數(shù)據(jù)和統(tǒng)計(jì)信息維護(hù)所含對(duì)象列表的效勞每個(gè)容器的信息也存儲(chǔ)在一個(gè)SQLite數(shù)據(jù)庫(kù)中56容器效勞ContainerServer對(duì)象效勞ObjectServer提供對(duì)象元數(shù)據(jù)和內(nèi)容效勞每個(gè)對(duì)象的內(nèi)容會(huì)以文件的形式存儲(chǔ)在文件系統(tǒng)中元數(shù)據(jù)會(huì)作為文件屬性來(lái)存儲(chǔ)138.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件采用推式〔Push〕更新遠(yuǎn)程副本確保被標(biāo)記刪除的對(duì)象從文件系統(tǒng)中移除。78復(fù)制效勞Replicator更新效勞Updater任務(wù)將會(huì)被序列化到在本地文件系統(tǒng)中進(jìn)行排隊(duì)更新效勞會(huì)在系統(tǒng)恢復(fù)正常后掃描隊(duì)列并進(jìn)行相應(yīng)的更新處理148.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件檢查對(duì)象、容器和賬戶的完整性文件隔離，復(fù)制其他副本以覆蓋本地?fù)p壞的副本其他類型的錯(cuò)誤會(huì)被記錄到日志910審計(jì)效勞Auditor賬戶清理效勞AccountReaper移除被標(biāo)記為刪除的賬戶刪除其所包含的所有容器和對(duì)象158.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件在涉及查詢Account〔賬戶〕、Container〔容器〕、Object〔對(duì)象〕信息時(shí)，就需要查詢集群的Ring信息。Ring使用Zone、Device、Partition和Replica來(lái)維護(hù)這些映射信息。Ring中每個(gè)Partition在集群中都〔默認(rèn)〕有3個(gè)Replica。每個(gè)Partition的位置由Ring來(lái)維護(hù)，并存儲(chǔ)在映射中。每次增減存儲(chǔ)節(jié)點(diǎn)時(shí)，需要重新平衡一下Ring文件中的工程。Ring是Swift最重要的組件，用于記錄存儲(chǔ)對(duì)象與物理位置間的映射關(guān)系。1Ring168.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件Proxy提供了Rest-fullAPI，并且符合標(biāo)準(zhǔn)的HTTP協(xié)議標(biāo)準(zhǔn)，這使得開(kāi)發(fā)者可以快捷構(gòu)建定制的Client與Swift交互。2ProxyServerProxyServer是提供SwiftAPI的效勞器進(jìn)程，負(fù)責(zé)Swift其余組件間的相互通信。178.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件3StorageServerStorageServer提供了磁盤設(shè)備上的存儲(chǔ)效勞。Swift中有三類存儲(chǔ)效勞器AccountContainerObject188.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件4ConsistencyServers目的是查找并解決由數(shù)據(jù)損壞和硬件故障引起的錯(cuò)誤。主要存在三個(gè)ServerAuditorUpdaterReplicator198.3對(duì)象存儲(chǔ)效勞SwiftSwift主要組件Auditor定時(shí)掃描發(fā)現(xiàn)損壞文件并移動(dòng)到隔離目錄Replicator掃描發(fā)現(xiàn)文件缺失，與遠(yuǎn)程效勞器同步ObjectServer計(jì)算文件Hash值進(jìn)行核對(duì)隔離對(duì)象處理流圖本章未完待續(xù)百度排名首位的大數(shù)據(jù)資料和交流中心百度排名首位的云計(jì)算資料和交流中心終