2023學(xué)年完整公開課版openstackswift1

Openstack-swift目錄Swift基本概念Swift組件2Swift架構(gòu)Swift基本概念Swift架構(gòu)組成三個組成部分：ProxyServer、StorageServer和ConsistencyServer。架構(gòu)如圖：其中Storage和Consistency服務(wù)均允許在StorageNode上Swift組件ⅠProxyServer

ProxyServer是提供SwiftAPI的服務(wù)器進程，負責(zé)Swift其余組件間的相互通信。對于每個客戶端的請求，它將在Ring中查詢Account、Container或Object的位置，并且相應(yīng)地轉(zhuǎn)發(fā)請求。Proxy提供了Rest-fullAPI，并且符合標(biāo)準(zhǔn)的HTTP協(xié)議規(guī)范，這使得開發(fā)者可以快捷構(gòu)建定制的Client與Swift交互。Swift組件ⅡStorageServer

StorageServer提供了磁盤設(shè)備上的存儲服務(wù)。在Swift中有三類存儲服務(wù)器：Account、Container和Object。其中Container服務(wù)器負責(zé)處理Object的列表，Container服務(wù)器并不知道對象存放位置，只知道指定Container里存的哪些Object。這些Object信息以sqlite數(shù)據(jù)庫文件的形式存儲。Container服務(wù)器也做一些跟蹤統(tǒng)計，例如Object的總數(shù)、Container的使用情況。Swift組件ⅢConsistencyServers

在磁盤上存儲數(shù)據(jù)并向外提供Rest-fulAPI并不是難以解決的問題，最主要的問題在于故障處理。Swift的ConsistencyServers的目的是查找并解決由數(shù)據(jù)損壞和硬件故障引起的錯誤。主要存在三個Server：Auditor、Updater和Replicator。Auditor運行在每個Swift服務(wù)器的后臺持續(xù)地掃描磁盤來檢測對象、Container和賬號的完整性。如果發(fā)現(xiàn)數(shù)據(jù)損壞，Auditor就會將該文件移動到隔離區(qū)域，然后由Replicator負責(zé)用一個完好的拷貝來替代該數(shù)據(jù)。圖2給出了隔離對象的處理流圖。在系統(tǒng)高負荷或者發(fā)生故障的情況下，Container或賬號中的數(shù)據(jù)不會被立即更新。如果更新失敗，該次更新在本地文件系統(tǒng)上會被加入隊列，然后Updaters會繼續(xù)處理這些失敗了的更新工作，其中由AccountUpdater和ContainerUpdater分別負責(zé)Account和Object列表的更新。Replicator的功能是處理數(shù)據(jù)的存放位置是否正確并且保持數(shù)據(jù)的合理拷貝數(shù)，它的設(shè)計目的是Swift服務(wù)器在面臨如網(wǎng)絡(luò)中斷或者驅(qū)動器故障等臨時性故障情況時可以保持系統(tǒng)的一致性。Swift組件ⅣRingRing是Swift最重要的組件，用于記錄存儲對象與物理位置間的映射關(guān)系。在涉及查詢Account、Container、Object信息時，就需要查詢集群的Ring信息。Ring使用Zone、Device、Partition和Replica來維護這些映射信息。Ring中每個Partition在集群中都(默認)有3個Replica。每個Partition的位置由Ring來維護，并存儲在映射中。Ring文件在系統(tǒng)初始化時創(chuàng)建，之后每次增減存儲節(jié)點時，需要重新平衡一下Ring文件中的項目，以保證增減節(jié)點時，系統(tǒng)因此而發(fā)生遷移的文件數(shù)量最少。Swift部署架構(gòu)Swift應(yīng)用領(lǐng)域網(wǎng)盤Dropbox上億用戶，兼容的API對稱分布式架構(gòu)，ProxyRing結(jié)構(gòu)，數(shù)據(jù)完整，無狀態(tài)HTTPTalkIaaS公有云線性擴展/多租戶備份歸檔RACKSp