分布式數(shù)據(jù)存儲技術(shù)

分布式數(shù)據(jù)存儲技術(shù)目錄分布式存儲技術(shù)的概念分布式存儲技術(shù)的關(guān)鍵技術(shù)2常見的分布式存儲技術(shù)分布式存儲技術(shù)的概念3傳統(tǒng)的網(wǎng)絡(luò)存儲系統(tǒng)采用集中的存儲服務(wù)器存放所有數(shù)據(jù)，存儲服務(wù)器成為系統(tǒng)性能的瓶頸，也是可靠性和安全性的焦點(diǎn)，不能滿足大規(guī)模存儲應(yīng)用的需要。分布式存儲技術(shù)的概念4云計算時代，存儲是共享的，海量的，傳統(tǒng)的數(shù)據(jù)存儲方法達(dá)不到云計算應(yīng)用的需求，分布式存儲技術(shù)應(yīng)運(yùn)而生。分布式存儲技術(shù)的概念5分布式數(shù)據(jù)存儲，即存儲設(shè)備分布在不同的地理位置，數(shù)據(jù)就近存儲。分布式數(shù)據(jù)存儲將數(shù)據(jù)分散在多個存儲節(jié)點(diǎn)上，各個節(jié)點(diǎn)通過網(wǎng)絡(luò)相連，對這些節(jié)點(diǎn)的資源進(jìn)行統(tǒng)一的管理。這樣的設(shè)計解決了傳統(tǒng)的本地文件系統(tǒng)在文件大小、文件數(shù)量等方面的限制。分布式存儲技術(shù)的關(guān)鍵技術(shù)6分布式存儲技術(shù)中的關(guān)鍵技術(shù)有元數(shù)據(jù)管理、系統(tǒng)彈性擴(kuò)展技術(shù)、存儲層級內(nèi)的優(yōu)化技術(shù)、針對應(yīng)用和負(fù)載的存儲優(yōu)化技術(shù)等。元數(shù)據(jù)管理7元數(shù)據(jù)（Metadata）是描述數(shù)據(jù)的數(shù)據(jù)（dataaboutdata），主要是描述數(shù)據(jù)屬性（property）的信息。在云計算環(huán)境下，元數(shù)據(jù)的數(shù)據(jù)量也非常大，元數(shù)據(jù)的存取性能是整個分布式文件系統(tǒng)性能的關(guān)鍵。系統(tǒng)彈性擴(kuò)展技術(shù)8在大數(shù)據(jù)環(huán)境下，數(shù)據(jù)規(guī)模和復(fù)雜度的增加往往非常迅速，對系統(tǒng)的擴(kuò)展性能要求較高。實(shí)現(xiàn)存儲系統(tǒng)的高可擴(kuò)展性首先要解決兩個方面的重要問題，包含元數(shù)據(jù)的分配和數(shù)據(jù)的透明遷移。存儲層級內(nèi)的優(yōu)化技術(shù)9構(gòu)建存儲系統(tǒng)時．需要基于成本和性能來考慮，因此存儲系統(tǒng)通常采用多層不同性價比的存儲器件組成存儲層次結(jié)構(gòu)。針對應(yīng)用和負(fù)載的存儲優(yōu)化技術(shù)10云數(shù)據(jù)具有大規(guī)模、高動態(tài)及快速處理等特性，通用的數(shù)據(jù)存儲模型通常并不是最能提高應(yīng)用性能的模型。針對應(yīng)用和負(fù)載來優(yōu)化存儲，就是將數(shù)據(jù)存儲與應(yīng)用耦合，簡化或擴(kuò)展分布式文件系統(tǒng)的功能，常見的分布式存儲技術(shù)11Google文件系統(tǒng)：GFS是一個可擴(kuò)展的分布式文件系統(tǒng)，用于大型的、分布式的、對大量數(shù)據(jù)進(jìn)行訪問的應(yīng)用。Hadoop分布式文件系統(tǒng)：分布式計算中數(shù)據(jù)存儲管理的基礎(chǔ)，提供了基于流數(shù)據(jù)模式訪問和處理超大文件的功能。Ceph：一個沒有單點(diǎn)故障的分布式文件系統(tǒng)，Ceph