淘寶數(shù)據(jù)庫存儲培訓(xùn).ppt

淘寶數(shù)據(jù)庫存儲培訓(xùn),淘寶技術(shù)部松溪 2005-12-21,主要內(nèi)容,什么是存儲(What we call it a Storage) 訪問存儲的三種方式 RAID是支持存儲的一種技術(shù)(優(yōu)點(diǎn)是什么？) 存儲的發(fā)展過程 存儲與數(shù)據(jù)庫設(shè)計 對現(xiàn)有的EMC設(shè)備SAN存儲設(shè)備架構(gòu) SAN, SAN架構(gòu)的優(yōu)點(diǎn),實現(xiàn)SAN的成本 SAN 解決方案 PowerPath,多路徑訪問存儲的技術(shù) 參考資料 Q&A,什么是存儲 What we call it a Storage,Pc機(jī)的本地存儲是ide硬盤 服務(wù)器的本地存儲是scsi硬盤 小型機(jī)的本地存儲是scsi或者光纖硬盤 scsi磁盤柜 NAS設(shè)備 SAN設(shè)備 (別與內(nèi)存,緩存之類混淆了概念),訪問存儲的三種方式 DAS,NAS,SAN,直連:DAS（Direct Attached Storage，直接附加存儲，又稱直連存儲 ）,本機(jī)的硬盤也規(guī)類為DAS 網(wǎng)絡(luò)訪問:NAS（Network Attached Storage，網(wǎng)絡(luò)附加存儲），是一種專業(yè)的網(wǎng)絡(luò)文件存儲及文件備份設(shè)備，或稱為網(wǎng)絡(luò)直聯(lián)存儲設(shè)備、網(wǎng)絡(luò)磁盤陣列 光纖網(wǎng)絡(luò)訪問:SAN（Storage Area Network，存儲區(qū)域網(wǎng)絡(luò)）。它是一種通過光纖集線器、光纖路由器、光纖交換機(jī)等連接設(shè)備將磁盤陣列、磁帶等存儲設(shè)備與相關(guān)服務(wù)器連接起來的高速專用網(wǎng)絡(luò)。,RAID是支持存儲的一種技術(shù),增加存取速度 容錯,數(shù)據(jù)安全,存儲的發(fā)展過程,80年代末，NAS開始出現(xiàn) 90年代末，SAN出現(xiàn)，F(xiàn)C SAN 90年代更末，NAS也引入SAN的概念，號稱IP SAN 2000年代初，概念混亂的年代 NAS和SAN大戰(zhàn) 2003年初，iSCSI出現(xiàn)，先是1周后NetApp推出產(chǎn)品，幾個月后，大鱷魚Microsoft宣布支持iSCSI并開始戰(zhàn)車啟動，更后來是包括EMC在內(nèi)的DMX宣布開始支持 業(yè)內(nèi)開始了Block SAN和Filesystem SAN的名詞 2003年中，信息生命周期管理開始宣布認(rèn)購,小型機(jī)與CX700物理結(jié)構(gòu)圖,注:本圖片來自淘寶架構(gòu)文檔,交換機(jī)與主機(jī)的連接示意圖,EMC CX700 Front View,3U 4U 1U,DAE2 DPE SPS,EMC CX700 硬件模塊圖,EMC 軟件,注釋,PSM/Vault/Flare LUN Layout2,SAN & NAS,SAN Storage Area Network 存儲網(wǎng)絡(luò)在光纖技術(shù)上的應(yīng)用 NAS Network Attach Storage 網(wǎng)絡(luò)文件服務(wù),支持多種文件系統(tǒng). 只提供文件服務(wù),有預(yù)先安裝的定制操作系統(tǒng).,What is a SAN? Why use a SAN?,普通臺式機(jī)硬盤: #ATA #磁盤容量,最高200GB #磁盤陣列 #Dual Xeon P4 processors per SP - (3.2Ghz) #緩存:8Gb Cache #磁盤速率:133MB/s #軟件:無,EMC CX700: #FC2 Architecture #磁盤容量,最高35TB光纖磁盤容量 #磁盤陣列 #Dual Xeon P4 processors per SP - (3.2Ghz) #緩存:8Gb Cache - (512Gb DIMMs) #磁盤速率:230k IO/ps, 2000MB/s #軟件:有,作為存儲,EMC與普通PC機(jī)硬盤的比較,EMC具有普通硬盤的所有特性,可以往emc里裝操作系統(tǒng),并從這個系統(tǒng)啟動機(jī)器,SAN, SAN架構(gòu)的優(yōu)點(diǎn) 實現(xiàn)SAN的成本,SAN架構(gòu)的優(yōu)點(diǎn): 允許多個服務(wù)器共享存儲,并能夠提高效率及可用性,速度快. 實現(xiàn)SAN的成本: HBA卡(光纖卡)的價格是7500元-25000元 光纖交換機(jī)的價格,8-12端口的價格是4萬元左右,SAN 解決方案,SAN架構(gòu)的缺點(diǎn)就是實現(xiàn)成本昂貴,實現(xiàn)冗余,冗災(zāi)解決方案要考慮成本和所帶來的好處 Mirror View & Snap Shot 冗災(zāi) 看下圖,PowerPath體系結(jié)構(gòu)和多通路,參考資料,存儲在線 / 存儲備份之家 /forumdisplay.php?fid=34 iSCSI完全指南 /technology/iSCSI_1.