HDS 高端USP VM磁盤存儲產(chǎn)品介紹

1、1.1 hds 高端usp vm磁盤存儲產(chǎn)品介紹1.1.1 hds usp vm磁盤存儲產(chǎn)品硬件介紹hitachi tagmastore網(wǎng)絡(luò)存儲控制器usp vm是hds2007年最新推出的機(jī)架式設(shè)備，符合企業(yè)的成本要求。它采用了hitachi universal star network交換架構(gòu)，提供由業(yè)內(nèi)領(lǐng)先的hitachi tagmastore通用存儲平臺帶來的，經(jīng)過驗(yàn)證的企業(yè)級功能：外部存儲虛擬化、邏輯資源分區(qū)和通用復(fù)制。hds tagmastore usp vm為hds公司的第四代全光纖交換式企業(yè)級磁盤存儲系統(tǒng)，內(nèi)部仍然延續(xù)了hds的crossbar的交換式結(jié)構(gòu)（通過cache sw

2、itch，實(shí)現(xiàn)前端主機(jī)接口控制器、后端磁盤通道接口控制器數(shù)據(jù)到cache的數(shù)據(jù)快速交換），采用了hitachi自主研發(fā)hi-star iii交換芯片,具有更高的數(shù)據(jù)交換能力，因此可以提供更高的內(nèi)部帶寬。正是因?yàn)檫@樣的傳承，usp vm為用戶帶來了前所未有的性能、可用性和可靠性，以及先進(jìn)的存儲管理和數(shù)據(jù)復(fù)制功能。用戶可以把各種異構(gòu)存儲系統(tǒng)整合為一個虛擬池，通過一個中央控制臺，使用一套通用的工具進(jìn)行管理，從而簡化存儲環(huán)境，最大限度地利用現(xiàn)有資源，降低總體擁有成本。 一個新的存儲類型根據(jù)idc的研究，通用存儲平臺代表了一種新型存儲技術(shù)，能夠“潛在影響”存儲解決方案市場變化的產(chǎn)品。usp vm是這種類

3、型的入門級產(chǎn)品，可以提供： 基于控制器的虛擬化管理，最多可管理96pb內(nèi)部和外接存儲 8個邏輯分區(qū)、專用高速緩存、端口以及內(nèi)部和外部容量，以保證應(yīng)用服務(wù)質(zhì)量(qos) 在異構(gòu)存儲系統(tǒng)之間實(shí)現(xiàn)通用復(fù)制，保證業(yè)務(wù)連續(xù)性 hds tagmastore usp vm提供虛擬化技術(shù)hds tagmastore usp vm hds提供存儲虛擬化的技術(shù)，可以實(shí)現(xiàn)將不同廠商的存儲系統(tǒng)集合到同一個存儲池中。hds tagmastore usp vm內(nèi)部的磁盤為內(nèi)部存儲資源，與之相連的其它存儲設(shè)備上的資源是外部資源（可外連的磁盤存儲設(shè)備包括lightning storage 9900v, 9900, 7700e

4、、thunder storage 9500v&9200、ibm shark、emc symmetrix&dmx、emc cx系列等）。通過該功能，可以使用統(tǒng)一的管理平臺實(shí)現(xiàn)對內(nèi)部和外部存儲資源的統(tǒng)一管理，統(tǒng)一分配，可以按照應(yīng)用系統(tǒng)的性能要求分配相應(yīng)的存儲資源。從主機(jī)的角度看，內(nèi)部存儲資源和外部存儲資源功能完全相同，而內(nèi)部和外部存儲資源之間的數(shù)據(jù)交換可以通過存儲系統(tǒng)本身的數(shù)據(jù)復(fù)制和數(shù)據(jù)遷移軟件來完成。hds tagmastore usp vm通過虛擬化技術(shù)，外連sata磁盤存儲設(shè)備，即可為一些應(yīng)用提供sata的磁盤訪問。hds usp vm目前可以對包括emc dmx/cx、ibm ess/ds

5、8000/ds6000/ds4000系列、以及hds的9500v、9900v等磁盤存儲產(chǎn)品作為外部存儲資源，統(tǒng)一進(jìn)行管理。外部存儲可通過以下三種方式與usp vm進(jìn)行連接：光纖直連方式、光纖交換機(jī)方式、通道延展器（距離較遠(yuǎn)）。用戶因此可以在新的框架內(nèi)部署應(yīng)用，充分利用現(xiàn)有投資并使之增值，使it和業(yè)務(wù)計(jì)劃更加緊密地結(jié)合。作為hds的application optimized storage（面向應(yīng)用優(yōu)化的存儲）解決方案不可分割的一部分，usp vm為在開放系統(tǒng)和大型機(jī)環(huán)境中的各種存儲滿足應(yīng)用需求奠定了基礎(chǔ)。 主要特性 提供企業(yè)級嵌入式虛擬功能 內(nèi)部容量可擴(kuò)展為72tb 通過一個控制臺能夠管理16

6、pb的內(nèi)部和外部存儲 以一種對用戶透明的方式，實(shí)時調(diào)整并平衡工作負(fù)荷 允許為各種應(yīng)用創(chuàng)建8個專用虛擬存儲系統(tǒng)、并配給專用容量、高速緩存和端口來保證服務(wù)質(zhì)量 支持異構(gòu)多平臺連接性：光纖通道、ibm escon、ficon、nas和iscsi 提供一套全面的存儲管理服務(wù)，包括以應(yīng)用為中心的存儲域管理 實(shí)現(xiàn)在異構(gòu)存儲層面之間透明有序地移動數(shù)據(jù) 使用hitachi universal replicator（通用復(fù)制）軟件支持異構(gòu)數(shù)據(jù)復(fù)制 利用第三代universal star network架構(gòu) 以模塊化機(jī)體提供企業(yè)級功能，符合國內(nèi)大中型企業(yè)數(shù)據(jù)中心的需要usp vm型號規(guī)格連接性：主機(jī)端口最小/最大

7、數(shù)量16/48個光纖通道、16個ficon、16個escon虛擬主機(jī)最大端口數(shù)6,144lun最大數(shù)量16,384最小/最大磁盤數(shù)量5/240磁盤類型（光纖通道）73gb、146gb、300gb最大內(nèi)部容量72tb最大內(nèi)部和外接容量96pb最小/最大高速緩存4gb/64gb最小/最大控制內(nèi)存4gb/16gb專用虛擬存儲系統(tǒng)81.1.2 hds usp vm磁盤存儲產(chǎn)品軟件功能介紹1.1.2.1 resource manager系統(tǒng)資源管理、性能監(jiān)視套件resource manager是hds公司設(shè)計(jì)的存儲系統(tǒng)資源管理的軟件包，實(shí)現(xiàn)對存儲系統(tǒng)的配置、定義、性能監(jiān)視、狀態(tài)報告等管理功能。幫助用戶簡

8、化存儲系統(tǒng)設(shè)置管理操作流程，直觀表現(xiàn)存儲系統(tǒng)工作狀況和配置狀況，提供用戶實(shí)時監(jiān)控、歷史數(shù)據(jù)分析報告和變化發(fā)展的趨勢預(yù)估報告，幫助用戶優(yōu)化存儲系統(tǒng)性能，合理分配和利用存儲系統(tǒng)資源，提高系統(tǒng)管理的生產(chǎn)效率，釋放管理員的生產(chǎn)力，幫助客戶規(guī)范的、安全的實(shí)施和管理生產(chǎn)流程和管理流程，為用戶的容量評估、容量擴(kuò)展、資源使用提供了詳細(xì)的數(shù)據(jù)積累和報告，使客戶的投資回報率最大化。整個系統(tǒng)軟件包由remote console、lun manager、lun expansion、flash access、santinel、graph track軟件組合構(gòu)成。主要功能l 提供用戶友好的圖形用戶界面（gui）和web瀏

9、覽器的管理方式，從本地（存儲系統(tǒng)上）或遠(yuǎn)程（企業(yè)內(nèi)部網(wǎng)絡(luò)）通過windows工作站以web方式遠(yuǎn)程管理hds的企業(yè)存儲網(wǎng)絡(luò)系統(tǒng)l hsd功能是業(yè)界唯一的多主機(jī)共享存儲系統(tǒng)物理端口的解決方案，提供異構(gòu)主機(jī)系統(tǒng)或多個主機(jī)共享同一個物理通道端口訪問lun，提供主機(jī)更廣泛、靈活的san連接性，節(jié)約大量的投資l flash access通過在指定的cache中進(jìn)行讀寫i/o操作，以接近于主機(jī)通道數(shù)據(jù)傳輸?shù)乃俣龋瑏硖岣呔哂刑厥庖蟮臄?shù)據(jù)存取訪問的速度，為應(yīng)用系統(tǒng)提供了高速、安全的特殊虛擬存儲區(qū)域和數(shù)據(jù)讀寫方式，通過應(yīng)用系統(tǒng)的合理設(shè)計(jì)和使用，可以幫助用戶提高整體性能系統(tǒng)l lun manager對磁盤存儲系

10、統(tǒng)進(jìn)行系統(tǒng)配置和定義，lun分配，raid定義和管理，cache管理和配置，報告磁盤系統(tǒng)的配置信息l 監(jiān)視存儲系統(tǒng)工作情況，報告磁盤系統(tǒng)運(yùn)行狀態(tài)，提供錯誤預(yù)警和報警l 報告磁盤組性能情況，自動調(diào)整存儲系統(tǒng)的性能，支持?jǐn)?shù)據(jù)庫性能表現(xiàn)l 提供直觀、醒目的圖形和報表方式監(jiān)視存儲系統(tǒng)資源和系統(tǒng)性能，并提供預(yù)先設(shè)計(jì)的格式化的報告和趨勢分析報告l 完成shadowimage系統(tǒng)軟件和truecopy遠(yuǎn)程備份系統(tǒng)件的控制與定義操作l 具有zone分區(qū)安全管理l remote console遠(yuǎn)程控制臺軟件，包括local user interface和storage navigator軟件n local us

11、er interface本地用戶控制接口軟件n 管理存儲系統(tǒng)的門戶，基于java的開放管理平臺n 對存儲系統(tǒng)進(jìn)行簡單的本地化操作和管理n 可以線性的管理8個相同種類的存儲系統(tǒng)n 簡單易用的集中管理所有與存儲系統(tǒng)相關(guān)的軟件，包括商業(yè)連續(xù)性處理、性能、備份/恢復(fù)等軟件，簡化用戶的操作流程n 提供遠(yuǎn)程訪問功能，增強(qiáng)存儲系統(tǒng)的控制和管理的可用性和靈活性storage navigator存儲管理導(dǎo)航軟件l 基于java的獨(dú)立的管理機(jī)制和平臺，用戶使用具有java插件的瀏覽器，通過安全許可進(jìn)行hds usp/usc/usc系列的存儲管理，無需客戶端軟件，遠(yuǎn)程管理存儲系統(tǒng)l 通過java gui直觀清晰的定

12、義和控制邏輯卷（virtual volume）與物理磁盤的布局l 通過java rmi提供虛擬管理服務(wù)器功能，內(nèi)置web server,支持遠(yuǎn)程訪問l 通過raid java rmi和主機(jī)代理引擎提供邏輯卷的管理l lun manager磁盤邏輯單元管理軟件l 提供簡單易用的物理磁盤矩陣的集中管理功能，可以通過遠(yuǎn)程控制臺靈活、方便的配置磁盤矩陣組l 通過減少調(diào)整平衡i/o負(fù)載的工作時間，提高雇員的生產(chǎn)力l 配置fc光纖通道的屬性，包括fc-al和光纖通道的拓?fù)鋖 定義scsi端口與lun的映射關(guān)系，可以隨時動態(tài)增加、刪除scsi pathl 給lun分配scsi path、lun #、scsi

13、 id，fibre path等配置定義l 通過減少邏輯設(shè)備的競爭訪問，提高數(shù)據(jù)訪問的性能，減少主機(jī)i/o排隊(duì)時間l 可以將open 9s、open 3s、open ks聚合成extended lunl 支持open ks(1.9gb), open 3s(2.4gb), open 8s(7.3gb), open 9s(7.3gb) 的lun模式1.1.2.2 lun expansion(luse)lun卷容量擴(kuò)展軟件l 對于某些接口訪問lun數(shù)量有限制的主機(jī)操作系統(tǒng)，luse提供了訪問大容量存儲系統(tǒng)的解決方案l luse提供在開放系統(tǒng)的主機(jī)上使用較少的lu數(shù)目解決方案l 允許將最大36倍于標(biāo)準(zhǔn)o

14、pen-x容量大小的lu綁定為一個邏輯lu1.1.2.3 santinnel & hsd存儲區(qū)域網(wǎng)安全管理軟件l hsd功能是業(yè)界唯一的多主機(jī)共享存儲系統(tǒng)物理端口的解決方案，提供異構(gòu)主機(jī)系統(tǒng)或多個主機(jī)共享同一個物理通道端口訪問lun，提供主機(jī)更廣泛、靈活的san連接性，節(jié)約大量的投資l hds系列產(chǎn)品通過新增加的微碼功能率先實(shí)現(xiàn)邏輯虛擬端口軟件定義功能（hsd），在原有的多物理通道支持多操作系統(tǒng)主機(jī)平臺連接的基礎(chǔ)上，通過在單個物理端口上定義多個虛擬端口（最大為128個）來支持在同一個物理通道上的不同操作系統(tǒng)多主機(jī)平臺的連接l 在開放系統(tǒng)、多平臺或san環(huán)境中通過使用world wide nam

15、es,控制每臺主機(jī)僅可以訪問事先定義的lun，達(dá)到san結(jié)構(gòu)中zone 的安全管理功能和數(shù)據(jù)保護(hù)功能。l 支持開放系統(tǒng)和os390系統(tǒng)l 在hsd功能支持下，允許wwn群組訪問lun或lun群組功能，每個組最多可以有128個wwn訪問一個lun 或者lun群組l hsd最大配置：n wwns per port: 128n luns per hsd: 256n hsds per port:128n luns per port:512n hsds per system:4096 (32 x 128)1.1.2.4 graph track性能監(jiān)控軟件l 實(shí)時采集存儲系統(tǒng)運(yùn)行信息，通過圖形、報告的方式

16、幫助用戶監(jiān)視、分析存儲系統(tǒng)性能和資源使用情況l 將實(shí)時和歷史性的監(jiān)視數(shù)據(jù)以圖形方式顯示，并將峰值、趨勢等關(guān)鍵信息重點(diǎn)顯示l 實(shí)時監(jiān)控存儲系統(tǒng)的整機(jī)、控制單元、部件等的使用情況和性能,包括短期和長期的cache命中比率,讀寫操作比率,i/o次數(shù)統(tǒng)計(jì)l gt可以在array group和ldev層面收集和顯示詳細(xì)的i/o統(tǒng)計(jì)數(shù)據(jù)l gt對某些指定的部件提供了可調(diào)整的警告級別監(jiān)視機(jī)制，gt監(jiān)視chip、acp、ldev等控制單元的活動，當(dāng)超出用戶設(shè)定的閾值，gt將在監(jiān)控圖形中變換顏色警告用戶l gt 提供了內(nèi)部日志功能，詳細(xì)記錄內(nèi)部gt程序的操作，便于客戶核實(shí)操作、調(diào)查問題、監(jiān)視gt的操作情況l 為

17、用戶預(yù)先設(shè)計(jì)了格式化的報表，可以對存儲系統(tǒng)上的磁盤配置、邏輯卷分布、主機(jī)的連接情況分別作出報表統(tǒng)計(jì)等工作l 用戶可以自己設(shè)置的采樣頻率，graph track還可以根據(jù)用戶設(shè)定的其他參考值自動的管理有關(guān)性能和資源使用情況的數(shù)據(jù)l 可以顯示subsystem id、subsystem和ldev配置的詳細(xì)信息，直觀展示存儲系統(tǒng)的配置情況1.1.2.5 flash access邏輯盤常駐緩存，快速存取軟件l 通過在指定的cache中進(jìn)行讀寫i/o操作，以接近于主機(jī)通道數(shù)據(jù)傳輸?shù)乃俣?，來提高具有特殊要求的?shù)據(jù)存取訪問的速度，為應(yīng)用系統(tǒng)提供了高速、安全的特殊虛擬存儲區(qū)域和數(shù)據(jù)讀寫方式，通過應(yīng)用系統(tǒng)的合理

18、設(shè)計(jì)和使用，可以幫助用戶提高整體性能系統(tǒng)l 所有對flash access area寫操作的i/o，都是雙寫的操作模式，同時寫入cache和磁盤中，保證數(shù)據(jù)的完整性和安全性l 允許用戶將邏輯卷的數(shù)據(jù)保存在指定的cache區(qū)域中（占系統(tǒng)總cache的容量）l 可以動態(tài)的增加或刪除flash access區(qū)域的大小l 不用中斷正在運(yùn)行的flash access設(shè)置，而可以動態(tài)的擴(kuò)張容量l 在用戶人為的刪除flash access area中的數(shù)據(jù)之前，系統(tǒng)保證cache中的數(shù)據(jù)不會丟失，如果刪除flash access area，所有寫i/o都會保存到受影響的磁盤上，數(shù)據(jù)不會丟失l 每一個ldev

19、可以有最大1024個flash access extent1.1.2.6 hdlm通道負(fù)載均衡與故障自動切換軟件hdlm（hitachi dynamic link manager）是hds公司提供的安裝在主機(jī)端的存儲工具軟件。hdlm提供主機(jī)到存儲系統(tǒng)的i/o通道負(fù)載平衡和故障切換功能；增強(qiáng)了主機(jī)系統(tǒng)的數(shù)據(jù)可得性。雖然存儲系統(tǒng)通過raid技術(shù)對數(shù)據(jù)進(jìn)行了保護(hù)，但是單純的存儲系統(tǒng)是不能夠提供整個i/o系統(tǒng)的端到端的保護(hù)的。主機(jī)端到存儲系統(tǒng)的整個i/o路徑中發(fā)生了故障如：hba失效、fc交換設(shè)備故障、連接電纜斷開等會中斷主機(jī)端對數(shù)據(jù)的訪問；hds公司提供的hdlm軟件，通過對主機(jī)到存儲的冗余i/o

20、路徑的管理實(shí)現(xiàn)負(fù)載均和故障切換；保證了247業(yè)務(wù)不間斷的運(yùn)行。hdlm能夠提供l 支持scsi和fc的連接方式l 在san環(huán)境中能夠自動的發(fā)現(xiàn)主機(jī)到存儲的路徑l 支持i/o路徑的自動故障切換和恢復(fù)回切l(wèi) 支持多通道的負(fù)載均衡技術(shù)l 支持命令行圖形界面api接口l 支持所有的hds存儲系統(tǒng)hdlm軟件的特點(diǎn)l 高可靠：通過服務(wù)器的多條通道實(shí)現(xiàn)i/o通道自動的故障切換和恢復(fù)回切提高了服務(wù)器端數(shù)據(jù)訪問的安全性和性能。l 高性能：通過多條i/o通道的負(fù)載均衡提高了應(yīng)用系統(tǒng)數(shù)據(jù)訪問的性能，進(jìn)而有效改善了應(yīng)用系統(tǒng)的性能。l 易安裝：hdlm能夠自動查尋主機(jī)端到存儲端的路徑，這種查尋無論是直連的das結(jié)構(gòu)還

21、是復(fù)雜的san結(jié)構(gòu)都可以自動完成。因此hdlm安裝完成后不需要復(fù)雜的配置就可以使用了。hdlm的工作方式 hdlm對i/o通道進(jìn)行實(shí)時控制，檢測每個通道的狀態(tài)；當(dāng)有任何一個通道發(fā)生故障時自動將i/o切換到其它健康的通道上；同時，hdlm會自動記錄整個操作過程。hdlm能夠支持所有的hds存儲系統(tǒng)，并且在功能上基本相同。對于hds usp/usc/usc系列和thunder 9570v系列，在實(shí)現(xiàn)負(fù)載均衡的時候會有所不同。由于thunder 9570v系列中的luns是由兩個控制器分別控制的，因此服務(wù)器通過不同的通道同時連接兩個控制器時會存在兩種類型的通道 owner或non-ower的通道如下

22、圖：在owner path之間可以實(shí)現(xiàn)負(fù)載均衡。1.1.2.7 shadowimage“業(yè)務(wù)連續(xù)性”解決方案shadowimage是hds公司深入研究當(dāng)今商業(yè)社會業(yè)務(wù)連續(xù)性處理流程、7 x 24 x 365服務(wù)、數(shù)據(jù)可靠性、數(shù)據(jù)可用性、數(shù)據(jù)保護(hù)等一系列需求后，全力開發(fā)的、業(yè)界公認(rèn)的、技術(shù)領(lǐng)先的數(shù)據(jù)復(fù)制軟件?；诖鎯ο到y(tǒng)內(nèi)部運(yùn)行的數(shù)據(jù)復(fù)制技術(shù)，無需主機(jī)資源參與，最大程度的發(fā)揮了軟件的可用性；瞬間分離得到的多個數(shù)據(jù)備份拷貝，提供了用戶并行處理聯(lián)機(jī)業(yè)務(wù)、批量作業(yè)、應(yīng)用開發(fā)、測試、數(shù)據(jù)分析和數(shù)據(jù)挖掘、快速恢復(fù)的解決方案，節(jié)約了生產(chǎn)主機(jī)寶貴的資源而處理其他重要的業(yè)務(wù)，革新了批量作業(yè)、磁帶備份的新策略，給

23、客戶提供了最佳投資選擇最小的總擁有價值（toc）和最大化的投資回報。配合hds公司的truecopy和freedom智能存儲系統(tǒng)，為客戶提供高度安全的、高度靈活的、高度統(tǒng)一的數(shù)據(jù)保護(hù)、容災(zāi)、數(shù)據(jù)備份的解決方案。主要功能l 高速的、無需主機(jī)處理資源參與的數(shù)據(jù)復(fù)制技術(shù)，不依賴于任何的主機(jī)操作系統(tǒng)、文件系統(tǒng)、和數(shù)據(jù)庫系統(tǒng)的限制，以存儲系統(tǒng)內(nèi)部的軟件操作，完成基于磁道的邏輯卷復(fù)制l 本地鏡像、數(shù)據(jù)同步（異步方式）處理機(jī)制，在保證不增加主機(jī)i/o響應(yīng)時間的前提下，保護(hù)關(guān)鍵聯(lián)機(jī)生產(chǎn)數(shù)據(jù)的高度安全性、應(yīng)用系統(tǒng)的可靠性、數(shù)據(jù)的完整性，保護(hù)用戶的商業(yè)信譽(yù)l 立即獲得連續(xù)性業(yè)務(wù)處理的不同時間段（pit）的數(shù)據(jù)拷貝

24、，確保災(zāi)難或故障發(fā)生時的最新時間段的數(shù)據(jù)拷貝備份和數(shù)據(jù)的一致性，提供客戶靈活、快捷、安全的恢復(fù)方法l 通過shadowimage，可以在一個系統(tǒng)內(nèi)立即訪問關(guān)鍵業(yè)務(wù)數(shù)據(jù)的拷貝，立即共享對時間比較敏感的相關(guān)數(shù)據(jù)，保證業(yè)務(wù)處理流程的并行處理，確保企業(yè)為客戶提供實(shí)時的服務(wù)，提高客戶對企業(yè)的忠誠度，提升企業(yè)對客戶和市場的的敏捷反映程度l 革新數(shù)據(jù)備份策略，提高操作流程的效率，徹底清除連續(xù)性業(yè)務(wù)處理流程中的“備份窗口（backup-window）”時間和緩慢的磁帶備份時間，滿足日益增長的業(yè)務(wù)量和數(shù)據(jù)急劇增長的需要，在日趨激烈的競爭中獲取寶貴的空間l 在磁盤拷貝操作中提供快速的恢復(fù)技術(shù)和數(shù)據(jù)拷貝的高可用性，

25、完全提升數(shù)據(jù)恢復(fù)的速度和可靠性，摒棄緩慢的、因磁帶質(zhì)量問題引發(fā)故障的磁帶恢復(fù)機(jī)制，提升了企業(yè)對人為事故、災(zāi)難的快速恢復(fù)能力和應(yīng)變能力l 通過快速數(shù)據(jù)拷貝技術(shù)和連續(xù)的pit數(shù)據(jù)拷貝技術(shù)，可以快速、有效的準(zhǔn)備開發(fā)和測試環(huán)境，大大縮短新的商業(yè)應(yīng)用程序的開發(fā)、測試的時間和周期，為用戶快速推出業(yè)務(wù)品種提供強(qiáng)有力的保障，縮短業(yè)務(wù)創(chuàng)新的周期。l 通過快速數(shù)據(jù)拷貝技術(shù)，快速的復(fù)制真實(shí)用戶環(huán)境，大大簡化災(zāi)難恢復(fù)測試的步驟計(jì)劃、流程演練、例行測試，確保容災(zāi)計(jì)劃的可實(shí)施性l 提供高可用的、靈活的操作性，客戶可以自行配置和操作，無需hds工程師參與；無需預(yù)留專用的邏輯盤池，節(jié)約磁盤資源，提高了存儲系統(tǒng)的利用率 l 經(jīng)

26、過shadowimage復(fù)制的所有數(shù)據(jù)拷貝都是raid保護(hù)的，本地鏡像機(jī)制磁盤矩陣raid技術(shù)給用戶提供了雙重的數(shù)據(jù)保護(hù)l 支持開放系統(tǒng)和os390系統(tǒng)l 開放系統(tǒng)下1個源邏輯卷最多可以獲得10個拷貝（包括源卷），os390系統(tǒng)總共支持4個拷貝（包括源卷）l hds usp/usc/nsc系列最大支持8192 pairs（鏡像磁盤對）本地磁盤鏡像功能與快速數(shù)據(jù)恢復(fù)l shadowimage是存儲系統(tǒng)內(nèi)部的數(shù)據(jù)復(fù)制技術(shù)，磁盤的鏡像功能對于主機(jī)系統(tǒng)是不知情的處理，異步方式數(shù)據(jù)復(fù)制技術(shù)在不增加主機(jī)i/o響應(yīng)時間的前提下，提供了邏輯卷的實(shí)時（異步方式）數(shù)據(jù)保護(hù)功能，提高了系統(tǒng)的可靠性l 通過shado

27、wimage，可以定義生產(chǎn)數(shù)據(jù)邏輯盤與備份邏輯盤的鏡像復(fù)制關(guān)系，實(shí)時的（異步方式）保持2個邏輯磁盤的數(shù)據(jù)同步?？僧a(chǎn)生一個或多個與生產(chǎn)主機(jī)數(shù)據(jù)庫所在的盤卷(p-vol)完全相同的一個備份鏡像卷（s-vol），備份鏡像卷中的數(shù)據(jù)和生產(chǎn)數(shù)據(jù)庫中的數(shù)據(jù)完全相同。l shadowimage是實(shí)時鏡像寫與盤組raid保護(hù)，因此在同一usp/usc系統(tǒng)內(nèi)可得到2份或多份數(shù)據(jù)拷貝，并當(dāng)存放生產(chǎn)數(shù)據(jù)盤組發(fā)生故障不能恢復(fù)運(yùn)行時可通過備份卷的數(shù)據(jù)(兩邊是實(shí)時一致的)與切換地址定義恢復(fù)應(yīng)用，相比磁帶恢復(fù)方法，si有無可倫比的快速性、簡便性、可靠性革新數(shù)據(jù)備份策略，縮短業(yè)務(wù)處理流程中的“備份窗口（backup-wind

28、ow）”l 通過shadowimage可以快速獲得多個生產(chǎn)卷的pit數(shù)據(jù)拷貝，由此革新了業(yè)務(wù)處理流程的并行處理的新策略和解決方案，不但保持7x24連續(xù)服務(wù)，并且消除了數(shù)據(jù)備份窗口，引發(fā)了lan-free, server-free的數(shù)據(jù)備份的革命，節(jié)約了寶貴的cpu和內(nèi)存等資源、網(wǎng)絡(luò)資源，大大縮短了應(yīng)用系統(tǒng)因數(shù)據(jù)備份等原因的脫機(jī)時間l 備份卷（s-vol）是一個可獨(dú)立尋址的盤卷，通過分離磁盤鏡像對等操作，馬上可以獲得多個與生產(chǎn)數(shù)據(jù)完全一樣的數(shù)據(jù)拷貝備份卷，這些卷可以立即在同一系統(tǒng)內(nèi)使用，或者通過裝載等操作被其他的系統(tǒng)使用l 用戶應(yīng)用系統(tǒng)幾乎無需“0”秒的下機(jī)時間，即可利用其他主機(jī)備份通過shad

29、owimage得到的時間段（pit）的數(shù)據(jù)拷貝l 由于備份主機(jī)系統(tǒng)直接連接存儲系統(tǒng)，可以訪問si的數(shù)據(jù)拷貝，因此備份主機(jī)與磁帶庫構(gòu)成了lan-free的備份體系，釋放了傳統(tǒng)備份方法所占用的局域網(wǎng)帶寬l 兼容任何的主機(jī)備份軟件完全的、自動化的兼容veritas netbackup 等備份軟件pit(point in time)拷貝的并行應(yīng)用l shadowimage pit解決方案為用戶提供了業(yè)務(wù)并行處理的新思路和實(shí)際可行的操作流程，不但可以繼續(xù)生產(chǎn)系統(tǒng)的運(yùn)行，還可以同時處理以前無法并行處理的業(yè)務(wù)，極大的提高了生產(chǎn)效率和生產(chǎn)力l 縮短了應(yīng)用測試過程中環(huán)境準(zhǔn)備、測試失敗后的數(shù)據(jù)恢復(fù)的時間和周期，通

30、過si的瞬間分離技術(shù)、本地鏡像、多個pit拷貝等功能，上述復(fù)雜、麻煩、危險性極高的操作可以快速、安全的實(shí)施l si的pit拷貝解決方案可以幫助縮短應(yīng)用開發(fā)周期，應(yīng)用環(huán)境的準(zhǔn)備瞬間可以獲得，提高應(yīng)用測試、開發(fā)的效率，加快產(chǎn)品創(chuàng)新周期，保持市場的競爭力，是系統(tǒng)程序員、數(shù)據(jù)庫管理員的福音l 解決了長期困繞用戶的大量數(shù)據(jù)傳輸?shù)膯栴}。用戶的數(shù)據(jù)分析和數(shù)據(jù)挖掘業(yè)務(wù)將無需耗費(fèi)大量的時間進(jìn)行生產(chǎn)數(shù)據(jù)、歷史數(shù)據(jù)的傳輸與遷移，pit拷貝的使用可以保障客戶快速、實(shí)時的分析營業(yè)數(shù)據(jù)，極大的提升了商業(yè)價值，是用戶最好的投資回報shadowimage是hds提供的獨(dú)特系統(tǒng)件，既可以在主機(jī)上通過cci(command co

31、ntrol interface)控制操作，也可以在hds存儲系統(tǒng)本地的服務(wù)控制臺（svp）操作。它使主機(jī)系統(tǒng)和設(shè)備管理者能夠在后臺狀態(tài)下，為主機(jī)處理的數(shù)據(jù)在hds usp/usc系統(tǒng)內(nèi)部實(shí)時創(chuàng)建可獨(dú)立尋址的多copy卷。這些copy卷是應(yīng)用數(shù)據(jù)存放的現(xiàn)用生產(chǎn)卷的鏡象，可同時并行運(yùn)行任務(wù)。一旦生產(chǎn)數(shù)據(jù)的copy卷建立后，通過命令可以與其生產(chǎn)卷分割開，應(yīng)用系統(tǒng)數(shù)據(jù)庫可通過生產(chǎn)卷繼續(xù)做聯(lián)機(jī)應(yīng)用，與此同時，備份系統(tǒng)可利用copy卷進(jìn)行備份、報表生成和應(yīng)用開發(fā)測試等工作。shadowimage安全、經(jīng)濟(jì)、有效的數(shù)據(jù)容災(zāi)解決方案l shadowimage本地鏡像技術(shù)提供本地關(guān)鍵數(shù)據(jù)的實(shí)時（異步方式）的鏡像

32、備份解決方案，在保證正常的i/o響應(yīng)時間的前提下，用戶可以將關(guān)鍵的生產(chǎn)數(shù)據(jù)實(shí)時保持鏡像備份，長時間的保持?jǐn)?shù)據(jù)同步，鏡像操作由hds智能存儲系統(tǒng)內(nèi)部完成，對主機(jī)操作系統(tǒng)是不知情的正常的i/o操作；一旦生產(chǎn)卷故障，應(yīng)用系統(tǒng)可以快速的使用相同內(nèi)容的備份卷恢復(fù)生產(chǎn)系統(tǒng)。配合hds磁盤系統(tǒng)的raid技術(shù)，給用戶提供了雙重的數(shù)據(jù)保護(hù)l shadowimage的快速pit(point in time)拷貝技術(shù)，保障了用戶連續(xù)、快速、完整、可靠、靈活的獲得連續(xù)時間的關(guān)鍵數(shù)據(jù)拷貝；當(dāng)由于誤操作、測試、或者災(zāi)難對原始數(shù)據(jù)造成破壞，pit拷貝可以幫助客戶快速的、戲劇性的恢復(fù)最接近時間段、或者客戶指定的時間段的數(shù)據(jù)；

33、快速的復(fù)制、同步、分離、恢復(fù)機(jī)制為客戶提供了安全的、快速的、靈活的數(shù)據(jù)恢復(fù)保障，極大的縮短故障恢復(fù)的時間，最大限度的降低災(zāi)難的沖擊，減少用戶的損失l shadowimage提供了全新的、經(jīng)濟(jì)的、可實(shí)施的容災(zāi)測試解決方案，可以在保持本地生產(chǎn)系統(tǒng)和遠(yuǎn)程拷貝不受影響的情況下，通過遠(yuǎn)程si的pit拷貝，進(jìn)行實(shí)時的、模擬真實(shí)數(shù)據(jù)環(huán)境的災(zāi)難恢復(fù)計(jì)劃的測試。l truecopy+shadowimage配合使用為用戶提供了“終極”數(shù)據(jù)保護(hù)的解決方案，實(shí)現(xiàn)了多重媒介、多重備份、異地容災(zāi)、本地鏡像、本地恢復(fù)、異地恢復(fù)的立體數(shù)據(jù)保護(hù)解決方案。l 與hds的遠(yuǎn)程拷貝軟件truecopy配合使用，可以非常靈活按照不通的

34、需求和具體環(huán)境情況組合各種異地容災(zāi)備份方案，提供具有高度的靈活性、高度的安全性、高度的數(shù)據(jù)一致性、高度的可靠性的容災(zāi)數(shù)據(jù)保護(hù)解決方案注：目前，hds的truecopy軟件其獨(dú)有的時間戳（timestamp）和一致性組（consistency group）技術(shù)，是目前存儲業(yè)界唯一可行且安全的存儲系統(tǒng)之間的異步數(shù)據(jù)備份方案并被廣大用戶采用。1.1.2.8 truecopy-數(shù)據(jù)遠(yuǎn)程容災(zāi)解決方案truecopy數(shù)據(jù)遠(yuǎn)程容災(zāi)解決方案是hds公司在全面分析各種操作系統(tǒng)、各種容災(zāi)技術(shù)、仔細(xì)研究客戶對容災(zāi)的需求和理念之后，結(jié)合hds usp/usc 智能存儲系統(tǒng)的特點(diǎn)推出的數(shù)據(jù)遠(yuǎn)程容災(zāi)解決方案；徹底解決長期

35、困繞用戶的、難于進(jìn)行容災(zāi)方案的真實(shí)演練、真實(shí)數(shù)據(jù)測試的問題，最大限度的減少數(shù)據(jù)丟失問題；truecopy是基于磁盤存儲系統(tǒng)運(yùn)行的軟件包，不依賴任何的主機(jī)操作系統(tǒng)和其他第三方廠商軟件，為用戶提供了最安全、最開放、最經(jīng)濟(jì)、最實(shí)用的遠(yuǎn)程容災(zāi)解決方案。hds公司作為全球最大的獨(dú)立的磁盤存儲生產(chǎn)廠商，專注于單一化產(chǎn)品生產(chǎn)的優(yōu)勢，擁有熟悉ibm、hp、sun、compaq、sgi、dell、window nt/2000以及l(fā)inux等平臺和遠(yuǎn)程災(zāi)備實(shí)施的經(jīng)驗(yàn)豐富的服務(wù)工程師，向用戶提供全方位的災(zāi)備方案設(shè)計(jì)、技術(shù)咨詢和實(shí)施服務(wù)。目前，hds的ur軟件其獨(dú)有的時間戳（timestamp）和一致性組（consi

36、stency group）技術(shù)，是目前存儲業(yè)界唯一可行且安全的存儲系統(tǒng)之間的異步數(shù)據(jù)備份方案，保證異步處理方式下的數(shù)據(jù)一致性和完整性，最大程度的減少數(shù)據(jù)的丟失，并被廣大用戶采用。主要功能l ur異步數(shù)據(jù)拷貝軟件，是hds公司獨(dú)有的創(chuàng)新技術(shù)，是世界第一也是唯一的在開放環(huán)境中基于存儲硬件系統(tǒng)的、無需主機(jī)系統(tǒng)的、異步處理方式的、能夠保證數(shù)據(jù)一致性的遠(yuǎn)程拷貝軟件，它可以在重復(fù)發(fā)生的災(zāi)難中保護(hù)數(shù)據(jù)，在任何遠(yuǎn)的距離保持?jǐn)?shù)據(jù)庫記錄被修改順序的完整性l truecopy可以在在任何距離下，提供完整的、可靠的異地或同城災(zāi)難數(shù)據(jù)恢復(fù)和應(yīng)用系統(tǒng)快速重新啟動的解決方案，先進(jìn)的處理技術(shù)能夠最大程度的減少災(zāi)難時的數(shù)據(jù)丟失

37、，提升企業(yè)對事故和災(zāi)難的應(yīng)變能力和快速反應(yīng)能力。l 通過與hdsshadowimage（本地數(shù)據(jù)鏡像拷貝軟件）配合，可以用pit拷貝獲得真實(shí)的生產(chǎn)環(huán)境數(shù)據(jù)，不必中止生產(chǎn)系統(tǒng)的運(yùn)行，能夠頻繁的啟動低廉花費(fèi)的災(zāi)難模擬測試，最大的限度提升用戶的投資回報率(roi)，確保容災(zāi)計(jì)劃的可操作性，提高用戶的商業(yè)信心，免除客戶的后顧之憂l 簡化、減少用戶計(jì)劃用于設(shè)備維護(hù)、數(shù)據(jù)遷移、數(shù)據(jù)集中、備份的業(yè)務(wù)停頓時間l 通過減少用戶對緩慢的、高強(qiáng)度勞動的、基于磁帶的數(shù)據(jù)備份技術(shù)的依賴，線性化的提升it業(yè)務(wù)操作的效率l truecopy sync同步數(shù)據(jù)拷貝軟件，為用戶的任何數(shù)據(jù)提供了實(shí)時的、同步的遠(yuǎn)程“鏡像”保護(hù)功能

38、l truecopy sync軟件支持開放系統(tǒng)和os390系統(tǒng)環(huán)境truecopy synchronous遠(yuǎn)程容災(zāi)同步方式數(shù)據(jù)備份軟件l 遠(yuǎn)端的數(shù)據(jù)拷貝與本地的數(shù)據(jù)拷貝或生產(chǎn)數(shù)據(jù)永遠(yuǎn)保持一致，遠(yuǎn)端拷貝永遠(yuǎn)是本地數(shù)據(jù)盤的“鏡像”l 備份存儲系統(tǒng)總是與生產(chǎn)存儲系統(tǒng)數(shù)據(jù)同步，本地存儲系統(tǒng)與備份端存儲系統(tǒng)同步進(jìn)行相同的i/o更新，備份端存儲系統(tǒng)在更新時總是與生產(chǎn)端存儲系統(tǒng)保持完全一致的順序，以保證數(shù)據(jù)的一致性和完整性。當(dāng)生產(chǎn)中心發(fā)生災(zāi)難時，不會出現(xiàn)數(shù)據(jù)丟失。l 不依賴于主機(jī)系統(tǒng)、文件系統(tǒng)、數(shù)據(jù)庫系統(tǒng)，基于存儲系統(tǒng)的工作機(jī)制，利用存儲系統(tǒng)控制器的控制臺來啟動、監(jiān)控、控制遠(yuǎn)程數(shù)據(jù)備份的操作。節(jié)省主機(jī)系統(tǒng)的

39、cpu資源，提供用戶開放的高可用性 l 任何廠商的同步處理方式對應(yīng)用系統(tǒng)的響應(yīng)時間都會有沖擊。在進(jìn)行遠(yuǎn)程數(shù)據(jù)備份時，生產(chǎn)主機(jī)的應(yīng)用程序系統(tǒng)發(fā)出寫i /o指令，生產(chǎn)中心的存儲系統(tǒng)同時向本地磁盤和備份端的存儲系統(tǒng)發(fā)出寫操作的指令，必須等候備份端存儲系統(tǒng)回復(fù)寫操作完成以后，生產(chǎn)中心的存儲系統(tǒng)才向主機(jī)應(yīng)用程序回復(fù)i/o完成，因此主機(jī)應(yīng)用程序每次i/o將承受備份端存儲系統(tǒng)i/o確認(rèn)的延遲，以及由此帶來的主機(jī)系統(tǒng)處理能力降低和資源消耗的沖擊。l 受應(yīng)用系統(tǒng)i/o讀寫的活動頻率、網(wǎng)絡(luò)帶寬、可以容忍的交易響應(yīng)時間和其他因素的影響，遠(yuǎn)程同步工作方式有距離的限制，一般小于25公里1.1.2.9 hur遠(yuǎn)程異步容災(zāi)

40、軟件hds 通用復(fù)制軟件universal replicator，是基于hds最新一代的通用存儲平臺實(shí)現(xiàn)的異步遠(yuǎn)程數(shù)據(jù)復(fù)制軟件。通過hds通用存儲平臺的虛擬化功能，hds通用復(fù)制軟件可以實(shí)現(xiàn)同構(gòu)或異構(gòu)存儲系統(tǒng)之間的遠(yuǎn)程數(shù)據(jù)復(fù)制功能。hds通用復(fù)制軟件采用基于磁盤日志文件的技術(shù)，可以保證遠(yuǎn)程數(shù)據(jù)的一致性和完整性，同時，極大的降低了存儲系統(tǒng)cache和通信鏈路帶寬的需求。它是對hds原有的異步遠(yuǎn)程復(fù)制軟件的補(bǔ)充。hds通用復(fù)制軟件的原理如下圖所示：當(dāng)服務(wù)器端發(fā)出一個寫操作時，寫i/o按照寫發(fā)生的順序保存在主存儲系統(tǒng)的日志卷（jnl）中，遠(yuǎn)端的存儲系統(tǒng)通過發(fā)出讀日志命令從主存儲系統(tǒng)的日志卷（jnl）

41、中讀取記錄并將其寫到本地的日志卷（jnl）中，然后將該記錄更新到本地的數(shù)據(jù)卷中。在異步遠(yuǎn)程數(shù)據(jù)復(fù)制時，如何保證遠(yuǎn)端存儲系統(tǒng)的數(shù)據(jù)一致性是一個非常重要的課題。hds通用復(fù)制軟件通過時間戳和順序號技術(shù)，保證了在遠(yuǎn)端的存儲系統(tǒng)中接收到的記錄能夠按照其寫操作的發(fā)生順序更新到遠(yuǎn)端的存儲系統(tǒng)數(shù)據(jù)卷中。而這種技術(shù)已經(jīng)在日立原有的遠(yuǎn)程數(shù)據(jù)復(fù)制軟件中使用，并已經(jīng)經(jīng)過實(shí)踐證明。同時，hds通用復(fù)制軟件還支持?jǐn)?shù)據(jù)一致性組技術(shù)，可以保證跨多數(shù)據(jù)卷的數(shù)據(jù)的完整性和一致性。hds通用復(fù)制軟件引入了pull（拉）機(jī)制實(shí)現(xiàn)數(shù)據(jù)的復(fù)制，使用這種技術(shù)，主存儲系統(tǒng)不需要特定的資源將數(shù)據(jù)推（push）到遠(yuǎn)程存儲系統(tǒng)中，而是遠(yuǎn)程存儲系

42、統(tǒng)到本地存儲系統(tǒng)來讀日志卷。這樣就解除了主存儲系統(tǒng)用于數(shù)據(jù)遠(yuǎn)程復(fù)制的資源消耗，使得主存儲系統(tǒng)的資源100%的服務(wù)于生產(chǎn)系統(tǒng)，從而提高了存儲系統(tǒng)的性能。hds通用復(fù)制軟件也節(jié)省了通信鏈路的帶寬需求，在傳統(tǒng)的數(shù)據(jù)遠(yuǎn)程復(fù)制環(huán)境下，通信鏈路的帶寬需求不夠，則數(shù)據(jù)會累積在存儲系統(tǒng)的cache中，當(dāng)cache資源不夠時，遠(yuǎn)程數(shù)據(jù)復(fù)制過程中斷。采用基于磁盤日志方式的通用復(fù)制軟件，可以利用磁盤日志文件緩沖對帶寬的瞬時高需求，從而可以避免由于瞬間的高帶寬需求造成的遠(yuǎn)程數(shù)據(jù)復(fù)制的掛起。hds 9970v不提供hur功能，僅能提供truecopy同步/異步容災(zāi)技術(shù)。而hds tagmastore usp vm不但可

43、以提供truecopy同步/異步容災(zāi)技術(shù)，而且可以提供基于日志卷的hur遠(yuǎn)程容災(zāi)技術(shù)。hds通用復(fù)制軟件也有效的解決了在數(shù)據(jù)復(fù)制過程中的重新同步過程中的數(shù)據(jù)不一致性問題。在傳統(tǒng)的數(shù)據(jù)復(fù)制方式下，當(dāng)數(shù)據(jù)鏈路的原因造成數(shù)據(jù)不能夠復(fù)制，數(shù)據(jù)遠(yuǎn)程復(fù)制自動掛起，同時對生產(chǎn)端存儲系統(tǒng)的數(shù)據(jù)更新保存在存儲系統(tǒng)的bitmap表中，當(dāng)鏈路恢復(fù)后，存儲系統(tǒng)根據(jù)bitmap表中的記錄信息將更新過的磁道復(fù)制到備份端的存儲系統(tǒng)，而在這個過程中備份端的存儲系統(tǒng)的數(shù)據(jù)一致性是不能保證的，這就是數(shù)據(jù)復(fù)制的重新同步問題。由于hds通用數(shù)據(jù)復(fù)制軟件采用基于磁盤日志的工作方式，當(dāng)數(shù)據(jù)鏈路斷開后，對數(shù)據(jù)的更新仍然按順序保存在磁盤日志

44、中，這樣，當(dāng)鏈路恢復(fù)后，hds的通用復(fù)制軟件仍然到生產(chǎn)端存儲系統(tǒng)的日志文件中讀取數(shù)據(jù)更新記錄，這樣就解決了數(shù)據(jù)的重新同步問題。由于hds通用復(fù)制軟件是基于hds通用存儲平臺實(shí)現(xiàn)的數(shù)據(jù)遠(yuǎn)程異步復(fù)制功能，由于hds通用存儲平臺可以支持異構(gòu)的存儲系統(tǒng)連接和虛擬化，所以hds通用復(fù)制軟件可以實(shí)現(xiàn)異構(gòu)的存儲系統(tǒng)之間的數(shù)據(jù)遠(yuǎn)程異步復(fù)制功能。 芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆

45、蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀

46、螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁

47、蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄

48、蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆

49、蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇

50、薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀

51、蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂

52、螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅

53、薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆

54、蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇

55、螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁

56、薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂

57、蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆

58、袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁肇芁莀蝕螆肅芆蝕衿艿薄蠆羈肂薀蚈膃莇蒆蚇袃膀莂蚆羅蒞羋蚅肇膈薇蚄螇莄蒃螄衿膇荿螃羂莂芅螂肄膅蚄螁襖羈薀螀羆芃蒆蝿肈肆莂螈螈芁芇螈袀肄薆袇羃芀蒂袆肅肅莈裊螄羋莄襖羇肁蚃袃聿莆蕿袂膁腿蒅袂袁蒞莁蒈羃膇芇薇肆莃薅薆螅膆蒁薆袈莁蕆薅肀芄莃薄膂肇螞薃袂節(jié)薈薂羄肅蒄薁