版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
虛擬化技術(shù)培訓(xùn)2008-12-25培訓(xùn)目標(biāo)清楚虛擬化概念和虛擬化產(chǎn)品特點(diǎn)了解虛擬化產(chǎn)品的技術(shù)特性會(huì)簡(jiǎn)單安裝配置虛擬機(jī)了解高級(jí)特性及實(shí)現(xiàn)原理,為進(jìn)一步掌握打下基礎(chǔ)內(nèi)容概述1、什么是虛擬化2、公司及產(chǎn)品介紹技術(shù)內(nèi)幕部署虛擬機(jī)資源管理高級(jí)特性一種讓系統(tǒng)組合、優(yōu)化共享資源,自動(dòng)滿足業(yè)務(wù)需求的解決方案業(yè)務(wù)信息技術(shù)(IT)供給需求什么是虛擬化?VirtualizeIT虛擬化類型虛擬化就是將底層硬件的功能抽象化在不同層面實(shí)現(xiàn)存儲(chǔ)網(wǎng)絡(luò)服務(wù)器/操作系統(tǒng)應(yīng)用系統(tǒng)管理成本IT和用戶生產(chǎn)效率硬件更新/舊的應(yīng)用遷移我如何簡(jiǎn)化日常工作?當(dāng)前所面臨的挑戰(zhàn):“用更少的資源干出更多的活”員工維護(hù)開發(fā)資源利用率低下電力、冷卻和機(jī)房空間有限計(jì)劃內(nèi)和計(jì)劃外停機(jī)時(shí)間越來越少我如何提高利用率?系統(tǒng)利用率100%0%開發(fā)和部署周期有限的資源各種不同的業(yè)務(wù)需求我如何有效地?cái)U(kuò)展?靈活性業(yè)務(wù)需求IT響應(yīng)時(shí)間Growth為什么要虛擬化?周五我們就需要一臺(tái)服務(wù)器!今晚你就要為我升級(jí)內(nèi)存!停下你手里的所有活計(jì),馬上修復(fù)網(wǎng)絡(luò)!服務(wù)器到貨需要3個(gè)星期?!我覺得你現(xiàn)在就應(yīng)該把這件事做好!你曾經(jīng)許諾今天就給我添加一臺(tái)服務(wù)器!為什么要虛擬化?服務(wù)器蔓延:特別是一個(gè)操作系統(tǒng)運(yùn)行一個(gè)應(yīng)用的情況支持過時(shí)操作系統(tǒng)和應(yīng)用整合沒有服務(wù)水準(zhǔn)()定義的應(yīng)用/或者提高服務(wù)水準(zhǔn)解決機(jī)房環(huán)境問題:散熱、電力、冷卻和占地面積提高整個(gè)計(jì)算平臺(tái)的平均利用率讓災(zāi)難恢復(fù)系統(tǒng)不再遠(yuǎn)離x86平臺(tái)降低支持老舊服務(wù)器和應(yīng)用的成本簡(jiǎn)化平臺(tái)和基礎(chǔ)架構(gòu)提高數(shù)據(jù)中心的靈活性:快速部署,智能、動(dòng)態(tài)資源調(diào)配提高安全性那些應(yīng)用環(huán)境需要虛擬化?測(cè)試/開發(fā)環(huán)境老舊的服務(wù)器和應(yīng)用文件和打印服務(wù)器服務(wù)器資源利用率不高的和應(yīng)用服務(wù)器郵件/即時(shí)消息服務(wù)器防火墻服務(wù)器數(shù)據(jù)庫服務(wù)器公司一覽成立時(shí)間員工總數(shù)用戶數(shù)關(guān)鍵合作伙伴關(guān)系渠道合作伙伴數(shù)客戶概要信息運(yùn)營(yíng)結(jié)構(gòu)1998約3,000的獨(dú)立子公司(2003年被收購(gòu))超過400萬3,000+、、、、5萬個(gè)企業(yè)客戶,其中《財(cái)富100強(qiáng)》中的100家公司的使命將工業(yè)標(biāo)準(zhǔn)服務(wù)器和桌面計(jì)算環(huán)境轉(zhuǎn)化為虛擬計(jì)算環(huán)境虛擬機(jī)特征:分區(qū)隔離封裝獨(dú)立于硬件什么是3(3)3是一個(gè)功能豐富的套件,它提供創(chuàng)建快速響應(yīng)數(shù)據(jù)中心所需的效率、可用性和動(dòng)態(tài)管理功能,并且這些功能是經(jīng)過生產(chǎn)驗(yàn)證的其中包括3.5和2.5浪潮銷售產(chǎn)品版本為3.5U2和2.5U32008年12月底295D2出廠全部預(yù)裝3i
3產(chǎn)品包括
3基礎(chǔ)版3標(biāo)準(zhǔn)版3企業(yè)版
(以前稱為“入門版”)適用于小型企業(yè)或分公司的虛擬化適用于任何工作負(fù)載的高可用性基礎(chǔ)架構(gòu)虛擬化套件適用于動(dòng)態(tài)數(shù)據(jù)中心的企業(yè)級(jí)基礎(chǔ)架構(gòu)虛擬化套件或i
是是是
是是是
是是是
是是是
是是
是
是
是
1、作為獨(dú)立許可產(chǎn)品提供。2、按每臺(tái)服務(wù)器授予許可權(quán)且獨(dú)立于3版本。3、、、、、、等產(chǎn)品基于。3i是的企業(yè)級(jí)免費(fèi)虛擬基礎(chǔ)架構(gòu)軟件,它具有3的全部功能,不同的是它只有32大小,而3至少要2空間,且3i沒有服務(wù)器控制臺(tái)。一臺(tái)集成了3i的服務(wù)器,可直接部署在虛擬化環(huán)境,通過對(duì)其進(jìn)行管理。
名詞解釋:遷移,以零停機(jī)時(shí)間遷移虛擬機(jī),將正在運(yùn)行的虛擬機(jī)從一臺(tái)物理服務(wù)器移動(dòng)至另一臺(tái)物理服務(wù)器,而不影響最終用戶。也可以冷遷移,冷遷移可以改變數(shù)據(jù)存儲(chǔ)的位置。():分布式資源調(diào)度程序()跨聚合到邏輯資源池中的硬件資源集合來動(dòng)態(tài)地分配和平衡計(jì)算容量。:當(dāng)服務(wù)器發(fā)生故障時(shí),受影響的虛擬機(jī)將在群集中留有備用容量的其他主機(jī)上自動(dòng)重啟。:一個(gè)集中式備份工具,該工具可利用集中式代理服務(wù)器并可降低生產(chǎn)主機(jī)上的負(fù)載。:進(jìn)行自動(dòng)修補(bǔ)和更新,從而簡(jiǎn)化對(duì)虛擬基礎(chǔ)架構(gòu)的管理,也可以對(duì)選定的和虛擬機(jī)進(jìn)行升級(jí)。3i與3.5的區(qū)別12/30/2023
服務(wù)控制臺(tái)API/SDKVirtualCenterESX3iAPI/SDKVirtualCenter遠(yuǎn)程CLI(腳本編制)CIM(硬件管理)VIClientVIClientESXServer3本地管理遠(yuǎn)程管理3i是的企業(yè)級(jí)免費(fèi)虛擬基礎(chǔ)架構(gòu)軟件,它具有3的全部功能,不同的是它只有32大小,而3至少要2空間,且3i沒有服務(wù)器控制臺(tái)。一臺(tái)集成了3i的服務(wù)器,可直接部署在虛擬化環(huán)境,通過對(duì)其進(jìn)行管理。
內(nèi)容概述1、什么是虛擬化2、公司及產(chǎn)品介紹技術(shù)內(nèi)幕部署虛擬機(jī)資源管理高級(jí)特性技術(shù)內(nèi)幕服務(wù)器體系結(jié)構(gòu)兼容性檢查
用戶界面虛擬軟件許可模式管理框架服務(wù)器內(nèi)幕什么讓服務(wù)器如此強(qiáng)大?是而不是服務(wù)器的體系結(jié)構(gòu):虛擬機(jī)監(jiān)控器管理要虛擬化處理器,虛擬機(jī)監(jiān)控器()將從0置換到1新型的和將會(huì)改善這種結(jié)構(gòu)
VMkernel123OS內(nèi)核0用戶應(yīng)用動(dòng)態(tài)地安排虛擬機(jī)和服務(wù)控制臺(tái)使用處理器的時(shí)間片按比例分配共享的時(shí)間片使用基于技術(shù)的內(nèi)存和進(jìn)程管理支持多核、超線程,包括對(duì)虛擬機(jī)進(jìn)行動(dòng)態(tài)伸縮周期性的負(fù)載均衡調(diào)節(jié)器在之間調(diào)節(jié)負(fù)載在之間移動(dòng)虛擬機(jī)以保證負(fù)載均衡在環(huán)境中避免單一被過度使用調(diào)度管理指定哪臺(tái)虛擬機(jī)應(yīng)該在哪個(gè)上運(yùn)行每20毫秒檢查所有一次虛擬機(jī)可以在不同時(shí)候運(yùn)行在不同上取決于負(fù)載和虛擬機(jī)遷移情況.
虛擬是3標(biāo)準(zhǔn)版和企業(yè)版的一部分允許單個(gè)虛擬機(jī)占用2到4個(gè)物理好處:增強(qiáng)虛擬機(jī)的性能在虛擬機(jī)上運(yùn)行計(jì)算密集型應(yīng)用測(cè)試開發(fā)的應(yīng)用系統(tǒng)在多處理器系統(tǒng)上的表現(xiàn)與多核以及超線程處理器兼容內(nèi)存管理內(nèi)存過量使用技術(shù)增強(qiáng)了利用率將配置好的虛擬機(jī)內(nèi)存整合,可以安全地超越物理內(nèi)存容量運(yùn)行虛擬機(jī)內(nèi)存漂移技術(shù)()動(dòng)態(tài)地將不活躍虛擬機(jī)當(dāng)中的內(nèi)存轉(zhuǎn)移到活躍虛擬機(jī)當(dāng)中使用人為壓縮不活躍虛擬機(jī)中的內(nèi)存,強(qiáng)迫他們使用自己的磁盤交換區(qū)域,將實(shí)際內(nèi)存提供給活躍的虛擬機(jī)使用透明頁共享技術(shù)節(jié)省了內(nèi)存眾多虛擬機(jī)相同的內(nèi)存頁只保留一份將內(nèi)存內(nèi)容置換到磁盤是最后一種手段透明內(nèi)存頁面共享內(nèi)存漂移網(wǎng)絡(luò)管理虛擬交換機(jī)是一個(gè)物理802.3以太網(wǎng)交換機(jī)的軟件模擬缺省端口數(shù)量是24目前的最大限制是1016虛擬交換機(jī)可以連接一個(gè)或者多個(gè)物理網(wǎng)卡每臺(tái)虛擬機(jī)最多可以設(shè)置4個(gè)虛擬網(wǎng)卡,每個(gè)網(wǎng)卡都有自己的地址通過配置,虛擬交換機(jī)可以發(fā)送接收具有標(biāo)示的數(shù)據(jù)包存儲(chǔ)管理表現(xiàn)為磁盤–或者控制器(最多4*15)虛擬磁盤可以映射到:本地磁盤的虛擬磁盤文件在中的虛擬磁盤文件在中的裸一個(gè)裸設(shè)備包含協(xié)議棧可用于訪問和設(shè)備虛擬機(jī)文件系統(tǒng)()—為虛擬機(jī)訪問高性能磁盤所優(yōu)化的簡(jiǎn)捷、快速的數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)卷用來存儲(chǔ)虛擬磁盤、的交換文件、休眠的狀態(tài)文件、重做日志,以及的虛擬機(jī)模版采用大數(shù)據(jù)塊存儲(chǔ)結(jié)構(gòu)優(yōu)化虛擬機(jī)性能支持大的分區(qū)(達(dá)2)有兩個(gè)專門為在環(huán)境中存儲(chǔ)虛擬機(jī)而設(shè)計(jì)的特別屬性是一個(gè)可多主機(jī)訪問的文件系統(tǒng):卷實(shí)現(xiàn)了文件鎖機(jī)制,使得它在環(huán)境中可以被多臺(tái)服務(wù)器訪問只對(duì)系統(tǒng)性能有微弱的影響:從虛擬機(jī)發(fā)出的命令可直接發(fā)送到物理設(shè)備上裸設(shè)備映射()物理兼容模式快照軟件復(fù)制軟件管理軟件虛擬兼容模式虛擬機(jī)快照虛擬機(jī)群集多路徑-可配置延遲的自動(dòng)化故障切換任意時(shí)刻有一條活動(dòng)路徑連接到任意通過改變狀態(tài),可以激活或者禁止某個(gè)故障切換路徑2個(gè)故障切換策略–最近使用過的(缺省策略)繼續(xù)使用上一次活動(dòng)的路徑–首選路徑當(dāng)首選路徑可用時(shí),切換到該路徑可以為每一個(gè)設(shè)置首選和活動(dòng)路徑
12
HBAHBA
存儲(chǔ)技術(shù)比較技術(shù)協(xié)議傳輸接口性能
()數(shù)據(jù)塊方式訪問數(shù)據(jù)
高(由于采用專用網(wǎng)絡(luò))據(jù)塊方式訪問數(shù)據(jù)
中(取決于網(wǎng)絡(luò)的設(shè)計(jì)整合)文件(不直接訪問)交換機(jī)中(取決于網(wǎng)絡(luò)的設(shè)計(jì)整合)
組成部分組成部分
NIC
SP網(wǎng)絡(luò)
–;a
組成部分
NIC
NIC存儲(chǔ)技術(shù)功能比較類型啟動(dòng)虛擬機(jī)啟動(dòng)服務(wù)器虛擬機(jī)集群/YYYYYYYYYYYYNYYNYNNNY資源管理資源由管理由虛擬機(jī)所有人管理由虛擬機(jī)管理員管理處理器負(fù)載均衡超線程多核處理器虛擬最小速率最大速率處理器榜定共享分配內(nèi)存頁面共享內(nèi)存漂移使用交換最大容量最小容量共享分配磁盤共享分配網(wǎng)卡捆綁流量控制操作系統(tǒng)看到的是什么從設(shè)備管理界面看到虛擬的設(shè)備虛擬機(jī)文件核心文件(非易失性內(nèi)存-)<虛擬機(jī)名稱>(虛擬機(jī)配置文件)<虛擬機(jī)名稱>(虛擬磁盤文件)<虛擬機(jī)名稱>(內(nèi)存交換文件)<虛擬機(jī)名稱>(快照數(shù)據(jù))與某個(gè)虛擬機(jī)相關(guān)的文件都存放在文件系統(tǒng)中的特定文件夾里面封裝這兩個(gè)文件代表整個(gè)虛擬機(jī)客戶虛擬機(jī)的配置文件支持什么服務(wù)器和操作系統(tǒng)?支持什么和網(wǎng)絡(luò)驅(qū)動(dòng)?支持什么存儲(chǔ)設(shè)備?請(qǐng)察看
3的系統(tǒng)兼容性列表()!支持什么樣的備份軟件?請(qǐng)察看
3的兼容性列表!請(qǐng)察看
3的/系兼容性列表!請(qǐng)察看
3的備份軟件兼容性列表!這些兼容列表在哪里?所有文檔都在:@安全地、集中化管理用戶的虛擬架構(gòu)通過在服務(wù)器之間動(dòng)態(tài)移動(dòng)虛擬機(jī)來優(yōu)化服務(wù)器的利用率采用標(biāo)準(zhǔn)化的虛擬機(jī)模版迅速部署新的服務(wù)器增強(qiáng)業(yè)務(wù)連續(xù)性,并且消除計(jì)劃內(nèi)停機(jī)
虛擬架構(gòu)管理軟件通過進(jìn)行訪問和控制直接訪問和控制,無
/服務(wù)器
數(shù)據(jù)庫集中管理虛擬架構(gòu)()訪問使用全部功能直接訪問主機(jī)單一主機(jī)管理
訪問管理多臺(tái)虛擬機(jī)直接訪問主機(jī)只能管理該主機(jī)上的虛擬機(jī)服務(wù)器ESX3.x服務(wù)器ESX3.0
(服務(wù))安裝在這里ESX3.x用戶界面軟件許可簡(jiǎn)介缺省情況下,在主機(jī)上面安裝和配置服務(wù)器也可以安裝在現(xiàn)有的服務(wù)器,或者與獨(dú)立的主機(jī)系統(tǒng)之上集中管理的軟件許可可以被跟蹤,并且按2個(gè)處理器的增量動(dòng)態(tài)分配或中心分配軟件許可一旦配置完成,和服務(wù)器在服務(wù)器不可用的情況下(最長(zhǎng)14天)也可以全功能運(yùn)行
3系統(tǒng)服務(wù)器
(應(yīng)用)2.0服務(wù)器文件基于主機(jī)的軟件許可適用于沒有的小型環(huán)境需要在每一臺(tái)服務(wù)器上配置軟件許可文件,沒有集中管理的優(yōu)點(diǎn)允許功能的配置和改變完全獨(dú)立于服務(wù)器但是,需要手工進(jìn)行軟件許可的分配和跟蹤可以和與集中的、利用功能的軟件許可并存
3.5系統(tǒng)文件文件文件對(duì)的支持管理主機(jī)獲取變量,使得用戶可以監(jiān)控主機(jī)服務(wù)器和它們上面的虛擬機(jī)各種項(xiàng)目參數(shù),了解它們?nèi)绾问褂酶鞣N資源的系統(tǒng)狀態(tài)(主機(jī))–個(gè)數(shù),內(nèi)存容量,服務(wù)器是否加載系統(tǒng)資源使用情況(主機(jī))被服務(wù)控制臺(tái)使用的內(nèi)存容量被某個(gè)特定虛擬機(jī)所使用的主機(jī)資源被某個(gè)特定虛擬機(jī)使用的主機(jī)內(nèi)存資源沒有被使用的主機(jī)內(nèi)存資源主機(jī)磁盤上的數(shù)據(jù)使用情況,包括數(shù)據(jù)讀寫次數(shù)和數(shù)量虛擬機(jī)的支持虛擬機(jī)配置虛擬機(jī)配置文件的訪問路徑運(yùn)行在虛擬機(jī)上的操作系統(tǒng)配置給虛擬機(jī)使用的內(nèi)存容量虛擬機(jī)能看到哪些磁盤控制器虛擬機(jī)能看到哪些網(wǎng)卡虛擬機(jī)能看到哪些軟驅(qū)虛擬機(jī)能看到哪些光驅(qū)內(nèi)容概述1、什么是虛擬化2、公司及產(chǎn)品介紹技術(shù)內(nèi)幕部署虛擬機(jī)資源管理高級(jí)特性如何部署虛擬機(jī)安裝3.5安裝建立虛擬機(jī)網(wǎng)絡(luò)配置1、3.5安裝——將3.5安裝光盤放入光驅(qū),光驅(qū)引導(dǎo)出現(xiàn)以下界面,回車開始安裝1、3.5安裝——進(jìn)行下一步1、3.5安裝——出現(xiàn)安裝歡迎畫面1、3.5安裝——進(jìn)行分區(qū)1、3.5安裝——網(wǎng)絡(luò)設(shè)置1、3.5安裝——時(shí)區(qū)設(shè)置1、3.5安裝——密碼設(shè)置1、3.5安裝——安裝完成后重啟正常啟動(dòng)1、安裝——下一步2、安裝——選擇安裝類型2、安裝——部署選項(xiàng)2、安裝——其他設(shè)置與安裝過程2、安裝——安裝成功2、安裝——本地登陸3、安裝虛擬機(jī)——建立數(shù)據(jù)中心3、安裝虛擬機(jī)——在數(shù)據(jù)中心新建群集或添加主機(jī)3、安裝虛擬機(jī)——新建群集選項(xiàng)3、安裝虛擬機(jī)——添加主機(jī)3、安裝虛擬機(jī)——新建虛擬機(jī)3、安裝虛擬機(jī)——正常安裝操作方式安裝使用4、網(wǎng)絡(luò)配置介紹有三種網(wǎng)絡(luò)接口類型1、虛擬機(jī)虛擬機(jī)中要虛擬網(wǎng)卡即應(yīng)用要使用的網(wǎng)卡的端口2、建立自動(dòng)遷移和,控制存儲(chǔ)路徑,控制存儲(chǔ)路徑3、服務(wù)控制臺(tái)主機(jī)的控制端口注:安裝后會(huì)自動(dòng)創(chuàng)建1和3,2要手動(dòng)建立端口4、網(wǎng)絡(luò)配置介紹服務(wù)控制臺(tái)網(wǎng)絡(luò)端口添加介紹建議每臺(tái)主機(jī)使用兩個(gè)控制臺(tái)端口,避免出現(xiàn)單點(diǎn)故障,無法連接服務(wù)控制臺(tái)網(wǎng)絡(luò)端口添加介紹服務(wù)控制臺(tái)網(wǎng)絡(luò)端口添加介紹服務(wù)控制臺(tái)網(wǎng)絡(luò)端口添加介紹內(nèi)容概述1、什么是虛擬化2、公司及產(chǎn)品介紹技術(shù)內(nèi)幕部署虛擬機(jī)資源管理概念——預(yù)留、限制、份額;資源池高級(jí)特性資源管理資源由管理由虛擬機(jī)所有人管理由虛擬機(jī)管理員管理處理器負(fù)載均衡超線程多核處理器虛擬最小速率最大速率處理器榜定共享分配內(nèi)存頁面共享內(nèi)存漂移使用交換最大容量最小容量共享分配磁盤共享分配網(wǎng)卡捆綁流量控制虛擬機(jī)資源分配缺省情況下,所有虛擬機(jī)都會(huì)收到:平等分配給每個(gè)虛擬的物理共享時(shí)間片平等分配給每虛擬內(nèi)存的共享物理內(nèi)存預(yù)留的主機(jī)資源為虛擬機(jī)分配更多或更少的資源
為特定虛擬機(jī)指定優(yōu)先級(jí)預(yù)留和限制()適用于和內(nèi)存資源預(yù)留是一種最低資源保證
只有預(yù)留資源在不使用的時(shí)候可以被其它虛擬機(jī)使用(預(yù)留內(nèi)存不可以)缺省情況下,預(yù)留的值為零限制是對(duì)一臺(tái)虛擬機(jī)的和內(nèi)存資源定義的使用上限表示為或者缺省狀態(tài)下無限制預(yù)留和限制()份額()為一臺(tái)虛擬機(jī)指定相對(duì)優(yōu)先級(jí)或重要性只有在發(fā)生資源競(jìng)爭(zhēng)的情況下執(zhí)行
防止虛擬機(jī)獨(dú)占資源保證可預(yù)測(cè)的資源共享通常分為三級(jí):、和(比例為4:2:1)可以改變?yōu)槠渌敌碌奶摂M機(jī)上電會(huì)影響其它所有虛擬機(jī)的共享狀態(tài)份額()是如何工作的?值改變值新虛擬機(jī)上電虛擬機(jī)下電如果有競(jìng)爭(zhēng),每臺(tái)虛擬機(jī)保證得到1/3的資源如果有競(jìng)爭(zhēng),虛擬機(jī)B保證得到3/5的資源如果有競(jìng)爭(zhēng),虛擬機(jī)B保證得到1/2的資源如果有競(jìng)爭(zhēng),虛擬機(jī)B保證得到3/5的資源準(zhǔn)入控制預(yù)留資源必須滿足如果現(xiàn)有資源的剩余值小于要啟動(dòng)的虛擬機(jī)的預(yù)留資源值,則該虛擬機(jī)無法啟動(dòng)內(nèi)存=2Reservation=512Limit=1GB
Reservation=1GBLimit=1GBReservation=1GBLimit=1GB
X資源池是對(duì)象庫中的一個(gè)對(duì)象用來控制為虛擬機(jī)所用的和內(nèi)存資源總和可以和訪問控制和許可聯(lián)合使用群集資源池容量=
根資源池:
5x(4.8,4)
=(24,20)1
(=16,=12)2
(3,3)資源池屬性份額(),,預(yù)留限制可擴(kuò)展的預(yù)留不選–系統(tǒng)認(rèn)為只有該資源池剩余的資源可用選中–系統(tǒng)認(rèn)為該資源池和其所有上級(jí)資源池內(nèi)的剩余資源均可用資源池準(zhǔn)入控制在下面任何一種情況下都會(huì)進(jìn)行準(zhǔn)入控制:創(chuàng)建一個(gè)資源池,一臺(tái)虛擬機(jī)上電,或者改變資源池的設(shè)置參數(shù)如果沒有選擇可擴(kuò)展預(yù)留選項(xiàng):管理服務(wù)器檢查資源池是否有足夠的資源來滿足該資源池和虛擬機(jī)對(duì)最低預(yù)留的要求如果選擇了可擴(kuò)展預(yù)留選項(xiàng):如果有足夠的資源,執(zhí)行操作如果沒有足夠的資源,管理服務(wù)器在一個(gè)上級(jí)資源池(父級(jí)或者祖級(jí))中檢查是否有可用資源。如果有,執(zhí)行操作。否則,不執(zhí)行操作??蓴U(kuò)展預(yù)留–圖示資源池準(zhǔn)入控制–圖示資源池概念圖示ClusterPool1Pool2VMAVMCVMBVMDShares=8000Shares=2000Shares=2000Shares=4000Shares=8000Shares=4000資源池概念圖示12ACBD800020002000400080004000E2000內(nèi)容概述1、什么是虛擬化2、公司及產(chǎn)品介紹技術(shù)內(nèi)幕部署虛擬機(jī)資源管理概念——預(yù)留、限制、份額;資源池高級(jí)特性——、、、虛擬機(jī)集群、、等遷移——遷移遷移是在虛擬機(jī)上電狀態(tài)下移動(dòng)它提高總體硬件的利用率消除計(jì)劃內(nèi)停機(jī)與配合使用條件–主機(jī)激活功能的源和目的服務(wù)器主機(jī)源和目的服務(wù)器主機(jī)必須:可以看到所有的(或)或者被虛擬機(jī)使用的設(shè)備一個(gè)千兆以太網(wǎng)段訪問同一個(gè)物理網(wǎng)段兼容的新型發(fā)布后,會(huì)有新的兼容性說明
限制特征需要精確匹配嗎?時(shí)鐘頻率,緩存大小,超線程以及核的數(shù)量不必–由服務(wù)器虛擬化并調(diào)度對(duì),P3對(duì)P4對(duì)是的–相近,但是本質(zhì)上存在很多不同的指令集和一些細(xì)小、不知的差別3指令集對(duì)非3指令集是的–多媒體指令集被應(yīng)用層直接調(diào)用虛擬化硬件協(xié)助(對(duì)非)是的–但是僅限于64位的虛擬機(jī)沒有/()位是的–但是可以對(duì)每臺(tái)虛擬機(jī)或者服務(wù)器主機(jī)進(jìn)行定制對(duì)64位虛擬機(jī)的支持32位虛擬機(jī)64位虛擬機(jī)(上電狀態(tài))對(duì)與兼容的32位和64位完全支持(到或者到).對(duì)與兼容的64位完全支持(到或者到)冷遷移(下電狀態(tài))對(duì)與兼容的32位和64位完全支持,不必考慮之間的兼容性(到?jīng)]有問題!)對(duì)與兼容的64位完全支持(到?jīng)]有問題!)是如何工作的?準(zhǔn)備在目標(biāo)主機(jī)上(2)部署新的虛擬機(jī)用戶正在訪問位于1上面的虛擬機(jī)A,并且準(zhǔn)備到22VMA1共享存儲(chǔ)是如何工作的?2VMA1VMA準(zhǔn)備在目標(biāo)主機(jī)上(2)部署新的虛擬機(jī)將源主機(jī)上虛擬機(jī)A的內(nèi)存拷貝到目標(biāo)主機(jī)上,變化的內(nèi)存內(nèi)容保存在位圖之中Memory
Bitmap共享存儲(chǔ)是如何工作的?2VMA1VMA準(zhǔn)備在目標(biāo)主機(jī)上(2)部署新的虛擬機(jī)將源主機(jī)上虛擬機(jī)A的內(nèi)存拷貝到目標(biāo)主機(jī)上,變化的內(nèi)存內(nèi)容保存在位圖之中掛起源主機(jī)上面的虛擬機(jī)A,將內(nèi)存位圖拷貝到目標(biāo)主機(jī)上Memory
BitmapMemory
Bitmap共享存儲(chǔ)是如何工作的?2VMA1VMA準(zhǔn)備在目標(biāo)主機(jī)上(2)部署新的虛擬機(jī)將源主機(jī)上虛擬機(jī)A的內(nèi)存拷貝到目標(biāo)主機(jī)上,變化的內(nèi)存內(nèi)容保存在位圖之中掛起源主機(jī)上面的虛擬機(jī)A,將內(nèi)存位圖拷貝到目標(biāo)主機(jī)上在目標(biāo)主機(jī)上恢復(fù)虛擬機(jī)A運(yùn)行Memory
Bitmap共享存儲(chǔ)是如何工作的?2VMA1VMA準(zhǔn)備在目標(biāo)主機(jī)上(2)部署新的虛擬機(jī)將源主機(jī)上虛擬機(jī)A的內(nèi)存拷貝到目標(biāo)主機(jī)上,變化的內(nèi)存內(nèi)容保存在位圖之中掛起源主機(jī)上面的虛擬機(jī)A,將內(nèi)存位圖拷貝到目標(biāo)主機(jī)上在目標(biāo)主機(jī)上恢復(fù)虛擬機(jī)A運(yùn)行當(dāng)系統(tǒng)訪問修改的內(nèi)存時(shí),使用源主機(jī)中的“”(“”就是源主機(jī)中遺留的內(nèi)容拷貝到目標(biāo)主機(jī)中,直到內(nèi)存內(nèi)容全部成功拷貝)Memory
Bitmap
共享存儲(chǔ)是如何工作的?21VMA準(zhǔn)備在目標(biāo)主機(jī)上(2)部署新的虛擬機(jī)將源主機(jī)上虛擬機(jī)A的內(nèi)存拷貝到目標(biāo)主機(jī)上,變化的內(nèi)存內(nèi)容保存在位圖之中掛起源主機(jī)上面的虛擬機(jī)A,將內(nèi)存位圖拷貝到目標(biāo)主機(jī)上在目標(biāo)主機(jī)上恢復(fù)虛擬機(jī)A運(yùn)行當(dāng)系統(tǒng)訪問修改的內(nèi)存時(shí),使用源主機(jī)中的“”(“”就是源主機(jī)中遺留的內(nèi)容拷貝到目標(biāo)主機(jī)中,直到內(nèi)存內(nèi)容全部成功拷貝)從源主機(jī)中刪除虛擬機(jī)A共享存儲(chǔ)群集()——和/或群集()–簡(jiǎn)介一群服務(wù)器主機(jī)以及和它們相關(guān)聯(lián)的、定義了共享資源的虛擬機(jī)可以選擇激活和/或功能無需特殊軟件許可就可以創(chuàng)建如何工作?虛擬機(jī)初始運(yùn)行位置在資源池中上電虛擬機(jī)建議運(yùn)行主機(jī)(優(yōu)先級(jí)列表)動(dòng)態(tài)平衡監(jiān)視關(guān)鍵虛擬機(jī)、資源池和主機(jī)將有資格的資源賦予資源池和虛擬機(jī)建議遷移的目的在主機(jī)和群集之間平衡虛擬機(jī)負(fù)載強(qiáng)化資源策略的精確度(預(yù)留、限制和份額)對(duì)虛擬機(jī)運(yùn)行位置進(jìn)行約束關(guān)聯(lián)()和反關(guān)聯(lián)定()規(guī)則兼容性(類型、和的連通性)讓事情變得簡(jiǎn)單–自動(dòng)化級(jí)別在虛擬機(jī)啟動(dòng)時(shí),自動(dòng)地進(jìn)行初始運(yùn)行位置的確認(rèn),并且在虛擬機(jī)運(yùn)行時(shí)進(jìn)行動(dòng)態(tài)平衡自動(dòng)化級(jí)別虛擬機(jī)初始位置確定動(dòng)態(tài)平衡手動(dòng)手動(dòng)手動(dòng)半自動(dòng)自動(dòng)手動(dòng)全自動(dòng)自動(dòng)自動(dòng)群集設(shè)置反關(guān)聯(lián)規(guī)則()在不同的主機(jī)上運(yùn)行不同的虛擬機(jī)動(dòng)機(jī):高可用,集群應(yīng)用關(guān)聯(lián)規(guī)則()在同一臺(tái)主機(jī)上運(yùn)行不同的虛擬機(jī)動(dòng)機(jī):明確運(yùn)行位置,性能考慮資源池和要做與不要做的事情正確使用預(yù)留和份額份額通常是更靈活的策略工具使用份額隔離虛擬機(jī)資源,而不必使用硬分區(qū)隔離使用預(yù)留來保證應(yīng)用服務(wù)質(zhì)量保持一定的空余容量不要讓預(yù)留資源占滿整個(gè)群集資源要為主機(jī)維護(hù)和重新平衡預(yù)留資源空間需要接納故障主機(jī)上面的虛擬機(jī)的空間(使用)如果一臺(tái)主機(jī)是一個(gè)群集的成員,不要直接在該主機(jī)上修改資源參數(shù)什么是?集成的、可擴(kuò)展的虛擬機(jī)故障切換解決方案是3的一部分(可選的功能)與和集成通過在服務(wù)器主機(jī)中進(jìn)行自動(dòng)故障切換,為虛擬機(jī)提供高可用性每個(gè)群集最多支持16個(gè)主機(jī)(新版本將支持32個(gè)主機(jī))通過配置、管理和監(jiān)控可以為特定虛擬機(jī)定制行為方式什么是?什么是什么不是?它是…如果一臺(tái)發(fā)生故障,運(yùn)行在它上面的虛擬機(jī)將會(huì)在同一群集中的另外主機(jī)上重新啟動(dòng)故障由服務(wù)控制臺(tái)網(wǎng)卡上運(yùn)行的心跳服務(wù)進(jìn)行檢測(cè)它…不利用不對(duì)虛擬機(jī)故障提供保護(hù)不能跨群集()或數(shù)據(jù)中心()運(yùn)行與的關(guān)系選項(xiàng)故障主機(jī)數(shù)量-指定可以進(jìn)行故障切換的主機(jī)數(shù)量,希望這些主機(jī)上的虛擬機(jī)可以在其它主機(jī)上重新啟動(dòng)準(zhǔn)入控制–如果虛擬機(jī)違反了可用性規(guī)則,或者超出了資源限制,則不啟動(dòng)虛擬機(jī)即使虛擬機(jī)違反了可用性規(guī)則,或者超出了資源限制,也會(huì)在其它主機(jī)上啟動(dòng)虛擬機(jī)(但不保證啟動(dòng)成功,會(huì)有一個(gè)警告信息)規(guī)劃準(zhǔn)入控制在群集中保留足夠的空閑資源進(jìn)行故障切換每臺(tái)主機(jī)都應(yīng)該有一定的和內(nèi)存空余資源每臺(tái)虛擬機(jī)都有最小內(nèi)存和需求規(guī)劃準(zhǔn)入控制指定可以實(shí)施故障切換的主機(jī)的數(shù)量如果N臺(tái)大型主機(jī)故障,也能保證虛擬機(jī)可以重新布置到其它主機(jī)上重新啟動(dòng)定義最壞的情況–最大故障主機(jī)數(shù)量和需要重新分配的虛擬機(jī)數(shù)量和大小容量規(guī)劃舉例:假定一個(gè)同構(gòu)的群集這是一個(gè)保守的規(guī)劃高級(jí)用戶希望制定他們自己的規(guī)劃,避免嚴(yán)格的準(zhǔn)入控制檢查12365故障切換容量規(guī)劃:1臺(tái)主機(jī)故障4容量規(guī)劃1234故障切換容量規(guī)劃:2臺(tái)主機(jī)故障如果故障主機(jī)的數(shù)量超過了配置的空余容量?jī)?yōu)先級(jí)高的虛擬機(jī)將首先被切換和啟動(dòng)會(huì)生成一個(gè)警告信息重新啟動(dòng)優(yōu)先級(jí)可選的重新啟動(dòng)優(yōu)先級(jí)選項(xiàng),以虛擬機(jī)為單位設(shè)置隔離響應(yīng)隔離響應(yīng)主機(jī)在網(wǎng)絡(luò)中被隔離發(fā)生問題的節(jié)點(diǎn),隔離并驗(yàn)證地址故障響應(yīng):下電還是繼續(xù)運(yùn)行?等待15秒鐘,然后決定該主機(jī)被隔離下電–和缺省是下電–最安全的方式與集成和下電的虛擬機(jī)不被視為一個(gè)故障下電的和有特殊標(biāo)示的虛擬機(jī)將不會(huì)被切換有短暫的危險(xiǎn)時(shí)間窗口(遷移時(shí)主機(jī)發(fā)生故障);可以在原來的、目的或者其它合適的主機(jī)上重新啟動(dòng)虛擬機(jī)和的首要優(yōu)先級(jí)是重新啟動(dòng)故障主機(jī)上的的虛擬機(jī)將決定和優(yōu)化重新啟動(dòng)的虛擬機(jī)的位置(它的優(yōu)先級(jí)是保持整個(gè)群集的負(fù)載平衡)+=主動(dòng)+被動(dòng)反應(yīng)方案高可用解決方案(虛擬機(jī)集群)——3集群解決方案目前,只測(cè)試和支持微軟的集群服務(wù)()運(yùn)行在自己的虛擬機(jī)環(huán)境中但是在實(shí)際應(yīng)用中,和都有成功案例3集群解決方案只能為操作系統(tǒng)和應(yīng)用系統(tǒng)的崩潰提供保護(hù)措施訪問共享的存儲(chǔ)或者共享的本地存儲(chǔ)主機(jī)內(nèi)部的集群:a主機(jī)之間集群:可以為操作系統(tǒng)、應(yīng)用系統(tǒng)和硬件崩潰提供報(bào)或措施使用()需要共享的存儲(chǔ)不能使用和存儲(chǔ)技術(shù)物理到虛擬機(jī)群:低成本的1冗余設(shè)計(jì)需要共享的存儲(chǔ)不能使用和存儲(chǔ)技術(shù)在物理主機(jī)上不能運(yùn)行多路經(jīng)軟件群集:注意事項(xiàng)與限制只有2和特定驅(qū)動(dòng)程序在支持列表當(dāng)中只支持32為虛擬機(jī)(不支持64為虛擬機(jī)).只支持2節(jié)點(diǎn)的群集不支持在盤陣或上的群集群集不支持網(wǎng)卡捆綁干線技術(shù)虛擬機(jī)的啟動(dòng)磁盤必須位于本地存儲(chǔ)上不支持在中啟動(dòng)服務(wù)器群集虛擬機(jī)不能成文群集(或)的一部分不能使用遷移運(yùn)行群集軟件的虛擬機(jī)數(shù)據(jù)備份——標(biāo)準(zhǔn)備份技術(shù)什么是?是如何工作的?恢復(fù)方法目前方案存在的問題集成標(biāo)準(zhǔn)備份技術(shù)備份服務(wù)器1服務(wù)器23服務(wù)控制臺(tái)文件系統(tǒng)級(jí)別備份完整虛擬機(jī)備份存儲(chǔ)設(shè)備(磁帶、磁盤)LAN,SAN,SCSI只通過LAN優(yōu)點(diǎn):像物理主機(jī)一樣備份和恢復(fù)加上完整虛擬機(jī)備份功能易于實(shí)施–并提高備份能力裸設(shè)備映射()服務(wù)器2311233服務(wù)控制臺(tái)裸設(shè)備映射RDM33’1’2’SAN快照備份服務(wù)器LANSCSISAN優(yōu)點(diǎn):消除服務(wù)器備份負(fù)擔(dān)發(fā)揮現(xiàn)有技術(shù)與標(biāo)準(zhǔn)存儲(chǔ)模式配合良好當(dāng)前備份模式存在的問題基于客戶機(jī)代理()的備份模式備份的負(fù)載累加到生產(chǎn)主機(jī)之上備份每臺(tái)虛擬機(jī)消耗主機(jī)5%是可以接受的… 但是,當(dāng)20臺(tái)虛擬機(jī)同時(shí)開始備份的時(shí)候…對(duì)于虛擬架構(gòu)來講,備份負(fù)載具有很大的負(fù)面影響大量消耗磁盤和網(wǎng)絡(luò)即使通過服務(wù)控制臺(tái)備份磁盤映像也會(huì)降低系統(tǒng)性能當(dāng)前備份模式存在的問題基于的備份模式需要磁盤陣列快照軟件并非所有陣列廠商都支持,或者非常昂貴失去的優(yōu)點(diǎn)如磁盤的利用效率高,跨,將虛擬機(jī)視為文件等在沒有更多昂貴工具支持的情況下,磁盤陣列快照只是一個(gè)主機(jī)崩潰一致性的拷貝不提供文件系統(tǒng)和應(yīng)用級(jí)別的數(shù)據(jù)一致性快照解決方案:整合備份的目標(biāo)利用的獨(dú)特技術(shù)提高文件系統(tǒng)級(jí)別的備份性能將備份負(fù)載從服務(wù)器上卸載下來不需要磁盤陣列相關(guān)的軟件對(duì)于最終用戶來講,易于實(shí)現(xiàn)是簡(jiǎn)化整個(gè)企業(yè)備份體系架構(gòu)復(fù)雜度的開始的效果
231達(dá)到什么效果備份代理服務(wù)器()LANSCSISAN231備份代理服務(wù)器()如何工作?
發(fā)生了什么VMDKREDOSAN第三方備份軟件231備份代理服務(wù)器()如何工作?
輸出完整的虛擬機(jī)VMDKREDO222SAN如何恢復(fù)?目前還沒有基于備份代理的恢復(fù)工具選項(xiàng):在每一臺(tái)虛擬機(jī)中安裝備份軟件代理,將文件直接恢復(fù)到這些虛擬機(jī)中建立安裝備份軟件代理的專門恢復(fù)虛擬機(jī),將數(shù)據(jù)恢復(fù)到這些虛擬機(jī)當(dāng)中,然后手工移動(dòng)文件到目標(biāo)虛擬機(jī)中要恢復(fù)整個(gè)虛擬機(jī),將它們恢復(fù)到服務(wù)控制臺(tái)可以訪問的的文件系統(tǒng)中,然后將它們輸入到中為什么這個(gè)版本部提供恢復(fù)功能?備份操作每天都會(huì)進(jìn)行,但是很少執(zhí)行恢復(fù)操作我們希望改善當(dāng)前面臨的主要問題–備份整合備份和恢復(fù)方法集中恢復(fù)在備份代理服務(wù)器中安裝備份軟件代理分組恢復(fù)在服務(wù)器上的一組虛擬機(jī)選擇一臺(tái)安裝備份軟件代理自我服務(wù)式恢復(fù)在每一臺(tái)虛擬機(jī)上安裝備份軟件代理恢復(fù)方法的比較恢復(fù)方法優(yōu)點(diǎn)缺點(diǎn)集中式維護(hù)的備份軟件代理數(shù)量最少系統(tǒng)管理員需要介入到每一個(gè)文件恢復(fù)操作當(dāng)中分組式恢復(fù)操作可以按組指定;易于在備份軟件代理數(shù)量和恢復(fù)的操作難度方面達(dá)成妥協(xié)依然達(dá)不到自我服務(wù)方式的恢復(fù)操作自我服務(wù)式自我服務(wù)方式的恢復(fù),無需管理員介入需要在每一臺(tái)虛擬機(jī)中安裝備份軟件代理幾個(gè)要記住的要點(diǎn)不能替代備份軟件備份軟件是的主要使用者與現(xiàn)有備份架構(gòu)整合目前還沒有與完全整合在版本1.0中,只支持對(duì)操作系統(tǒng)的文件級(jí)備份完整虛擬機(jī)輸出支持任何類型的操作系統(tǒng)集成已經(jīng)與下列產(chǎn)品集成:
這些只是基本集成–命令行,運(yùn)行前/后腳本。沒有與備份軟件進(jìn)行深入整合注意:一些備份軟件廠商在之外提供他們自己的整合產(chǎn)品的軟、硬件需求備份代理服務(wù)器(實(shí)機(jī))必須運(yùn)行20031或以上版本光纖通道。備份代理服務(wù)器需要訪問當(dāng)中的支持的備份軟件備份硬件,例如磁帶庫一個(gè)或多個(gè)服務(wù)器3系統(tǒng)多路徑備份代理服務(wù)器目前不支持任何多路徑軟件系統(tǒng)的概貌備份什么?虛擬機(jī)內(nèi)的內(nèi)容服務(wù)器服務(wù)控制臺(tái)備份系統(tǒng)主要組成部分備份客戶機(jī)(備份軟件代理)備份服務(wù)器備份虛擬機(jī)不支持在服務(wù)控制臺(tái)上運(yùn)行備份服務(wù)器備份服務(wù)器虛擬機(jī)物理機(jī)備份客戶機(jī)虛擬機(jī)方式一方式二服務(wù)控制臺(tái)方式三方式四在虛擬機(jī)中的備份軟件代理方式一:在虛擬機(jī)中運(yùn)行備份服務(wù)器建議:當(dāng)沒有可用于備份代理與備份服務(wù)器的硬件時(shí)文件級(jí)恢復(fù)很容易完整虛擬機(jī)恢復(fù)否應(yīng)用暫停優(yōu)秀服務(wù)器負(fù)載非常大備份否對(duì)備份的影響否管理能力很差在虛擬機(jī)中的備份軟件代理方式二:在物理機(jī)中運(yùn)行備份服務(wù)器建議:可以使用備份方法代替文件級(jí)恢復(fù)很容易完整虛擬機(jī)恢復(fù)否應(yīng)用暫停優(yōu)秀服務(wù)器負(fù)載大備份否對(duì)備份的影響否管理能力很差在服務(wù)控制臺(tái)中的備份軟件代理方式三:在虛擬機(jī)中安裝備份服務(wù)器建議:當(dāng)沒有專門的硬件供備份代理和備份服務(wù)器使用時(shí)文件級(jí)恢復(fù)否完整虛擬機(jī)恢復(fù)很容易應(yīng)用暫停優(yōu)秀服務(wù)器負(fù)載非常大備份否對(duì)備份的影響否管理能力很差在服務(wù)控制臺(tái)中的備份軟件代理方式四:在物理機(jī)中安裝備份服務(wù)器建議:可以使用代替文件級(jí)恢復(fù)否完整虛擬機(jī)恢復(fù)很容易應(yīng)用暫停優(yōu)秀服務(wù)器負(fù)載大備份否對(duì)備份的影響否管理能力很差是如何工作的?冷克隆的好處今后的發(fā)展計(jì)劃在線克隆3.0簡(jiǎn)介?3.0是一個(gè)自動(dòng)將物理主機(jī)、其它格式虛擬機(jī)和第三方主機(jī)映像轉(zhuǎn)化為虛擬機(jī)的工具物理主機(jī)、第三方主機(jī)映像和其它格式的虛擬機(jī)虛擬機(jī)
3.0簡(jiǎn)介產(chǎn)品概覽集中管理控制臺(tái)(不需要一臺(tái)輔助虛擬機(jī))多種P2V克隆模式在線克隆(2k3,)本地源主機(jī)遠(yuǎn)程源主機(jī)冷克隆只支持本地源主機(jī)基于操作方式和界面與在線克隆類似采用基于善區(qū)快照的克隆加快了轉(zhuǎn)換速度多個(gè)轉(zhuǎn)換操作同時(shí)運(yùn)行,實(shí)現(xiàn)高度的擴(kuò)展能力產(chǎn)品概覽源主機(jī)物理主機(jī)虛擬機(jī)(,2管理的2.5和3)第三方主機(jī)映像(,)目標(biāo)主機(jī)虛擬機(jī)(,2管理的2.5和3)支持的源操作系統(tǒng)–集中在平臺(tái)64位2K3、4+、2K、、2K3產(chǎn)品概覽支持更多種類的物理主機(jī)映像定制功能比P2V的手工操作更少提高了轉(zhuǎn)換的可靠性,遷移失敗率
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 貴陽幼兒師范高等??茖W(xué)?!秳?dòng)畫場(chǎng)景設(shè)計(jì)》2023-2024學(xué)年第一學(xué)期期末試卷
- 2025山西省安全員C證(專職安全員)考試題庫
- 硅湖職業(yè)技術(shù)學(xué)院《面向?qū)ο蠹夹g(shù)》2023-2024學(xué)年第一學(xué)期期末試卷
- 2025甘肅省建筑安全員考試題庫
- 廣州幼兒師范高等專科學(xué)?!毒G色建筑與綠色施工》2023-2024學(xué)年第一學(xué)期期末試卷
- 2025年四川建筑安全員-B證(項(xiàng)目經(jīng)理)考試題庫
- 廣州衛(wèi)生職業(yè)技術(shù)學(xué)院《溫病學(xué)》2023-2024學(xué)年第一學(xué)期期末試卷
- 2025貴州建筑安全員B證(項(xiàng)目經(jīng)理)考試題庫
- 2025黑龍江省安全員-C證(專職安全員)考試題庫
- 《ESD知識(shí)和控制》課件
- LS 8010-2014植物油庫設(shè)計(jì)規(guī)范
- GB/T 9119-2000平面、突面板式平焊鋼制管法蘭
- 2020年《小學(xué)德育教育校本課程》版
- 辦公用品供貨項(xiàng)目實(shí)施方案
- 牛津譯林版(2019) 必修第三冊(cè) Unit 4 Scientists Who Changed the World Extended reading 課件
- 銷售價(jià)格管理制度(5篇)
- 乙肝五項(xiàng)詳解
- 人教版七年級(jí)歷史上冊(cè)復(fù)習(xí)資料-考點(diǎn)重點(diǎn)-版
- 福建省廈門市各縣區(qū)鄉(xiāng)鎮(zhèn)行政村村莊村名明細(xì)及行政區(qū)劃代碼
- 解析簡(jiǎn)易呼吸器課件
- 國(guó)際商法(第四版)
評(píng)論
0/150
提交評(píng)論