版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領
文檔簡介
第1章緒論1.1服務器虛擬化的背景及意義 如今的大部分企業(yè)信息化建設存在局限性,購買一臺性能優(yōu)越但是價格不菲的主機服務器,只能在此安裝一個特定的操作系統(tǒng)來搭建運行應用業(yè)務。因此,即使是中小型企業(yè)的數(shù)據(jù)中心也必須部署堆積大量硬件主機服務器設備,而每臺服務器的資源利用率不到20%,嚴重浪費IT資源,這為IT部門的現(xiàn)代化、信息化管理帶來了巨大的挑戰(zhàn)。 服務器虛擬化技術能降低購買硬件設備的投資和多臺機器運行能耗,達到提高硬件資源的高效利用、降低數(shù)據(jù)中心的電力資源、服務器準備時間更快、消除硬件廠商密鑰綁定、提高運行時間、隔離應用業(yè)務、延長陳舊機器的生命周期。 服務器虛擬化技術的帶來的巨大優(yōu)勢已經(jīng)得到了市場和用戶熟悉和認可,虛擬化技術所具備的提高資源利用率和節(jié)能環(huán)保的特性也得到了越來越多企業(yè)型中心機房建設的應用,服務器虛擬化技術所具備的高可靠、高可用性必將是云計算和大數(shù)據(jù)的信息化普及和推廣的必然趨勢。1.2服務器虛擬化研究現(xiàn)狀及發(fā)展趨勢1.2.1服務器虛擬化研究現(xiàn)狀現(xiàn)在,大部分的主機服務器供應商在實施部署時都會首推使用某一廠商的虛擬化平臺以提高對硬件資源的利用率,服務器虛擬化部署幾乎可以應用到所有規(guī)模的IT基礎架構中了。而根據(jù)Spiceworks公司最新的一項針對IT從業(yè)人員所進行的運維管理調查顯示,現(xiàn)階段有接近八成的中小型企業(yè)網(wǎng)絡中心已經(jīng)部署采用了某一種廠商的服務器虛擬化技術平臺。1.2.2服務器虛擬化發(fā)展趨勢 近年來,隨著企業(yè)加快部署公有云、私有云、超融合等云計算業(yè)務,作為云計算基礎的服務器虛擬化得到了飛速的發(fā)展。據(jù)CCW數(shù)據(jù)顯示,2016年中國服務器虛擬化市場規(guī)模大約為21.9億元,結合國內云計算市場規(guī)模速度預測,2018年中國服務器虛擬化市場規(guī)模為37.5億元,同比增長32.2%,2019年服務器虛擬化市場規(guī)模達到48.0億元左右,同比增長28.1%。CCW前瞻經(jīng)濟學圖1-1中國服務器虛擬化市場規(guī)模狀況而市場占有率方面,Vmvare一直是占據(jù)首位的,選取采用的用戶基數(shù)最大。市場上還有微軟的Hper-V,Linux的KVM以及國內云計算虛擬化代表華為的FusionSphere。然而得益于思杰采用免費開放的平臺,在我國長三角以及珠三角等高新技術地區(qū)仍有一席之地。
第2章CitrixXen虛擬化技術介紹2.1服務器虛擬化技術原理服務器虛擬化可以簡單的理解為這是一種操作系統(tǒng)虛擬化,就是其中一臺計算機可以創(chuàng)建出多臺虛擬主機設備,然后同時在這些虛擬機上面運行相同或者不同的操作系統(tǒng)。這種虛擬化技術能將一個操作系統(tǒng)的多個服務器操作系統(tǒng)隔離開來單獨運行,而且能同時分配不同的虛擬網(wǎng)卡來取得不同IP地址來運行業(yè)務應用。從技術原理來看,虛擬化技術都是基于硬件設備來虛擬出來的指令集。比如設備的CPU、內存、磁盤等,它們運行的共同之處都是:發(fā)送一組特定的指令集來運行。每臺虛擬機都有用戶可操作訪問的指令集,虛擬機把這些指令集“映射”到計算機的實際指令集。對于Intel的X86處理器而已,訪問發(fā)送指令都是要通過ring級別來進行的,而ring共有4個等級,分別是ring0、ring1、ring2與ring3,Windows系統(tǒng)只有ring0和ring3這兩個級別。服務器虛擬化,它是直接安裝在硬件設備底層的操作服務,能直接獲取ring0等級,因此能得到處理器最高的訪問權限。IntelVT-x虛擬技術可以讓一個CPU工作起來像多個CPU在并行運行,從而使得在一臺物理服務器內可以同時運行多個操作系統(tǒng)。能夠降低(甚至消除)多個虛擬機操作系統(tǒng)之間的資源爭奪和限制,從硬件上極大地改善虛擬機的安全性和性能,有助于提高基于軟件的虛擬化解決方案的靈活性與穩(wěn)定性。圖2-1服務器虛擬化2.2虛擬化類型 虛擬化涉及的面很廣,技術門類很多,可以按照不同的標準進行分類。本文主要從虛擬化對象以及實現(xiàn)技術進行分析。2.2.1按虛擬化對象分類1.硬件虛擬化硬件虛擬化就是通過軟件的方式虛擬出來一臺標準計算機的硬件配置,如CPU、內存、硬盤、聲卡、和光驅等,整體構建出一臺虛擬存在的設備,并且可用在該虛擬機上像在物理主機一樣安裝和運行多種操作系統(tǒng)。這種虛擬化技術是要切割分配物理硬件資源的,因此對性能要求比較高。2.基于操作系統(tǒng)的虛擬化 操作系統(tǒng)虛擬化技術以一個操作系統(tǒng)為母體復制出多個相同的字系統(tǒng),子系統(tǒng)完全繼承母系統(tǒng)的全部特性,唯一區(qū)別就是標識符ID。 操作系統(tǒng)虛擬化虛擬出來的系統(tǒng)只能與原系統(tǒng)相同,它們之間的關聯(lián)性強,更改原系統(tǒng)母版也會對應更改虛擬化出來的系統(tǒng),若是母系統(tǒng)出現(xiàn)了故障,那么它的子系統(tǒng)也會受到故障影響。操作系統(tǒng)虛擬化可以更靈活方便統(tǒng)一部署、更低能耗運行。3.基于程序庫的虛擬化數(shù)據(jù)庫虛擬化是為了消除未充分使用的服務器而采用分層集群數(shù)據(jù)庫的方法。通常,虛擬化的首要目的是消除未充分使用的服務器。在虛擬化基礎之上對一個數(shù)據(jù)庫廠商的集群技術實行分層有以下好處:高可用性/HA冗余、無斷開與重新連接的熱負載均衡應用服務、其它數(shù)據(jù)庫實例的快速水平縮放。4.基于應用程序的虛擬化 應用程序虛擬化出來的操作系統(tǒng)更為小巧,占用資源更少,它僅打包了應用程序運行虛擬化的系統(tǒng)部分,如注冊表和系統(tǒng)盤環(huán)境。 典型的應用場景是企業(yè)將軟件打包后通過網(wǎng)絡分發(fā)到若干個計算機上,用戶直接登錄對應的網(wǎng)絡路徑即可,不用安裝即可使用,從而降低企業(yè)的IT成本。圖2-2實現(xiàn)層虛擬化應用實例2.2.2按實現(xiàn)技術分類全虛擬化(FullVirtualization)全虛擬化指的就是模擬出來的虛擬機的操作系統(tǒng)是與本身底層的硬件完全隔離的,虛擬機中的所有的配置資源都是基于硬件通過虛擬化軟件來模擬的。此需要硬件有hardware-assisted
virtualizationtechnology(Intel-VT,AMD-V)硬件輔助虛擬化技術支持,而且操作系統(tǒng)代碼原生不需要任何修改每臺虛擬機都是一個完全互不干擾隔離獨立和安全的運行環(huán)境,所以容易在虛擬機間進行遷移。在操作全虛擬化的虛擬機的時候,用戶真實的感受就是操作一臺真實機器上的系統(tǒng)。由于虛擬機的資源全部都需要通過虛擬化軟件來模擬,因此會失去一部分的性能。半虛擬化(ParaVirtualization)半虛擬化的機構與全虛擬化基本相同,不同就是半虛擬化是對虛擬機中的操作系統(tǒng)來集成一些虛擬化方面的代碼修改,以此來優(yōu)化全虛擬化的軟件帶來負載局限性。半虛擬化比完全虛擬化效率更高,速度更快,提供了與未經(jīng)虛擬化的系統(tǒng)相接近的性能,不足之處就是,因為是修改了虛擬機的操作系統(tǒng)的底層代碼,虛擬化出來的系統(tǒng)不那么直觀操作性,致使得用戶能感知這是虛擬出來的,體驗感比較差,而且兼容性比較差。圖2-3虛擬化實現(xiàn)技術分類2.3Xen的體系架構2.3.1Xen部件 Xen采用超虛擬化技術和完全虛擬化技術,一個Xen虛擬化環(huán)境有以下三部分組成:XenHypervisorDomain0(包括Domain管理和控制工具)DomainU(DomainUPV客戶系統(tǒng)和DomainUHVM客戶系統(tǒng))2.3.2Xen架構 Xen的VMM(XenHyperviso)位于硬件和操作系統(tǒng)之間,負責為上層的操作系統(tǒng)內核提供虛擬化的硬件資源,負責管理和分配這些資源,并確保上層虛擬機(稱為域)之間的相互隔離。Xen采用混合模式,因而設定了一個特權域用以輔助Xen管理其它的域,并提供虛擬化的資源服務,該特權稱為Domain0,而其余的域則稱為DomianU。ChisnallDavid,Xen虛擬化技術完全導讀,2017 圖2-4Xen的I/O層架構圖
從上圖可以看到,Xen提供的Hypervisor之外,XenServer安裝完成后還有一個ControlDomain,一般我們稱為Domain0,Domian0其實是一個Centos系統(tǒng),7.0以前是32位的,7.0以后用了64位的Centos。XenServer安裝完成后的第一個虛擬機是Domain0,這也是XenServer需要這么大介質的原因。2.4虛擬化服務器主要廠商當今市場上主要有三個服務器虛擬化廠商,分別是:微軟(Microsoft)、Vmware、思杰(Citrix)。微軟公司的虛擬化產(chǎn)品主要以Hyper-v為主,而最新推出的Hyper-v2.0版本更是帶來了前所未有的快速遷移和虛擬機快照技術,而且同時Hyper-V已經(jīng)和集成Vsphere的管理操作界面。在少于20臺服務器的小型企業(yè)機房環(huán)境中,使用Hyper-V部署更能降低成本,更受到客戶的接受。 目前在市場主流以的X86服務器的虛擬化上,Vmware由于技術先進于同行,而且成熟的產(chǎn)品設計,得到用戶認可且口碑好,因此市場占有率最高。而且Vmware首創(chuàng)的Vmotion實時遷移技術,功能就已經(jīng)非常引人注目,在未來的Vmware虛擬機大量部署的環(huán)境下,Vmotion技術在虛擬機備份上發(fā)揮著系統(tǒng)高可用性的價值。 Citrix思杰雖然在市場占有率比較低,但是思杰公司產(chǎn)品有幾個有利之處:思杰和微軟有很強的合作關系,而且微軟的Hyper-V是建立在Xen引擎之上,這樣使得兩個平臺間具有互操作性。結合調查分析來看,目前大多數(shù)人對CitrixXen的了解和使用并不是很多。根據(jù)Citrix官網(wǎng),在版本XenServer5.5以上版本已經(jīng)推出XenMotion實時遷移功能,而且也是可以免費下載使用。思杰公司的市場策略是產(chǎn)品可以免費下載使用,需要購買的只是高級管理模塊、技術支持服務以及部署設計方案建議??偨Y來說說,思杰在價格方面是相當具有誘惑力,而且技術支持對于客戶來說也是不可缺少的服務項。圖2-5虛擬化應用服務對比圖2.5企業(yè)選購 基于企業(yè)的實際情況,決定選用思杰Citrix作為部署產(chǎn)品,是因為Xen產(chǎn)品是開源免費下載使用,對于擁有不超過20臺服務器的中小型公司來說是一個很好的節(jié)能解決方案,選用思杰廠商作為機房服務器虛擬化部署至關重要的是能大大降低采購成本和運營投資成本。Xen包含多核處理器支持、實時遷移物理服務器到虛擬機之間可以自由轉換(P2V)和虛擬機到虛擬機轉換(V2V)工具。在Xen平臺中能集中化的管理多臺服務器、實時性能監(jiān)控分析每個服務器的運行狀態(tài),使用特有的CitrixStorageLink,網(wǎng)絡管理員可直接利用來自HP、Dell、netApp、EMC等公司的存儲產(chǎn)品。
第3章虛擬化規(guī)劃設計3.1虛擬化規(guī)劃要點 實施服務器虛擬化有兩種情形。一種情形是在現(xiàn)有的IT基礎實施上升改造,調整已有的硬件設備,或添加新的設備來建立新型的數(shù)據(jù)中心;另外一種情形就是建設全新的虛擬化中心。無論哪種情形,都要做好虛擬化規(guī)劃設計。3.2服務器規(guī)劃 物理服務器主要用來承載虛擬機,根據(jù)虛擬機配置(所需資源)、用途和數(shù)量來決定服務器的配置和數(shù)量。在實際生產(chǎn)環(huán)境中,要考慮為系統(tǒng)預留的容量,不能讓物理服務器滿載運行,通常需要預留30%或更高比例的資源容量。 服務器規(guī)劃時,應重點考慮服務器的CPU和內存資源。對于CPU,建議將物理CPU資源與虛擬CPU資源按照1:10~1:4的比例進行規(guī)劃。對于內存,一般每個虛擬機需要4~8GB內存,虛擬機內存是分配即占用,即時虛擬機處于關機狀態(tài)也依然占用分配的內存,所以可以根據(jù)虛擬機數(shù)量估計內存,還應為主機系統(tǒng)本身的運行預留部分內存,具有兩個8核心的CPU的服務器一般配置64GB內存。在實際環(huán)境中,多數(shù)虛擬機的CPU利用率不高,往往低于10%,內存利用率略高一些的情況,也多于30%以下,這樣可以估算出所需的CPU和內存。計算出的資源需求可以是已有系統(tǒng)中的實際需求,也可以是新建系統(tǒng)的預估需求。估算出虛擬機所需的總CPU資源和內存資源之后,預留30%~40%的余量,初步算出服務器的配置和數(shù)量。 至于硬盤空間,服務器只需保證基本運行即可,虛擬機所用硬盤可由儲存規(guī)劃來解決。 對于現(xiàn)有的服務器,可以考慮增加內存,網(wǎng)卡,加配冗余電源。采購新的服務器時,除了CPU和內存外,需配置多塊網(wǎng)卡,冗余電源,如果實用本地儲存,還有配置磁盤陣列。圖3-1服務器虛擬化實施前后對比 有圖可以看出,部署虛擬化服務器方案后不僅降低中心重要服務器的負荷量與運行風險性,而且大大減少了硬件設備的使用率,及時淘汰老舊設備,更合理高效利用設備資源,統(tǒng)一整合管理現(xiàn)有的業(yè)務應用。3.3儲存規(guī)劃 本身儲存規(guī)劃,由于虛擬機創(chuàng)建單個磁盤容量最大容量為2T,因此建議建立單個磁盤不超過1T,留下擴容空間且易于備份儲存于還原。選擇儲存方案時,盡量不要使用本地儲存,而是采用儲存設備NAS(網(wǎng)絡儲存),因為虛擬機保存在共享的網(wǎng)絡儲存中,才能實現(xiàn)動態(tài)遷移,高可用性或容錯等高級功能。 虛擬機不使用本地儲存時,服務器可以考慮配置固態(tài)硬盤(SSD)來運行XenServer系統(tǒng),而且可以使用網(wǎng)絡存儲設備NAS來儲存系統(tǒng)鏡像以及備份資源??紤]數(shù)據(jù)儲存的安全性與容災備份,使用兩臺網(wǎng)上儲存設備NAS的架構進行儲存,一臺用了直接連接儲存,另外一臺用了做備份存儲。 當服務器數(shù)量較少時,可以配置SASHBA接口(傳輸速度可達6Gbit/s),在支持直接(DAS)連接的SAS儲存系統(tǒng)上存儲虛擬機,這種存儲可行多臺XenServer主機提供共享訪問。服務器數(shù)量較多時,優(yōu)先選擇FCHBA接口(傳輸深度可達8Gbit/s),使用光纖存儲作為虛擬化平臺的集中存儲平臺。3.4網(wǎng)絡規(guī)劃 作為支持虛擬機運行的服務器,往往需要更多的網(wǎng)卡(6個網(wǎng)卡很常見)和更高的網(wǎng)絡帶寬。例如,負載平衡和故障轉移、動態(tài)遷移虛擬機都需要專用網(wǎng)絡,使用獨立的物理網(wǎng)卡。 在虛擬環(huán)境中,一臺物理服務器上可以運行多個虛擬機,而且支持虛擬機動態(tài)遷移功能模塊,這就大大增加了網(wǎng)絡流量,對交換機的背板帶寬和上行鏈路帶寬要求都很高,所以大多數(shù)采用多鏈路網(wǎng)絡接口方式進行部署。圖3-2網(wǎng)絡架構拓撲圖3.5虛擬化備份還原設計 前面主要是基礎設施的規(guī)劃,在此基礎上還要設計虛擬化的備份還原方案。因為虛擬機儲存的都是業(yè)務系統(tǒng)的重要資料,一旦丟失損壞造成的經(jīng)濟損失不可估量,業(yè)務數(shù)據(jù)能備份且備份數(shù)據(jù)能完全正確恢復至關重要的。需要在虛擬化平臺上搭建成熟安全的備份系統(tǒng),用以存放虛擬機系統(tǒng)環(huán)境的鏡像,業(yè)務數(shù)據(jù)存儲路徑。
第4章基于CitrixXen部署配置環(huán)境
CitrixXenServer虛擬化平臺可以基于物理主機創(chuàng)建完全隔離、集中安全的虛擬機來封裝操作系統(tǒng)及其應用。XenServer7.2版本更是集成了多服務器圖形化管理、AD域、內存動態(tài)控制、快照熱恢復、服務器熱遷移、定時快照、虛擬化服務遷移管理(P2V)、最大資源池、交換機虛擬化等強大功能。CitrixXen虛擬化層將物理硬件資源映射到虛擬機的資源,這樣創(chuàng)建出來的每個虛擬機都擁有自身的的CPU、內存、磁盤和I/O等設備,完全等同于一臺標準的x86計算機。4.1CitrixXenServer的安裝4.1.1系統(tǒng)要求 XenServer支持直接安裝在物理機上的底層操作系統(tǒng)平臺,但對于硬件有一定要求,對于配置過低的硬件設備不建議做虛擬化處理。1、系統(tǒng)要求:X86處理器必須集成Inter-VT(虛擬化技術功能);2、主機要求:64位x86IntelCore2四核心處理器或同等級別以上處理器、AMDAthlon64FX四核心處理或同等級以上處理器,3.2GHz或者更快的核心速度;至少8GB內存,建議32GB以上,XenServer本身需要占用1.2GB的內存以及20GB可用磁盤空間,創(chuàng)建的每個虛擬機都需要額外的硬盤空間,結合考慮業(yè)務增長的冗余需求,需空余出30%的內存與容量空間。3、客戶機操作系統(tǒng):Windows版本的CitrixXenCenter要求主機上運行64位操作系統(tǒng),支持Windows7、8.1、10、WindowServer2008、2012以上,或.NETFramework3.5版本;4.1.2準備工作1、硬件準備:一臺硬件服務器設備用作安裝XenServer主機(ip:99),一臺用作網(wǎng)絡管理員終端電腦安裝XenCenter客戶機(ip:00),兩者需在同一個局域網(wǎng)內。2、
軟件準備:首先從citrix(思杰)官網(wǎng)()下載XenServer7.2版本的免費版的安裝ISO格式文件,然后使用UltraISO軟碟通軟件將其制作成U盤啟動安裝,待用。圖4-1U盤寫入XenServer7.2系統(tǒng)鏡像4.1.3硬件設備創(chuàng)建RAID等級 磁盤陣列作為擁有多個存儲設備的服務器是必不可缺少設置,這不僅保證了儲存的高可靠性,而且利用服務器虛擬化的硬件集成優(yōu)勢,更好的分配儲存資源。在創(chuàng)建RAID等級之前,要先確定要部署的服務器的具體業(yè)務需求,需要用到多大的儲存空間,采用多少個同容量的硬盤結構分布。常用的等級有RAID1、RAID5、RAID10,RAID1是兩個硬盤做鏡像儲存,適用于少量硬盤儲存,一般2塊同容量的硬盤;RAID5適用于多個硬盤儲存,支持單個硬盤熱拔插,更換方便;RAID10可以看作是RAID1與RAID5的結合版,集合兩者的優(yōu)勢,達到最均衡的儲存利用。啟動機器,出現(xiàn)可操作頁面,一般在第一個頁面會出現(xiàn)創(chuàng)建查看RAID等級信息,此時就需要鍵盤快速同時按下ctrl+I鍵進入管理頁面,注意的是,此頁面跳過比較快,錯過只能重啟。進入IntelRAID頁面后,盡可以通過鍵盤方向鍵選擇,回車鍵進行確認,可供選擇的有創(chuàng)建RAID等級、刪除RAID等級、重置RAID、還原卷、增加卷。若是沒有創(chuàng)建過RAID等級的,只有創(chuàng)建與增加選項看操作。圖4-2Raid首頁信息選擇創(chuàng)建RAID等級后,先要對新建的陣列進行命名,但是最多不能超過16個字符。然后就到了選擇RAIDLevel模式,此時就有根據(jù)業(yè)務需求來選擇對應的RAID模式,選擇為RAID1模式。圖4-3選擇創(chuàng)建RAID等級選擇等級后,頁面下面會提示服務器需要2塊硬盤,回車確認。通過上下鍵選中列表中硬盤,此次在選中的硬盤按下空格進行確認,在選中的硬盤前面就會出現(xiàn)綠色的小箭頭,最后回車確認。圖4-4選擇要創(chuàng)建的磁盤頁面回到基本信息頁,光標也會自動跳到Capacity這一行,設置自定義陣列容量,默認選中最大容量,這樣能最有效利用硬盤空間。提示操作創(chuàng)建RAID等級會清除所選硬盤上的所有數(shù)據(jù),按Y確認完成。圖4-5創(chuàng)建完成RIAD等級界面4.1.4服務器安裝XenServer 由于XenServer是安裝在底層的操作系統(tǒng),如同直接運行在物理主機上的windows系統(tǒng),需要修改主板引導驅動設置U盤啟動來安裝此鏡像。1、在安裝XenServer之前,必須要在主機BIOS中打開Inter-VT或者AMD-V功能,不同主板配置略有不同,可參考官方主機指導開啟其功能,將BIOS設置為U盤啟動優(yōu)先,然后在主機插入XenServer的啟動U盤,引導界面出現(xiàn)XenServer安裝界面,按回車鍵直接進入加載。圖4-6BIOS開啟Inter-VT功能2、進入加載界面,默認選擇用US的英文鍵盤語言,然后選擇OK。3、閱讀用戶協(xié)議,選擇同意用戶協(xié)議(AcceptEULA)。4、磁盤設置,顯示主機所有可用磁盤,基于儲存規(guī)劃,選定固態(tài)硬盤SDA為安裝介質,已確保XenServer快速安全啟動,空格鍵選定磁盤,然后OK回車鍵。圖4-7選擇SDA為安裝介質5、進入系統(tǒng)正式安裝階段環(huán)境,會重新格式化本地硬盤,所有原來的數(shù)據(jù)都會丟失,要提前備份好重要的資料,然后選擇OK(確定)。整個安裝過程中,可以通過按F12鍵快速前進到下一個屏幕。6、安裝源選擇,有本地源(Localmedia),HTTPorFTPorNFS網(wǎng)絡安裝源,由于前期準備了U盤鏡像,因此選擇本地源。圖4-8選擇本地源類型7、下一步可用選擇跳過驗證(Skipverification),若在安裝期間遇到問題,可用選擇驗證安裝源來查看異常原因。8、設置并確認root用戶密碼,root密碼可在XenCenter應用程序連接XenServer主機。9、將管理NIC的IP地址配置為靜態(tài)IP地址,輸入規(guī)劃配置的固定地址IP地址:00,子網(wǎng)掩碼為:,默認網(wǎng)關為:54。圖4-9填寫XenServer網(wǎng)絡參數(shù)10、先選擇北京時區(qū),后選擇地理區(qū)域繼續(xù)為北京。11、指定服務器NTP地址可以確定本地時間時的對時:一般選用北京郵電大學的授時中心。圖4-10NTP授時中心時間戳設置12、全部設置完成后點擊安裝即可,然后會進行自動安裝過程,安裝過程中需要重新啟動兩次服務器。14、安裝過程可以跳過補充包的安裝,待安裝完成后,需要從驅動器中彈出安裝U盤介質,然后點擊確定來重新引導服務器。15、安裝完成后,顯示一個類型于主板Boot管理頁面的窗口,在此頁面可以看到XenServer的詳細信息,并且可以直接進行網(wǎng)絡接口參數(shù)、磁盤儲存容量、備份更新的編輯,在此進行的操作需要輸入管理員密碼才能執(zhí)行。圖4-11XenServer安裝完成界面4.1.5啟用XenShell和SSH訪問CitrixXenServer本身就是一個定制的Linux系統(tǒng),除了在XenCenter控制臺直接使用密碼登錄使用命令行進行基本的配置管理。還可以打開登錄到XenShell,遠程管理端還可以通過SSH登錄到XenShell進行故障排查等操作在XenShell管理可以直接登錄Xen底層管理,而且可以通過第三方遠程工具,例如PuTTY工具進行登錄,極大方便了運維的查看以及管理工作。圖4-12啟用XenShell和工具SSH訪問4.1.6使用XenCenter客戶端連接XenServer1、首先通過官網(wǎng)下載的安裝包在管理員終端電腦00部署安裝Xencenter管理控制臺,通過XenCenter控制臺可以直接從Windows桌面計算機查看、監(jiān)控、管理已連接XenServer的情況,并且在控制臺上進行虛擬機的創(chuàng)建、刪除、管理等操作。2、直接單擊windows桌面計算機的XenCenter應用圖標,然后在左側主機頁XenCenter右鍵添加新服務器對話框。3、在添加新服務器框中,輸入已在主機服務器創(chuàng)建的XenServer的IP地址99。然后輸入在安裝期間設置root的密碼。4、成功添加XenServer服務器后,可以看到XenServer服務器中的信息和虛擬機。圖4-13添加輸入需要連接的虛擬機服務器4.2CitrixXenCenter界面及基本操作 CitrixXenCenter控制臺用來訪問虛擬機的桌面,主界面如圖所示,提供了菜單欄、工具來、多個窗格、選項卡、狀態(tài)欄來管理虛擬機。每臺虛擬機都相當于主機系統(tǒng)中以窗口模式運行的獨立計算機,在XenCenter界面中,可以與虛擬機進行互動,管理虛擬機的運行,從一個到另一個虛擬機。圖4-14XenCenter界面圖 左側的“庫”欄用來查看和選擇由XenCenter管理虛擬機、查看對象值、組織視圖、搜索和通知功能。默認情況下會顯示所有項,右鍵庫中的一個節(jié)點(虛擬機、對象值),彈出相應的快捷菜單,可執(zhí)行常見的操作。 右側窗格主要是顯示預覽模塊,選中左側不同的項目,XenCenter就會在右側窗格中出現(xiàn)一個相應的虛擬機選項卡,默認會顯示兩個特殊的的選項卡:一個是“主頁”選項卡,在此頁面可以選擇預覽和創(chuàng)建虛擬機、購買支持、試用桌面虛擬化;另一個是“搜索”選項卡,顯示當前所有的虛擬機列表,可以在此頁面對虛擬機進行搜索、導入、導出管理操作。 在虛擬機主機表中,在左側下拉列表后可以的看到已開機或者關機的虛擬子機,以及虛擬主機的DVD驅動、本地和網(wǎng)絡存儲的系統(tǒng)鏡像資源;在右側的窗格中可以看到該虛擬主機的運行情況、內存、存儲、網(wǎng)絡連接、NIC、GPU、控制臺頁面、性能、用戶與搜索的詳細信息與操作選項,如圖所示。單擊控制臺,就會出現(xiàn)與物理主機一樣的監(jiān)視器顯示頁面,用戶可以在此向操作物理計算機一樣操作虛擬機,并可對已創(chuàng)建的遠程虛擬機直接遠程控制連接,可以在控制臺視圖和各個選項功能視圖之間來回切換。如圖所示:圖4-15XenServer屬性界面 頂部的菜單欄提供最全面的功能操作選項,菜單項是否可用取決于當前所選操作的對象,例如某項操作在虛擬機的當前狀態(tài)下是不支持,“虛擬機”主菜單的相應菜單項將不可用。往下工具欄提供一組用于常用操作,如類似瀏覽器的請進后退按鈕、添加新服務器、新建池、新建VM、新建存儲、開機、關機、掛起。4.3在XenServer上部署虛擬機 虛擬機是虛擬基礎設施的關鍵組建??梢詫⑻摂M機配置為物理計算機,并可以執(zhí)行與物理計算機相同的任務,而且虛擬機還支持物理機不支持的特殊功能。安裝完XenServer之后,即可在XenServer主機上創(chuàng)建和運行虛擬機,并進行日常管理和故障排查任務。4.3.1創(chuàng)建SR儲存地址池 創(chuàng)建虛擬機前,需要在XenServer添加網(wǎng)絡儲存系統(tǒng)鏡像的儲存池,添加完成后,可以快速便捷的在網(wǎng)絡儲存結構中找到對應的系統(tǒng)鏡像資源。右鍵添加的XenServer主機,新建SR(N)。在選擇新存儲的類型中,有虛擬磁盤存儲NFS、ISCSI、硬件HBA、軟件FcoE,ISO庫Windows文件共享、NFSISO,由于是添加安裝系統(tǒng)鏡像路徑,所以選擇Windows文件共享(SMB/CIFS)——提供要連接到主機或者池的VM安裝ISO映像庫,即是連接到NAS里面儲存路徑,然后點擊下一步。圖4-16新建SR存儲資源池輸入操作系統(tǒng)鏡像的名稱,勾選自動基于SR設置,點擊下一步。輸入共享名稱的NAS具體路徑,然后輸入儲存驗證的用戶名與密碼,點擊完成即可添加網(wǎng)絡儲存結構中的鏡像資源。4.3.2創(chuàng)建虛擬機服務器創(chuàng)建出來的虛擬機從其運行的物理主機獲取CPU、內容、訪問網(wǎng)絡網(wǎng)卡資源和存儲信息。XenCenter提供便捷快速的新建虛擬機方式。從工具欄中右鍵選擇“新建VM”命令,啟動新建VM界面。出現(xiàn)“選擇VM模板”,在此頁面可以選擇將相應模板的主機BIOS字符串復制到VM;圖4-17選擇創(chuàng)建虛擬機模板單擊“下一步”按鈕,到為新建的虛擬機命名步驟,使用統(tǒng)一的命名規(guī)則hxvm+代號,輸入有助于識別虛擬機,而且在說明欄備注此虛擬機的用途,這樣大大方便日后的運維管理。下一步后,出來了“查找操作系統(tǒng)安裝介質”界面,選擇客戶機操作系統(tǒng)的安裝來源。由于前面已經(jīng)新建了SR的ISO鏡像庫,因此可以直接選擇使用DVD光驅或者使用ISO映像來安裝操作系統(tǒng),這將進入簡易模式,然后把此虛擬機自己置于主機服務器上。圖4-18選擇ISO鏡像單擊“下一步”,到為此虛擬機分配處理器和內存資源,可以根據(jù)運行業(yè)務的需求配置,一般選擇4核心、2卡槽、每卡槽2核心、4G內存,保證虛擬業(yè)務機的高效穩(wěn)定運行。圖4-19分配處理器與內存資源單擊“下一步”,為新VM配置存儲空間,設置虛擬磁盤的大小,默認創(chuàng)建兩個磁盤,磁盤1用于安裝系統(tǒng)鏡像,磁盤2用于儲存盤,XenServer優(yōu)勢也在于后期可以在虛擬機關閉狀態(tài)下增加容量和添加磁盤,及時滿足業(yè)務需求。圖4-20分配虛擬機磁盤資源單擊“下一步”,在新VM上配置網(wǎng)絡連接,設置虛擬網(wǎng)絡設備,默認分配兩個網(wǎng)卡設備,創(chuàng)建雙鏈路聚合,以保證業(yè)務帶寬,的MAC地址是自動生成,后期也可以根據(jù)需求編輯或者添加虛擬網(wǎng)卡。圖4-21虛擬機配置網(wǎng)絡資源8、完成上述步驟即可創(chuàng)建一個新的虛擬機,待虛擬機加載安裝完操作系統(tǒng)即可z在控制臺或者遠程桌面正常使用此虛擬機。4.3.3安裝XenServerTools XenServerTools是虛擬機的超實用工具,XenServerTools可以用于為虛擬機提供更完備的操作系統(tǒng)的性能,改善對虛擬機的管理。許多虛擬機功能只有在安裝XenServerTools之后才能正常使用,XenServer類似于物理主機必要的驅動程序一樣。值得注意的是,應在激活操作系統(tǒng)許可證之前安裝。 XenServerTools的安裝程序是以ISO映像文件的形式提供的,不同類型的客戶機操作系統(tǒng),如Windows、Linux,都有一個ISO映像文件。可以在開機時選擇CD-ROM介質啟動安裝或者開機后打開ISO文件來安裝使用,安裝完成重啟即可生效。圖4-22安裝XenServerTools4.3.4使用快照管理虛擬機 快照可以保持虛擬機在某一個時間點的狀態(tài)和數(shù)據(jù),以便在需要時間回到該狀態(tài)。生成快照時虛擬機不受影響,并且僅僅復制和存儲處于指定狀態(tài)的虛擬機的映像。CitrixXenCenter也提供優(yōu)秀便捷的快照管理模板。生成快照通過為每個已經(jīng)連接的虛擬磁盤或者虛擬RDM(裸磁盤映射)創(chuàng)建一系列增量磁盤來保留特定時間點的磁盤狀態(tài),通俗來講就是全量備份當時的磁盤狀態(tài),并通過創(chuàng)建內存文件可選地保留內存和電源狀態(tài),并在快照管理器(SnapshotManager)中創(chuàng)建一個表示虛擬機狀態(tài)和設置快照的對象,同時創(chuàng)建一個額外的.vmdk格式的磁盤文件,快照能保持以下信息:虛擬機目錄,包括在拍攝快照后添加或者更改的全部磁盤信息。電源狀態(tài),虛擬機可以在通電、關機或者掛起創(chuàng)建快照。磁盤狀態(tài),所有虛擬機的虛擬磁盤狀態(tài)。內存狀態(tài),虛擬機內存的內容,這是可選項。在XenCenter中的選項可以查看虛擬機的所有快照,并使用快照管理器管理快照。虛擬機正在運行時或者已經(jīng)關機時,都可以生成快照。從虛擬機的管理操作菜單中選擇“快照”—生成虛擬機磁盤快照,即可生成虛擬機當前狀態(tài)的快照。也可對快照管理器中已存儲的快照進行查看、還原、刪除操作。圖4-23XenServer快照管理界面4.4在虛擬機下發(fā)實例 已經(jīng)創(chuàng)建好一臺虛擬機就相當具備性能完備的操作系統(tǒng)環(huán)境物理主機,把需要應用的業(yè)務系統(tǒng)重新安裝在此系統(tǒng)中即可。首先安裝微軟系統(tǒng)必備的VC++等運行庫環(huán)境。然后安裝應用業(yè)務的運行配置環(huán)境,修改運行代碼連接模塊。數(shù)據(jù)庫遷移重新連接應用業(yè)務,測試查詢條件。開放防火墻80端口并配置本地虛擬機計算機入站出站規(guī)則策略。修改host文件映射,調整內外網(wǎng)IP及端口映射。外網(wǎng)測試訪問應用業(yè)務系統(tǒng)。4.4.1向虛擬機傳輸文本文檔1、復制粘貼法:在已安裝XenServerTools的虛擬機上,支持把需要移植的文件從主機復制粘貼過去客戶虛擬機;2、創(chuàng)建共享文件夾:必須安裝XenServerTools且系統(tǒng)需要支持(不能同時在多個應用程序中打開共享文件夾的某個文件。在虛擬主機的運行框中命令行輸入\\vm-host\sharefolders\具體的路徑地址就能查看共享文件夾;3、U盤導入文件:同樣需按照XenServerTools的虛擬機,把移動設備直接插入虛擬主機中,然后在虛擬客戶機中亦可打開復制移動設備中的內容;4.4.2在虛擬機修改網(wǎng)絡配置 打開XenCenter的網(wǎng)絡連接選項,可以看到該虛擬機的全部網(wǎng)絡接口情況,包括了虛擬出來所有的網(wǎng)卡信息,包括MAC地址、網(wǎng)絡狀態(tài)、IP地址以及是否處于活動狀態(tài)。值得注意的是,只有在虛擬機處于關閉的狀態(tài)才能選擇屬性進行更改網(wǎng)絡參數(shù)設置,而且你可以通過設計Qos技術限制來保證每臺虛擬機的網(wǎng)絡帶寬,這對物理主機運行多臺虛擬機達到很好的平衡關系。而且為了達到更好的網(wǎng)絡帶寬,可以把單一主機默認預留兩個網(wǎng)口,在網(wǎng)絡連接設置為“綁定網(wǎng)絡(B)”,達成雙網(wǎng)口合并流量出口,高效利用網(wǎng)絡資源。圖4-24XenServer綁定雙網(wǎng)口合并流量4.4.3增加虛擬配置容量 前期有敘述到,XenServer有支持后期增加虛擬機配置容量,而且增加只是物理主機的虛擬資源,可以更高速便捷增加,確保業(yè)務應用的冗余增長,大大提高虛擬機的實用可靠性。 值得注意的是,需要增加配置的虛擬機要處在關閉狀態(tài)才能增加配置容量,點擊需要增加配置的虛擬機右鍵屬性,來此添加或者降低Vcup的核心數(shù)以及修改啟動驅動啟動順序。而在控制面板中則可直接修改內存容量、儲存磁盤容量、網(wǎng)絡鏈接接口。圖4-25點擊編輯增加虛擬機配置容量
第5章基于Citrix虛擬化技術應用5.1XeCenter跨地址池冷遷移技術虛擬機遷移是指對虛擬機系統(tǒng)上所有的資源和狀態(tài)的遷移,包括:CPU、內存狀態(tài)、磁盤容量大小、I/O設備以及當前所有驅動設備。為了保證遷移后的虛擬機能夠在新的環(huán)境的目的主機上恢復運行,必須保證虛擬機在源主機和目的主機上的配置環(huán)境一樣,即要保證CPU核心數(shù)、內存于磁盤儲存容量一致性。冷遷移技術就是在系統(tǒng)關閉的情況下,把一個主機系統(tǒng)從一臺物理主機服務器的XenServer地址池遷移到另一臺物理主機服務器的XenServer中。值得注意的是,要實現(xiàn)虛擬機的冷遷移,必須要創(chuàng)建NFS或者iSCSI存儲,然后將虛擬機存儲在NFS或者iSCSI存儲中,就可以實現(xiàn)虛擬機在資源池中任意服務器的移動,實現(xiàn)在線同平臺跨地址池遷移,能夠快速滿足企業(yè)對服務器資源的高效動態(tài)調整,業(yè)務系統(tǒng)的轉移整理工作。1、首先從XenCenter中選擇需要移動的虛擬機,右鍵,選擇"移動VM"。2、選擇目的服務器,點擊“移動”。3、虛擬機即從xenserver-02移動到xenserver-01中。4、選擇需要刪除的虛擬機,右鍵,刪除VM。5、重啟移動虛擬機。圖5-1移動虛擬機5.2XenMotion實時熱遷移技術實時遷移是服務器虛擬化的最大優(yōu)勢所在,解決了網(wǎng)絡管理員必須犧牲晚上或者周末加班的時間回到機房進行的服務器維護共工作,因為只有在這樣的時間段少人或者無人訪問服務器業(yè)務?,F(xiàn)在借助XenMotion強大的實時遷移技術就能夠在辦公時間輕松維護完成,在服務器應用實現(xiàn)不停機的情況下進行實時熱遷移是虛擬化技術最為吸引用戶的一點。由于XenServer7.2版本以后的XenMotion熱遷移模塊是收費服務功能,設計方案采用的是開源免費版,因此沒有進行操作,但在進行XenMotion進行熱遷移時,有以上注意事項:在XenDesktop部署中不得使用StorageXenMotion。使用XenMotion轉移的虛擬機只能在同一個池的主機之間共享儲存。目標主機的XenServer版本必須與源主機的相同,而且也必須安裝相同版本的XenServerPVTools。目標主機必須至少提供與源主機的CPU相同的整套功能,且不能在AMD和Intel處理器之間移動。目標主機必須要有充足空余的內存與磁盤容量。無法直接遷移正在使用PCI直通功能的VM。5.3XenConvert物理主機轉換虛擬機技術(P2V)5.3.1P2V簡介物理磁盤數(shù)據(jù)轉換成虛擬磁盤數(shù)據(jù)。物理機的系統(tǒng)環(huán)境、數(shù)據(jù)儲存、軟件安裝路徑都是在磁盤上,對于虛擬而言,最核心部分也是虛擬磁盤,硬件信息只需完整地記錄到配置文件中去,構建虛擬機時給它分配對應的虛擬資源即可,因此P2V轉換的過程,核心就是對硬盤數(shù)據(jù)的轉換。5.3.2CitrixXenConvert的P2V實例運用XenConvert是思杰虛擬化集成里面一款用于從物理轉換成虛擬(P2V)的工具,可將服務器或者用戶桌面運行的Windows系統(tǒng)從物理機鏡像系統(tǒng)轉換成虛擬機鏡像系統(tǒng)遷移到XenServer或者ProvisioningServices虛擬磁盤中。安裝完整版的XenServer是有集成XenConvert工具的,使用該工具可以把安裝在物理機上運行Windows系統(tǒng)文件的或者在虛擬硬盤(VHD)格式的虛擬磁盤文件轉換成.vhd/.ova/.ovf等格式,通過XenCenter可以導入到XenServer中創(chuàng)建一臺一模一樣的虛擬機。1、在要轉移的計算機系統(tǒng)中安裝XenConvert應用程序,安裝完成后打開,選擇轉換源為此管理員計算機(以Windows10為例),目標選擇XenServer,然后單擊下一步。圖5-2CitrixXenConvert操作界面2、選擇要源主機要轉換的分區(qū),可以根據(jù)需求手動選擇要轉換的分區(qū)到目的分區(qū),并設置目標卷的可用空間大小或未分配的空間大小。圖5-3利用XenConvert將物理磁盤轉換成虛擬磁盤3、在轉換向導中連接指定的XenServer參數(shù),包括需要連接的主機名稱,對應的用戶名和密碼進行驗證,通過單擊瀏覽按鈕指定轉換的臨時目錄工作區(qū),然后單擊下一步。4、輸入要轉換的目標虛擬機名稱,系統(tǒng)文件要存放虛擬機的存儲庫,單擊下一步。5、仔細閱讀并確認要轉換虛擬機的目標信息,勾選將轉換文件的名稱記錄日志,單擊轉換按鈕。6、在轉換模式頁面,從源卷轉換文件到工作區(qū)卷文件。7、XenConvert會在要轉換的源機創(chuàng)建一個新的分區(qū),并將源卷C分區(qū)數(shù)據(jù)拷貝到新的分區(qū)上暫存,同時在工作區(qū)目錄下創(chuàng)建VHD文件;8、轉換文件完成后,在源系統(tǒng)中映射新分區(qū)會消失,工作區(qū)目錄文件轉換成OVF格式。9、在XenServer資源窗口中選擇windows10,打開虛擬機控制臺,查看轉換的虛擬機運行狀態(tài)。5.4虛擬化平臺Veeam備份系統(tǒng)虛擬機備份與還原5.4.1Veeam簡介目前Veeam有國際版的免費開源版提供使用,界面操作全為英文顯示。使用Veeam不僅僅只是用于進行數(shù)據(jù)備份和恢復,而且利用虛擬化、存儲和云技術可以提供高速恢復、數(shù)據(jù)丟失避免、驗證保護、高效處理數(shù)據(jù)和全面查看功能,為所有系統(tǒng)整機內容、應用程序和數(shù)據(jù)提供恢復時間和點目標,為企業(yè)提供快速、靈活且可靠的虛擬化應用和數(shù)據(jù)恢復提供強有力的保證。5.4.2創(chuàng)建備份作業(yè)1、在需要備份的系統(tǒng)中下載并安裝VeeamBackup,安裝完成后打開主界面,進入BACKUP&REPLICATION(備份和復制)選項欄,再進入Jobs,在右邊空白處右鍵選擇Backup。進入在配置備份頁面(Configurebackup)。2、在備份模式下(BackupMode),共有三種模式選擇,電腦全盤備份(Entirecomputer)備份整個計算機映像,以便在任何級別上快速恢復,從鏡像中刪除、臨時和頁文件自動排除,以減少備份的大?。痪淼燃墏浞荩╒olumelevelbackup)備份選擇卷的圖像,例如僅備份數(shù)據(jù)卷;文件等級備份(Filelevelbackup)通過掩碼備份單個文件和文件夾。此模式生成基于映像的備份,其中僅包含映像中選定的文件。3、對服務器虛擬化而言,基本選擇電腦整機備份,即保存整個系統(tǒng)為鏡像文件,以保證備份數(shù)據(jù)的完整一體性,確保應用業(yè)務所在安全穩(wěn)定的環(huán)境。4、選擇目標存儲路徑,可選擇的位置有本地存儲(Localstorage)、共享存儲(Sharedfolder)、veeam備份倉庫(veeambackuprepository)、微軟驅動(MicrosoftOneDrive),基于網(wǎng)絡儲存結構選擇共享存儲路徑NAS作為存放備份鏡像路徑。5、然后輸入網(wǎng)絡儲存路徑的詳細地址,并輸入許可證的賬號密碼,再選擇備份的存儲天數(shù),veeam也是集成自動存儲技術,可以自動在固定時間點備份存儲,而且自動清理超過時間點的過期文件。一般業(yè)務系統(tǒng)保存為7天,重要的業(yè)務系統(tǒng)保存為15天。圖5-4備份連接以及參數(shù)設計6、繼續(xù)點擊Advanced(高級)選項以進行備份的其它設置,在任務的創(chuàng)建配置過程中,Createactivefullbackupsperiodically,可以手動選擇固定某個時間點進行全量備份,其余時間進行增量備份。按照備份策略,選擇反向增量備份和全量備份Incremental,時間設置選擇Day,選擇每周備份的時間。圖設置全備份時間點7、設置備份啟用時間,這里設置每天凌晨1點開始備份,因為凌晨時間段是無用戶進行網(wǎng)絡登錄或者訪問操作,備份所占用的帶寬不會影響用戶的上網(wǎng)體驗而且第一次是進行全量備份,其它每天增量備份,設置后點Apply應用。圖手動設定每天自動備份時間點8、查看配置信息簡要檢查無誤后,選擇start手工第一次備份。9、備份完成,查看備份文檔,默認在選擇的磁盤中的任務名文件夾中,確定時間點與備份出來文件的格式以及容量大小。圖5-3Veeam備份示意圖5.4.3進行備份還原一切的備份操作都是為了恢復做的準備,所以恢復備份是veeam的重要組成部分,veeam提供了多種還原選項,有文件還原、磁盤卷還原、整機還原。而且可以支持選擇應用端啟動工具還原和開機啟動項還原,多重還原機制,確保備份的數(shù)據(jù)能還原成功。在XenServer虛擬化平臺里面,選擇以VeeamRecoveryMedia驅動介質的方式啟動還原操作,如圖所示:圖5-4虛擬機加載Veeam還原介質驅動在啟動首頁,提供三個選項,分別是veeam的vbk專屬鏡像還原——將windows備份的veeam代理還原到原始計算機或新計算機;windows故障恢復環(huán)境(windowsrecoveryenvironment)——啟動微軟windows系統(tǒng)鏡像恢復環(huán)境;工具(Tools)——瀏覽系統(tǒng)管理和診斷工具;選擇第一項專屬鏡像還原。選擇存儲位置的介質進行還原,提供本地存儲介質還原與網(wǎng)絡存儲介質還原,利用網(wǎng)絡儲存結構原理,選擇網(wǎng)絡儲存所在的NAS進行還原,然后點擊下一步。然后輸入網(wǎng)絡儲存路徑的詳細地址,并輸入許可證的賬號密碼,點擊下一步。選擇對應的備份鏡像,在備份時間表有增量備份鏡像,全量備份鏡像,如果是還原昨日配置,可選擇昨日增量備份鏡像,如果選擇整機遷移還原,則要選擇全量備份鏡像。圖選擇對應時間點進行還原還原模式也有三種模式提供選擇,分別是整機還原(Entirecomputer)、僅系統(tǒng)磁盤還原(Systemvolumesonly)、手動選擇恢復(Manualrestore),設計選擇為整機還原,驗證備份的完整一體性。在磁盤映像管理頁(DiskMapping),選擇對應的磁盤還原至虛擬機創(chuàng)建的磁盤,值得注意的是虛擬機磁盤必須等于大于要還原的邏輯磁盤。圖磁盤點對點還原設置點擊下一步,確實信息無誤開始還原,根據(jù)磁盤容量大小決定還原時間。根據(jù)磁盤容量大小決定還原時間,過程等待即可,若有報錯,可查詢日志信息查找原因解決。使用網(wǎng)絡儲存NAS存儲Veeam虛擬機鏡像技術NAS(NetworkAttachedStorage)網(wǎng)絡附屬存儲器,作為企業(yè)便捷、應用廣泛的必不可少的共享性儲存結構系統(tǒng),給儲存?zhèn)浞萏摂M機鏡像以及各種所需的操作系統(tǒng)鏡像引用路徑,Veeam儲存不僅支持本地,還支持NAS網(wǎng)絡儲存,兩者的完美結合使用,再者利用企業(yè)內局域網(wǎng)千兆級的網(wǎng)絡帶寬,快速部署安裝、儲存還原服務器系統(tǒng)。首次需要在NAS文件系統(tǒng)創(chuàng)建專屬備份鏡像存儲的路徑位置,并設置域控訪問權限,確保鏡像的完整一致性。往后VEEAM操作都需通過對應的域控登錄才能進行備份還原操作。5.5.1NAS互備容災技術對企業(yè)而已,數(shù)據(jù)就是IT的基本,對數(shù)據(jù)的存儲備份以及容災備份尤為重要,因此一般都會設計兩臺NAS網(wǎng)絡儲存結構,A設備負責主要數(shù)據(jù)的存儲以及虛擬全增量鏡像存儲,B設備為對A設備的全量備份,保證A設備在宕機或者損壞時,能直接切換IP進行備份存儲,保證業(yè)務數(shù)據(jù)的高靠性與高可用性。登錄NAS設備B系統(tǒng)的備份管理頁面。選中Rsync備份服務器的,在應用設置前確保兩端設備的端口必須一致。登錄NAS設備A系統(tǒng)的備份管理頁面,選擇創(chuàng)建,填寫設備B的IP地址,設置端口與密碼,點擊測試連接。設定備份日程,完成同臺備份設計。圖5-5NAS互備設置還原異常處理事項5.6.1UEFI(GPT)轉Legacy(MBR)由于部分物理主機在BIOS引導用的是UEFI接口啟動模式,但是Xenserver7.2創(chuàng)建的虛擬機卻不支持此模式啟動,而且虛擬機并未有BIOS的引導頁面,因此在還原成功后,會出現(xiàn)開機無法啟動系統(tǒng)的異常情況,值得注意的是,使用XenConver和Windowsbackup進行的還原出來的系統(tǒng)必然會出現(xiàn)這樣的情況。遇到這種情況的解放方案是需要借用第三方PE引導工具在PE系統(tǒng)修復啟動引導,設計主要用到的是大白菜PE引導系統(tǒng)。首先需要在虛擬機的啟動項選擇dabaicai.iso為啟動驅動項,進入大白菜PE引導系統(tǒng)的打開diskgenius磁盤分區(qū)管理頁面,找到本地磁盤C(默認系統(tǒng)盤)前面的UEFI分區(qū),就是系統(tǒng)保留的100M的分區(qū)。圖5-6UEFI轉MBR右鍵選中UEFI分區(qū),選擇刪除當前分區(qū)或者按del鍵。刪除后,把系統(tǒng)盤所在的驅動右鍵選擇為轉換分區(qū)表類型為MBR格式,并激活當前分區(qū)。在磁盤分區(qū)管理頁面進行保存退出。繼續(xù)在大白菜PE系統(tǒng)修復的桌面選擇引導修復項,點擊開始修復系統(tǒng)C盤啟動盤,修復完成后重啟系統(tǒng)即可。圖修復系統(tǒng)引導驅動5.6.2壓縮虛擬機磁盤卷由于XenServer下創(chuàng)建的虛擬機僅支持Legacy+MBR的模式啟動的磁盤卷,但是有部分服務器已經(jīng)安裝使用UFEI+GPT模式的,而且XenServer創(chuàng)建單個磁盤不能超過2T的容量。VEEAM備份還原是根據(jù)每個磁盤的邏輯容量進行覆蓋還原操作,及時你備份原來的磁盤只儲存了1GB的數(shù)據(jù),但磁盤總容量為100GB,分配的虛擬磁盤也必須等于大于100GB才能進行正常還原。對于作為數(shù)據(jù)儲存的磁盤而已,儲存磁盤卷往往是大于2T的邏輯分配,用VEEAM在XenServer下進行的還原最大的問題就是邏輯磁盤卷的管理操作,對于部分已經(jīng)超過2T的磁盤分區(qū),必須要切割調整分區(qū)才能正常進行還原。在磁盤管理頁面下,可通過壓縮空余卷來剪輯磁盤邏輯卷的容量分配,但也存在遇到無法將磁盤卷壓縮到超出任何不可移動范圍的異常報告,原因是某個系統(tǒng)文件阻隔導致卷無法繼續(xù)壓縮。打開系統(tǒng)事件查看器,找到windows日志目錄下的應用程序日志,找到此事件日志項會詳細記錄有關最后一個不可移動的文件——限制可回收的最大字節(jié)數(shù)。解決辦法既是定位找到對應文件的路徑,然后將此文件拷貝到磁盤卷,重新壓縮此分區(qū)即可。圖5-7事件查看錯誤日志
第6章總結6.1全文總結本文主要展示了對企業(yè)內部資源進行整合,利用CitrixXen平臺對當前現(xiàn)有的服務器進行虛擬化整合管理,應用服務器虛擬化技術能夠幫助企業(yè)對物理設備資源的整合顯著降低運行投資成本,提高資源的利用率。論文首先闡述了服務器虛擬化的應用的背景和以及及其未來的發(fā)展趨勢,淺析虛擬化的基本原理與分類情況,探索了解Xen虛擬化體系結構并簡略對比當今市場的虛擬化產(chǎn)品。此后應用CitrixXen進行服務器虛擬化項目設計,首先進行前期的布局存儲、網(wǎng)絡的規(guī)劃,然后安裝部署XenServer系統(tǒng)與XenCenter終端管理中心的環(huán)境。并且根據(jù)實際需求創(chuàng)建虛擬機與下發(fā)應用業(yè)務,構建完善服務器虛擬化應用鏈。在服務器虛擬化深化部分,主要探究并運用了Xen虛擬化平臺冷熱機遷移技術、物理主機與虛擬機轉換技術、利用Veeam工具進行自動化備份還原保護虛擬機技術,提高了服務器虛擬化的實際設計應用。綜上所述,本論文通過利用CitrixXen平臺的相關知識的應用,給企業(yè)的IT資源設備一個高效、低成本的設計應用實例。6.2課題展望目前服務器虛擬化技術已經(jīng)得到穩(wěn)足發(fā)展,長遠來看,其作為云計算的應用基礎必將越來越受到開發(fā)商和企業(yè)用戶的重視,未來的云計算、大數(shù)據(jù)信息化時代,服務器虛擬化必將大力致力于提高IT資源利用率與業(yè)務高效率,將進一步在高可用性和容災備份領域扮演重要的角色。
參考文獻[1]王中剛,薛志紅,項帥求.服務器虛擬化技術與應用.人民郵電出版社.2018[2]王春海.虛擬化技術實踐指南.機械工業(yè)出版社.2017[3]顧中林,徐義晗.虛擬化與網(wǎng)絡存儲技術.人民郵電出版社.2019[4]王培麟.云計算虛擬化技術與應用.人民郵電出版社.2017[5]成杭.CitrixXenServer企業(yè)運維實戰(zhàn).機械工業(yè)出版社.2018[6]石磊,皺德清,金海.Xen虛擬化技術.華中科技大學出版社.2009[7]池瑞楠,姚駿屏.虛擬化技術與應用.高等教育出版社.2018[8]MattewPornoy.Xen:VirtualizationTechnologyIntroductionofActualCombat9(Sencond).PressTsinghuaUniversity.2017[9]JeannaMatthews.RunningXen:AHands-onGuidetotheArtofVirtualization.PressBeijingAerospace.2014[11]ChisnallDavid.Xen:VirtualizationTechnologyFullyGuidedReading.PressBeijingAerospace.2014
致謝美好的大學學習生活即將結束,感謝在這段時間以來各位老師不辭辛苦的教誨與指導,銘記各位師兄姐及同學們的熱心幫助,良師益友,勉勵我前行。在畢業(yè)論文設計階段,尤其感謝我的指導老師楊老師,工作繁忙抽空之余閱讀稿子并給出許多中肯實用的建議,指引的前瞻性與全面性令我的設計往更好方面拓展,使我順利完成畢業(yè)設計。
HYPERLINK如何選擇組裝電腦配件
如何選擇組裝的電腦配件.
第一,選擇好CPU平臺,就是INTER還是AMD,看你是要配什么樣的電腦,高端還是低端的,兩個平臺都高低的產(chǎn)品。第二,選擇主板了,主板的品牌比較多,質量,價格也不一,當你第一步卻定了,那么主板也就相應的卻定下來了,以INTER為例,只可以選擇775接口的主板(早期有478接口的,不推薦),主板的選擇主要有兩種,一是集成顯卡,二是不集成顯卡。集成顯卡的話,就可以省下顯卡的錢,但是對游戲玩家不推薦。那么當然是選擇不集成顯卡的主板了,而且最好選擇一線品牌,如華碩,技嘉等。主板里,還有個蕊片組的選擇。關于蕊片組,各個品牌的主板命名有些不一樣,主流是INTER965,945,915,VIA的KT890,還有NFORCE4,NFORCE5。等。比較難說清楚。最好是選擇INTER的蕊片組,雖然價格會稍高一些。推薦945,技術比較成熟。第三,顯卡的選擇。顯卡主要還是有兩類品牌,GEFORCE和ATI,兩個品牌有高,中,低的顯卡。顯卡選擇要看你個人喜歡了,預算充足的話,最好是買中,高端的顯卡。
第四,就是內存了,內存關系電腦的穩(wěn)定性。當然是要好一點的。買一線品牌的?,F(xiàn)在配電腦,主流是DDR667,DDR800DDR1333第五,顯示器的選擇,推薦液晶。如何選擇硬件組裝電腦這是一個老生常談的問題了,這也是一個讓高手們顯示自己硬件功底的問題,同時這還是一個讓很多新手為之焦頭爛額的問題。該怎么配?具體配什么?怎樣配才能盡量減小瓶頸?本文就將從內到外,從理論到實踐,為朋友們抽絲剝繭一一道來。
一、CPU
作為一臺電腦最關鍵的組成部分,CPU確實起著舉足輕重的作用,但體現(xiàn)一臺電腦的綜合速度,并不是僅僅依靠CPU的,常??吹胶芏嘈率謧冊谂潆娔X的時候,把CPU選的很好,但其他的東西諸如內存、主板、硬盤等都選的不太理想,好像這臺電腦速度的快慢就體現(xiàn)在CPU速度的快慢上似的。甚至很多著名的品牌機廠商,都推出過類似“P4+256M內存”的這種跛腳配置。其實對于一般的家用電腦而言,一個真正會配的高手,是不會把大量的錢花在CPU上的。家用電腦,畢竟不是做密集型科學計算用的,它講求的是多種媒體的配合工作,講求的是能一邊下載文件、一邊上網(wǎng)瀏覽網(wǎng)頁、一邊聽音樂、一邊還能打開其他的程序,在這種情況下,提升內存的容量比提升CPU的主頻對速度的影響要明顯的多。現(xiàn)今的中國家庭用戶,很多家長對于電腦一竅不通,他們只聽說“奔四”代表著速度快,并不知道整機速度的快慢除了CPU以外,還有很多其他的因素影響著它。但在買電腦的時候,最后做決定并掏錢的人,往往都是這些啥都不懂的家長們,于是就出現(xiàn)了上面的一幕:品牌機廠商為了能有更好的銷路、兼容機裝機店的銷售人員為了能拿到更多的獎金,開始違背良心來配置出這種高主頻處理器、低容量內存的跛腳電腦。說嚴重點,這是屬于對消費者的不負責任,是一種商業(yè)欺詐行為!同樣5000元的配置,高手配出來的賽揚,比新手配出來的P4還要快很多,曾經(jīng)有一家全球著名的硬件網(wǎng)站在2003年的時候刊登過一篇關于配置家用電腦時各硬件占用總預算百分比的文章,文中很明確的提到了CPU的價錢最好不要超過總預算的10%-15%,我們雖然不能說他肯定完全正確,但至少人家是通過很多調查后得出的結論,有借鑒的理由。反觀現(xiàn)在的很多所謂的“低價奔四電腦”、“3999元買P4品牌機”之類的廣告,我想說的就是:你花了3999元,只買了一塊P4的處理器,其他的什么都沒有了!
二、內存
對于配置一臺電腦來說,內存是重頭戲,容量、速度、類型等等每一項指標都對最終的整機綜合速度起著至關重要的影響,尤其是內存的帶寬和容量。對于內存帶寬而言,很多人都認為400MHz、533MHz前端總線的賽揚四或P4,配單通道的DDR內存就足夠了,雙通道DDR內存是配合800MHz以上前端總線的P4處理器用的,其實這樣就大錯特錯了,哪怕是最老的賽揚四,都需要雙通道的DDR內存才能達到它的帶寬!也就是說,你如果選擇賽揚四1.8G,必須配合865以上的主板和至少雙通道DDR200的內存,才能滿足它的帶寬要求!稍微計算一下就可以得知:賽揚四1.8G的前端總線是400MHz,它的內存帶寬理論值是400MHz×64bit÷8=3.2G/s,但當它裝在845系列的主板上時,由于845主板的限制,即使你插上能符合它帶寬要求的DDR400內存,也只能運行在DDR266上,這時的內存所能提供的帶寬是266MHz×64bit÷8=2.1G/s,比3.2G/s要小很多,即使你通過BIOS里的內存調節(jié)選項往上調節(jié)一檔(也只能調節(jié)一檔而已),讓內存運行在DDR333下,所能提供的帶寬也僅僅是333MHz×64bit÷8=2.66G/s,離3.2G/s還是有一定的距離,而內存帶寬的降低,能非常明顯的降低整機的綜合速度,運行任何程序都能明顯的感覺出來!所以如果想滿足賽揚1.8G處理器的內存帶寬要求,你必須要為它配置865以上的主板和雙通道的內存才行!P4亦是如此。很多人也許會問:那845系列的主板是配什么處理器的呢?我想回答你的就是:845系列的主板是屬于“不能用”的主板,因為處理器永遠比主板發(fā)展的快,當初Intel造出845系列的芯片組是為了能給當時的賽揚和P4提供一個過渡的平臺,不至于讓它們成為“沒有主板配合”的處理器而已,也是為了能在低端市場分一杯羹,而現(xiàn)今865甚至9xx系列的主板橫行的時候,845系列的主板確實是屬于“不能用”的主板了,滿足不了任何一款處理器的內存帶寬,造成性能上的嚴重低下,試問這種主板你會選擇么?即使配臺2000多元的超低價電腦,也不要去選擇845系列的主板,至少需要865以上的和雙通道內存才行,因為內存帶寬是一個非常影響系統(tǒng)性能的參數(shù),倘若一味的為了省錢而配置845系列的主板,那就得不償失了。
內存的容量方面,應每個人對電腦的使用方向不同,容量的要求也是不同的,現(xiàn)在配置的家用電腦,筆者建議:如果不打游戲,或者是打打掃雷、紙牌之類的游戲,平時注重于上網(wǎng)瀏覽或者是聊天、看電影之類的應用的話,內存容量不應該低于1G;如果是偶爾打打單機游戲或者是網(wǎng)絡游戲,內存容量應該選擇在2G左右,如果是經(jīng)常打大型的游戲或是進行HDTV視頻編輯等應用,那么4G的內存是必不可少的。
三、主板
一臺電腦的穩(wěn)定性和兼容性,一大部分是看主板的,一款優(yōu)秀的主板不僅需要擁有上等的用料和優(yōu)良的做工,還需要擁有合理的走線設計,那些沒有技術實力的三、四線主板廠家生產(chǎn)的主板,多數(shù)是采用公版走線,而且用料非常差,穩(wěn)定性不堪一擊,這種類型的主板,筆者建議寧愿不買電腦也不要配這種主板,否則以后將會是個淘氣的祖宗。對于家庭用戶,主板方面一定不能省錢,預算夠的話最好能買個一線的主板品牌,如果預算實在不足,二線的主板是底線了,不要再往下選擇了,畢竟家用電腦是用來使用的,不是用來整天維修的。再談到主板的用料,筆者常常看到很多新手在配置主板的時候,貌似老鳥似的說某某品牌的主板好,某某品牌的不好,試問你知道它好在哪里么?不好在哪里么?這個就要看主板的用料了,雖然用料好的主板并不能代表一定是高檔主板,但最少能代表它的電氣性能出色。舉一個很簡單的例子吧:有A、B兩款主板,A主板的處理器供電濾波電容采用的是日系電容,B主板的處理器供電濾波電容采用的是臺系電容,那么基本上可以肯定的是:如果在電源輸出電壓的波動范圍比較大的情況下,A主板就比較能耐得住,而B主板就很容易產(chǎn)生電容鼓包、漏夜等情況。不要小看這小小的電容,筆者從一個開維修店的朋友那里得知,來維修主板的人,有80%的都是這幾個小電容損壞,究其原因,就是電源選擇的不好,導致了輸出電壓的不穩(wěn)定,久而久之最終導致這幾個小電容爆漿,并且詳細敘述了主板的品牌:“一線廠家的×碩牌主板就很少出現(xiàn)這種情況,但同樣為一線廠家的×星牌主板,經(jīng)常遇到!原因就是前者的大部分主板使用的是日系電容,而后者的大部分主板為了省錢,選用的是臺系電容!”廠家的廣告不能信,宣傳也不能信,看到一個產(chǎn)品的廣告之后,你所能相信的唯一一點就是:地球上有這么個產(chǎn)品的存在!然后其他的就統(tǒng)統(tǒng)都不能信了!網(wǎng)上有好多所謂的“評測”文章,都是槍手寫的,基本上沒有任何參考余地,只能作為一篇小說來讀,一款主板的真正性能,只有你自己使用了之后才能知道。廠家為了銷量、商家為了利潤,他們能把最最垃圾的主板宣傳為最頂級的產(chǎn)品,筆者曾經(jīng)就看到過一款四線品牌的主板廠商,在對其主流主板的廣告上說“最優(yōu)秀的設計、最精湛的工藝、最穩(wěn)定的性能”……結果一看報價:550元/塊……其他的話我也不想多說了,只想問問這家廠商:你這么垃圾的主板都用了三個“最”字,那么華碩的同芯片組主板,售價是你三倍的,應該用什么詞語來描述了??中國有一句古話:一分錢一分貨,說的非常正確!不要認為價格高的主板就是暴利產(chǎn)品,從市場經(jīng)濟學上說,暴利產(chǎn)品是不會被市場所接受的,之所以他能存活到今天,而且售價依然是這么高,肯定有他的理由,他在做工用料方面肯定比其他品牌的要好很多,成本高所以售價高,在此,筆者奉勸大家一句:買主板千萬不要憑僥幸心理,認為自己能花很少的錢買到很好的東西,只有錯買的沒有錯賣的,商家永遠都比你精明!主板上面還是老老實實的多花點錢來買個一線產(chǎn)品吧,否則以后有你吃苦的時候!
四、硬盤
現(xiàn)在的電腦,硬盤的速度當之無愧的成為了“第一大瓶頸”,無論你是再高的高手,配電腦的時候也無法消除這個瓶頸的存在,我們只有盡量的減小…再減小……。對于家用電腦的硬盤來說,容量和速度是兩個非常重要的參數(shù),容量上而言,筆者建議:如果你的電腦只是上網(wǎng)瀏覽瀏覽、偶爾打打小游戲的,那么160G的硬盤是個不錯的選擇;如果你常常下載軟件或電影,那么250G的硬盤是個不錯的選擇,如果你是個下載狂人,那么400G的硬盤比較適合你;如果你有DV或者是經(jīng)常編輯大型的視頻文件,那么400G×2比較適合你,如果你是個玩HDTV的人,那么恭喜你,400G×4也許你都不夠用。對于硬盤容量上的選擇,你不能考慮現(xiàn)在是否夠用,你應該考慮未來的1年里是否夠用,大概的公式是:現(xiàn)在需要的容量×3。也就是說,如果你現(xiàn)在感覺80G的硬盤差不多夠用了,那么你就需要買個250G的硬盤。如果你現(xiàn)在感覺120G的硬盤夠用了,那么就去買個400G的硬盤吧。硬盤另外的一個參數(shù)就是速度,受到內部傳輸率等諸多因素的限制,一塊硬盤的實際傳輸速度是不可能達到它的接口速度的,現(xiàn)在的并口硬盤基本上都是ATA133了,串口硬盤也都是150了,但民用級硬盤的實際傳輸速度最快的也還沒突破66M/s,所以跟內存相比,硬盤的速度是電腦中最大的瓶頸,那么怎么來減小這個瓶頸呢?于是人們就發(fā)明了RAID,就是磁盤陣列(當然RAID不是僅僅為了這個而發(fā)明的),用兩塊一模一樣的硬盤來組成RAID0,速度理論上能提高1倍,雖然實際上是不可能達到1倍的,但至少能非常非常明顯的感覺到了硬盤速度的提升,筆者建議:如果你買的主板是帶有RAID功能的,并且你需要保存的數(shù)據(jù)不是很重要的話,那么強烈建議你在預算允許的情況下購買兩塊硬盤來組建RAID0,這將使你能親身體會到飛機與火車的速度差別!但最好是串口的,如果是并口的話,因為并口走的是PCI總線,由于PCI總線上的設備比較多,所以速度不可能達到比較高的地步,但如果是串口的話,那么硬盤的速度提升將更加明顯!
五、顯示器
顯示器方面,筆者想澄清一個觀念:曾經(jīng)聽過非常多的人說液晶顯示器保護眼睛,因為沒有輻射和閃爍……包括很多業(yè)內人士都這么認為的,其實錯了,液晶顯示器比普通的CRT還要傷眼睛!因為傷眼睛不僅僅是輻射和閃爍,還有對比度、亮度等參數(shù),雖然液晶顯示器的輻射和閃爍比CRT要小的多,但它那要命的對比度、那要命的色澤度、還有那大于每平方米300cd的亮度,這些都會對眼睛造成很大的傷害,并且你即使將液晶顯示器的亮度和對比度調節(jié)到最低,也還是非常的刺眼。德國的一家權威機構做過一項調查:液晶顯示器用久了會使人的眼睛感覺到疲倦,甚至頭痛等癥狀,而使用相同時間的CRT顯示器,卻基本沒有這些情況出現(xiàn)?,F(xiàn)在的通過TCO03認證的CRT顯示器,其實外露的輻射已經(jīng)相當小了,基本上對人已經(jīng)沒有多大的傷害了,閃爍感也可以通過調節(jié)刷新率來降低,筆者實在是搞不懂為什么很多人非要去選擇液晶顯示器,還非要說液晶顯示器不傷眼睛??一個最差的17寸液晶顯示器的價格,能買一臺不錯的、通過TCO03標準的19寸CRT了,顯示面
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權益所有人同意不得將文件中的內容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
- 6. 下載文件中如有侵權或不適當內容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 二零二五版農(nóng)產(chǎn)品出口運輸及保險合同示范4篇
- 二零二五年度二零二五苗木種植基地管理服務采購合同4篇
- 2025年度路燈照明設備采購及安裝調試合同3篇
- 2025年度內墻膩子工程環(huán)保材料研發(fā)與推廣合同2篇
- 2025工廠生產(chǎn)線承包及品牌形象設計服務合同3篇
- 2025年度退休教師教育項目策劃與執(zhí)行聘用合同
- 2025年度果樹租賃與果樹品牌授權合作合同
- 2025年度智能化社區(qū)圍墻建設施工合同范本4篇
- 二零二五年度企業(yè)辦公空間綠植美化租賃合同3篇
- 2025年度離婚協(xié)議無財產(chǎn)分割與子女監(jiān)護權變更及執(zhí)行合同
- 五年級上冊寒假作業(yè)答案(人教版)
- 2025年山東浪潮集團限公司招聘25人高頻重點提升(共500題)附帶答案詳解
- 2024年財政部會計法律法規(guī)答題活動題目及答案一
- 2025年江西省港口集團招聘筆試參考題庫含答案解析
- (2024年)中國傳統(tǒng)文化介紹課件
- 液化氣安全檢查及整改方案
- 《冠心病》課件(完整版)
- 2024年云網(wǎng)安全應知應會考試題庫
- 公園保潔服務投標方案
- 光伏電站項目合作開發(fā)合同協(xié)議書三方版
- 2024年秋季新滬教版九年級上冊化學課件 第2章 空氣與水資源第1節(jié) 空氣的組成
評論
0/150
提交評論