lenovo超融合hx系列-白皮書中文_第1頁
lenovo超融合hx系列-白皮書中文_第2頁
lenovo超融合hx系列-白皮書中文_第3頁
lenovo超融合hx系列-白皮書中文_第4頁
lenovo超融合hx系列-白皮書中文_第5頁
已閱讀5頁,還剩34頁未讀 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

1、內(nèi)容簡介2引言3超融合基礎(chǔ)架構(gòu)7聯(lián)想超融合:塑造新的格局12聯(lián)想超融合 HX 系列:將路線到前沿的超融合基礎(chǔ)架構(gòu)13聯(lián)想超融合 HX 系列:技術(shù)規(guī)格16聯(lián)想超融合 HX 系列:System X 的可靠性18聯(lián)想超融合 HX 系列:強大的 XCLarity 管理工具24聯(lián)想超融合 HX 系列:創(chuàng)新的超融合系統(tǒng)27聯(lián)想超融合 HX 系列:特性33為何選擇聯(lián)想?38目錄數(shù)據(jù)中心如今站在業(yè)務(wù)的最前線,數(shù)據(jù)量性增長,客戶體驗無要,IT 成為增長引擎。數(shù)據(jù)中心必須,以迎接新的。為克服這些 IT臺開發(fā)的超融合系統(tǒng)。,聯(lián)想推出了超融合 HX 系列產(chǎn)品,它是基于 Lenovo 企業(yè)級服務(wù)器平聯(lián)想超融合系統(tǒng),定義

2、的解決方案,可在數(shù)據(jù)中心基礎(chǔ)架構(gòu)的整個生命周期內(nèi),在每個方面都實現(xiàn)簡化,從采購、部署到管理、擴展和支持。聯(lián)想超融合 HX 系列具備卓越的可靠性、值得信賴的安全性、廣泛且可預(yù)知的擴展性,同時在管理方面得到簡化,并縮短了價值實現(xiàn)時間(Time to Value),是所有虛擬化應(yīng)用的理想選擇。內(nèi)容簡介一、IT如今的 IT 基礎(chǔ)架構(gòu)仿佛一頭難以馴服的猛獸。通常的數(shù)據(jù)中心都會存在多個版本的服務(wù)器、操作系統(tǒng)、管理程序和設(shè)備,而且它們通常來自不同的供應(yīng)商。IT 管理員不得不心力交瘁的處理各種復(fù)雜的任務(wù),同時還要用心遺留的設(shè)備。服務(wù)器和虛擬化可以顯著降低復(fù)雜性,但是在整個數(shù)據(jù)中心內(nèi)實施虛擬化,通常需要涉及多個

3、用戶界面和大量 IT 知識和經(jīng)驗。企業(yè)數(shù)據(jù)中心成本與復(fù)雜性、IT 孤島、無暇創(chuàng)新的難題:部署、管理和擴展數(shù)據(jù)中心變得極其昂貴和消耗時間;老舊的基礎(chǔ)設(shè)施造成不靈活的數(shù)據(jù)孤島,需要專門管理;IT忙于解決日常運維事務(wù)而錯失機遇。有數(shù)據(jù)顯示:僅僅為了維持系統(tǒng)正常運行,企業(yè)就已經(jīng)花費了 7080%的 IT。能否利用相同的管理的數(shù)據(jù)?如何轉(zhuǎn)化成增長動力?新業(yè)務(wù)模式,IT 架構(gòu)要隨之改變,如何從傳統(tǒng)架構(gòu)的中潛力?IT 的投資方向,需要把握未來已知和未知的機遇。創(chuàng)新的步伐需要更加敏捷,以利用已知和未知的市場變化。二、IT 基礎(chǔ)架構(gòu)演進數(shù)據(jù)中心在過去的幾十,已經(jīng)發(fā)生翻天覆地的變化??蛻粜枨笫峭苿?IT 基礎(chǔ)架構(gòu)

4、演進的驅(qū)動力。在 IT 基礎(chǔ)架構(gòu)演進的過程中,每一次技術(shù),都在解決資源分配和利用效率這一主要。如何更有效的分配和利用資源?解決這個問題的思路,就是從應(yīng)用的維度上,提高資源的管理粒度和資源的提供密度。引言在大型機時代,相當(dāng)長的時間里,MainFrame 是數(shù)據(jù)中心業(yè)務(wù)系統(tǒng)的基礎(chǔ),大型機本身融合了CPU、內(nèi)存和競爭優(yōu)勢。,冗余機制實現(xiàn)了高可靠性,高性能也是其關(guān)鍵的在二十世紀(jì)六十年代,IBM System/360 上出現(xiàn)了CP/CMS 分時操作系統(tǒng),CP 用于創(chuàng)建虛擬機環(huán)境,可以為每個用戶提供一個模擬的、獨立的 System/360 系統(tǒng),而 CMS則是一個輕量級、單用戶的操作系統(tǒng),通過在 CP 中

5、運行多個 CMS,允許的用戶并發(fā)S/360。(經(jīng)過近三十年的演進,IBM 在 2000 年發(fā)布了 z/VM,2013 年,6.3 版本發(fā)布)但大型機本身并沒有得到徹底解決:高昂的采購費用和成本;極其復(fù)雜、要求專業(yè)化團隊支持;封閉系統(tǒng),缺乏彈性、應(yīng)用環(huán)境高度豎井化。對于大多數(shù)的公司或者組織而言,其業(yè)務(wù)并無法充分利用大型主機的能力,在成本上也無法承擔(dān)其帶來的高昂的成本,這也催生了獨立服務(wù)器時代的到來。獨立的服務(wù)器,尤其是 IA 架構(gòu)的 X86 服務(wù)器,更靈活的CPU、內(nèi)存、資源分配,可以通過網(wǎng)絡(luò)共享和,適用于遠比大型機更靈活的系統(tǒng)環(huán)境。獨立服務(wù)器具有更大的靈活性,用戶可以為不同的業(yè)務(wù)類型分配不同性

6、能的服務(wù)器,企業(yè)數(shù)據(jù)中心可以用幾組獨立的服務(wù)器來支撐業(yè)務(wù)的正常運行。但獨立服務(wù)器模式仍然存在問題:對于計算和而言,服務(wù)器成為單點故障,通常采用 HA實現(xiàn)雙機高可用;增加了豎井化的環(huán)境,將原有的大孤島分散為多個小的數(shù)據(jù)孤島;隨著獨立服務(wù)器數(shù)量增加,資源利用率不均上升。變得尤為突出,管理成本直線于 1998 年成立(并在 2004 年被 EMC 收購)的 VMware 是虛擬化時代的先行者和者,2002 年發(fā)布了面向服務(wù)器市場的 VMware ESX,可以直接運行在服務(wù)器硬件上,虛擬服務(wù)器可以通過ESX硬件資源?,F(xiàn)在VMware vSphere、Hyper-V、開源 KVM 是三個主要的 Hype

7、rvisor虛擬化。在虛擬化時代以前,數(shù)據(jù)中算資源利用率比較低,資源分配的效率也很低。虛擬化的引入,使得多種不同的工作負載和操作系統(tǒng),以虛擬機(VM)的形式運行在單一物理服務(wù)器之上。借助操作系統(tǒng)和物理硬件解耦,整合工作負載,虛擬化可以增加業(yè)務(wù)應(yīng)用對于服務(wù)器硬件資源的利用率。如今的 X86 虛擬化技術(shù)已經(jīng)變得非常成熟且有效,借助功能豐富的高級特性,包括在線遷移、高可用、動態(tài)資源負載均衡、跨數(shù)據(jù)中心的延伸集群等,用戶可以真正的實現(xiàn)計算資源池化和動態(tài)遷移工作負載。但在虛擬化時代,問題仍然存在,隨著數(shù)據(jù)量的性增長,企業(yè)需要的空間,而為了保證數(shù)據(jù)和可靠性和業(yè)務(wù)的連續(xù)性,對提出了更高的可用性要求,使得共享

8、/網(wǎng)絡(luò)/外置磁盤陣列得到了快速發(fā)展??梢宰⒁獾剑禾摂M機數(shù)量的快速增長導(dǎo)致更高的需求;陣列的使用帶來數(shù)據(jù)孤島和管理復(fù)雜性;虛擬機快速增長和負載,導(dǎo)致IO 瓶頸;配置更加復(fù)雜,資源加??;雖然虛擬化(SVC、VPLEX)可以實現(xiàn)異構(gòu)資源的整合和管理,SSD 的普及可以幫助緩解 IO 瓶頸問題,但這遠遠不能解決問題。在數(shù)據(jù)中心里面,計算資源和資源仍然是截然不同的兩部分。三、Web-Scale IT綜上,企業(yè)數(shù)據(jù)中心已變得極其復(fù)雜,傳統(tǒng)架構(gòu)使得基礎(chǔ)設(shè)施的生命周期的每個階段(、部署、管理、擴容)都。源自、互聯(lián)網(wǎng)公司的Web-Scale IT,則構(gòu)想了一種更好的方法來創(chuàng)建和管理數(shù)據(jù)中心。典型的互聯(lián)網(wǎng)數(shù)據(jù)中心

9、通常包含 10地乃至全球部署,應(yīng)用測試、系統(tǒng)上線、持。+的 X86 定務(wù)器,跨廣域網(wǎng),在各更新極其頻繁,有大規(guī)模的運維團隊支互聯(lián)網(wǎng)思維下的數(shù)據(jù)中心設(shè)計原則是:K.I.S.S.(ket simple and stu),從系統(tǒng)設(shè)計層面消除單點故障和瓶頸,采用分布式、虛擬化、云化的架構(gòu),通過自動化管理、自恢復(fù)設(shè)計進行運維管理,關(guān)注能效、運營效率,以降低 TCO。Web-Scale IT 使得這些公司能夠達到前所未有的業(yè)務(wù)敏捷性、可的規(guī)模和較低的總體擁有成本。IT 基礎(chǔ)設(shè)施可以按照預(yù)想擴展到數(shù)千臺服務(wù)器和多達ZB 級的數(shù)據(jù),并且可以持續(xù)運行而不會中斷。從而使得公司可以快速的開發(fā)和發(fā)布產(chǎn)品,并將新產(chǎn)品和

10、服務(wù)推向市場。Web-Scale IT 對數(shù)據(jù)中心技術(shù)的方方面面:從基礎(chǔ)設(shè)施、應(yīng)用設(shè)計到 IT 組織和處理都產(chǎn)生了深遠的影響?;赪eb-Scale IT 的基礎(chǔ)設(shè)施,使得數(shù)據(jù)中心回歸超凡的簡潔性。一、為什么超融合?基于Web-Scale IT 的超融合基礎(chǔ)架構(gòu),可以解決傳統(tǒng)架構(gòu)用戶將焦點從復(fù)雜的基礎(chǔ)架構(gòu)轉(zhuǎn)到管理的易用性和系統(tǒng)堆棧的簡化。和瓶頸。幫助基于Web-Scale IT 的超融合基礎(chǔ)架構(gòu)與傳統(tǒng) IT 有很大的區(qū)別:標(biāo)準(zhǔn)的、即刻可用的 X86 服務(wù)器提供計算和資源,而不再需要單獨的類似于SAN 的資源;可以降低空間和能源需求,并簡化基礎(chǔ)設(shè)施的;憑借智能,IT 環(huán)境可根據(jù)需要逐步進行小容量

11、擴展;100%定義的,無需依賴硬件即可進行彈性擴容、性能加速或?qū)崿F(xiàn)任何功能,可快速增加新的功能而無需進行硬件升級;可在不停機的情況下配置基礎(chǔ)設(shè)施,以支持不同的應(yīng)用需求;在整個集群中分配數(shù)據(jù)、元數(shù)據(jù)和瓶頸或阻礙,整個環(huán)境可無限擴展;在數(shù)據(jù)和控制路徑中沒有任何專門為彈性擴展和不間斷運行而創(chuàng)建的,可從單點故障中快速恢復(fù),無需降低應(yīng)用或數(shù)據(jù)可用性的級別;分布式運行;了故障,并使用全部資源來恢復(fù)正常工作,同時集群可保持持續(xù)大量的自動化和全方位的REST API 降低了運營成本,同時大量分析可獲得有用結(jié)論,并提高數(shù)據(jù)驅(qū)動的效率,企業(yè)能以更低運營成本實現(xiàn)的功能;那么為什么現(xiàn)在超融合概念得到了普遍的認同?是什

12、么在驅(qū)動超融合的快速發(fā)展?第一:業(yè)務(wù)創(chuàng)新要求 IT 基礎(chǔ)架構(gòu)更靈活和敏捷:傳統(tǒng)孤立、割裂的三層架構(gòu),穩(wěn)定性有余,靈活性;第二:數(shù)據(jù)中心效率和成本的:如何提高運營效率,降低總體擁有成本是所有 IT的;超融合基礎(chǔ)架構(gòu)第三:硬件資源充足:CPU 性能越來越強,內(nèi)存越來越來越大,HDD 容量越來越高,SSD 的容量不斷提供的資源密度,萬兆以太網(wǎng)絡(luò)逐漸普及,與此同時,硬件采購成本持續(xù)降低,;第四:智能成熟:虛擬化、分布式、云計算技術(shù)愈加成熟,使得對資源管理的粒度可以做的很小,而在節(jié)點規(guī)模上可以做的很大;二、超融合如何加速價值實現(xiàn)?超融合將傳統(tǒng) IT 基礎(chǔ)架構(gòu)的事先計劃、超量的模式轉(zhuǎn)變?yōu)殪`活的按需,將嚴格

13、控制、固定供給的資源分配模式轉(zhuǎn)變?yōu)槊艚莸膹椥怨?yīng),將傳統(tǒng)的轉(zhuǎn)變?yōu)殪`活定制的標(biāo)準(zhǔn)硬件節(jié)點。系統(tǒng)、特殊硬件超融合從三個方面加速價值實現(xiàn):簡化IT 基礎(chǔ)架構(gòu)降低總體擁有成本,縮短價值實現(xiàn)時間實現(xiàn)更高的可靠性三、超融合?超融合基礎(chǔ)架構(gòu)的概念,有不同的理解,但的概念表述如下:天然的將兩個或者多個組件組合到一個獨立的單元中:在一個超融合系統(tǒng)中,至少有兩個或者兩個以上的組件天然的整合在一起(而非簡單的在一起或者安裝在一個機柜中);采用標(biāo)準(zhǔn)的服務(wù)器硬件:不再需要專門的 SAN;與硬件緊密結(jié)合:實現(xiàn)資源整合、管理與調(diào)配,及功能;虛擬化:與 Hypervisor 虛擬化層緊密結(jié)合,實現(xiàn)計算、網(wǎng)絡(luò)虛擬化;總結(jié)超融合

14、系統(tǒng)的四個典型特征:計算與資源融合;定義的基礎(chǔ)架構(gòu);分布式的自治系統(tǒng);線性的橫向擴展;四、超融合與融合架構(gòu)、分布式的區(qū)別是什么?要超融合基礎(chǔ)架構(gòu)(HCI:Hyper Converged Infrastructure),則需要回溯到傳統(tǒng)架構(gòu)(Traditional)和融合基礎(chǔ)架構(gòu)(Converged Infrastructure)。傳統(tǒng)架構(gòu)是計算、網(wǎng)絡(luò)三層分離的模式,在每一層都有典型的廠商、產(chǎn)品和方案,對于用戶來說,在規(guī)劃、部署數(shù)據(jù)中心時,需要自己(或借助第中心的規(guī)劃、并進行獨立的招標(biāo)采購,依靠集成商完成最終的部署。力量)完成數(shù)據(jù)有無可能簡化這些工作?通過簡化基礎(chǔ)架構(gòu)采購、集成、管理和支持,使

15、IT 降低成本,增加速度和敏捷性,并平衡風(fēng)險。這就是融合基礎(chǔ)架構(gòu)(Converged Infrastructure)的緣起。融合基礎(chǔ)架構(gòu)匯集了不同的基礎(chǔ)架構(gòu)元素,將 IT 功能-包括服務(wù)器、數(shù)據(jù)設(shè)備、網(wǎng)絡(luò)功能、虛擬化、管理和協(xié)調(diào),以及應(yīng)用程序-集成到單一的系統(tǒng)中。相比傳統(tǒng)的數(shù)據(jù)中心方法,或稱為“自建”,融合基礎(chǔ)架構(gòu)消除了緩慢、復(fù)雜、昂貴的采購和基礎(chǔ)架構(gòu)裝配過程。此外,融合基礎(chǔ)架構(gòu)簡化了系統(tǒng)安裝后的日常管理。通俗的說,融合基礎(chǔ)架構(gòu)是對傳統(tǒng)架構(gòu)的集成化打包和交付,體現(xiàn)給用戶的是全新的采購和交付、管理模式。但在架構(gòu),仍是傳統(tǒng)的三層架構(gòu)。而超融合基礎(chǔ)架構(gòu),是在融合基礎(chǔ)架構(gòu)上更進一步,也是更徹底的:計算

16、和兩種元素融合,而非服務(wù)器和、網(wǎng)絡(luò)集成打包到機柜中;回歸到服務(wù)器,而非仍需要獨立的SAN系統(tǒng);計算、網(wǎng)絡(luò)、虛擬化,而非僅為計算虛擬化或虛擬化;在部署和擴展時,超融合為標(biāo)準(zhǔn)硬件節(jié)點組成的數(shù)據(jù)孤島;資源池,而非整機柜方式的超融合基礎(chǔ)架構(gòu)(HCI)和定義(SDS)是數(shù)據(jù)中心領(lǐng)域最熱的兩個趨勢,撥開這兩種技術(shù)的宣傳迷霧,判斷他們分別的適用場景,對用戶來說尤為重要。定義的是一種數(shù)據(jù)方式,所有相關(guān)的控制工作都僅在外部中,而非硬件。這個不是設(shè)備中的固件(firmware),而是在一個服務(wù)器或者操作系統(tǒng)或者Hypervisor 的一部分。定義的好處是將功能從原有的控制器中出來,使得功能進一步得到發(fā)揮而不僅僅局

17、限在單一設(shè)備中,這樣可以用于管理數(shù)據(jù)中心中的所有。典型的定義又稱為虛擬化,已經(jīng)出現(xiàn)相當(dāng)長的時間,如 IBM SpectrumVirtualize(SVC)等產(chǎn)品,它們將虛擬所有的硬件資源,將其抽象為配資源。層以更高效的分定義的另一種選擇是與 Hypervisor 集成或作為其堆棧的一部分存在。如VMware 開發(fā)的 Virtual SAN,也就是所謂的定義層,正是作其堆棧的一部分存在。Hyper-V 則擁有集群空間并且直接集成進微軟的 Hyper-V 堆棧。以及其他第定義架構(gòu),Hypervisor 無關(guān)的產(chǎn)品,如 Maxta、 Store等。對于超融合基礎(chǔ)架構(gòu)來說,定義是其一個組成部分,實際上

18、,很多 HCI解決方案,是經(jīng) SDS 方案擴展演化而來。其運行在虛擬化集群的各個節(jié)點上,聚合每個節(jié)點上的,形成一個共享池,供集群中的所有虛擬機。但 HCI 和 SDS 的本質(zhì)區(qū)別在于:SDS 的交付形態(tài)仍然是,對外提供卷服務(wù),僅僅對數(shù)據(jù)中心三層架構(gòu)中的層進行了改造;HCI 的交付形態(tài)是,是數(shù)據(jù)中心基礎(chǔ)架構(gòu)的重新定義和虛擬化環(huán)境的新型部署模式,而不是;從應(yīng)用維度上看,SDS 仍然基于的視角,為上層提供卷服務(wù)(如塊);而 HCI 則是基于虛擬機(VM)的視角,滿足應(yīng)用的需求。這也解釋了,為何通常 SDS 都具有非常完善和高級功能,但只能對外提供塊服務(wù);而 HCI 在發(fā)揮價值。高級功能上并不突出,但

19、著眼于以 VM 為中心的設(shè)計,使其能更好地過去,客戶在部署虛擬化環(huán)境時,通常服務(wù)器、虛擬化,SAN,投入很大,而采用超融合架構(gòu),客戶可以一個節(jié)點、兩個節(jié)點的擴展,效率顯著。在超融合體系下,所有的管理都是面向虛擬化和虛擬機的管理,運維體系變得簡單。超融合的本質(zhì)是虛擬化環(huán)境下的新型部署架構(gòu),有了超融合以后,服務(wù)器變身為服務(wù)于虛擬化的來使用,使外部回歸服務(wù)器。這是超融合所帶來的產(chǎn)業(yè),將會塑造全新的格局。超融合,對于聯(lián)想,是企業(yè)級業(yè)務(wù)的發(fā)展方向。聯(lián)想擁有領(lǐng)先的云基礎(chǔ)架構(gòu)設(shè)施,通過提供極具可靠性、軟硬一體的超融合解決方案,對和應(yīng)用層提供一站式的服務(wù),體現(xiàn)技術(shù)的價值。通過提供基于 OpenStack 自動

20、化管理的超融合云,超融合 HX 系列產(chǎn)品,聯(lián)想具有了快速交付用戶、實現(xiàn)業(yè)務(wù)全部虛擬化的能力。聯(lián)想超融合的目標(biāo),就是實現(xiàn)私有云和公有云的互聯(lián)互通,將私有云、超融合經(jīng)驗轉(zhuǎn)移,實現(xiàn)傳統(tǒng) IT 架構(gòu)徹底云化。聯(lián)想超融合:塑造新的格局為克服 IT發(fā)的超融合系統(tǒng)。,聯(lián)想推出了超融合 HX 系列產(chǎn)品,它是基于聯(lián)想企業(yè)級服務(wù)器開超融合系統(tǒng)將服務(wù)器、和虛擬化整合到一個虛擬架構(gòu),通過單一界面在橫向擴展群集內(nèi)輕松進行管理。群集內(nèi)不同節(jié)點上的從而實現(xiàn)更加高效的利用。和計算都被池化為一個共享的虛擬資源,HX 系列超融合系統(tǒng)具備卓越的可靠性、值得信賴的安全性、廣泛且可預(yù)知的擴展性,同時在管理方面得到簡化,并縮短了價值實現(xiàn)

21、時間(Time to Value),是所有虛擬化應(yīng)用的理想選擇。不僅如此,HX 系列超融合系統(tǒng)還可降低總擁有成本(TCO),讓 IT力去開拓創(chuàng)新,為企業(yè)創(chuàng)造更大價值。能夠集中精聯(lián)想超融合 HX 系列的優(yōu)勢主要集中在三個方面:簡化IT 基礎(chǔ)架構(gòu)一種簡化的基礎(chǔ)架構(gòu),無需投入大量時間和資源進行,是聯(lián)想超融合的愿景。借助內(nèi)置的分析功能,將服務(wù)器、和虛擬化整合到集中管理的設(shè)備,從而簡化 IT 基礎(chǔ)架構(gòu)。這樣,企業(yè)能夠集中精力靈活性,而無需管理當(dāng)前的復(fù)雜基礎(chǔ)架構(gòu)實力、加快創(chuàng)新、效能,增強業(yè)務(wù)HX 系列易于部署。計算、和管理都并存于單一節(jié)點內(nèi)。HX 系列幫助您極大簡化基礎(chǔ)架構(gòu),并將資源集成到一個虛擬架構(gòu)中,

22、從而實現(xiàn)更加高效的資源利用和管理。不僅如此,HX 系列還能隨著業(yè)務(wù)需求的不斷增長而迅速擴展。聯(lián)想在設(shè)計 HX 系列時,采用開放標(biāo)準(zhǔn),可與第貼合客戶需求的產(chǎn)品。合作伙伴輕松集成,共同打造出降低總擁有成本,縮短價值實現(xiàn)時間HX 系列:配合el Xeon 處理器,可用于虛擬桌面基礎(chǔ)架構(gòu)(VDI)、服務(wù)器虛擬化、私有/混合云、企業(yè)應(yīng)用程序和/分支機構(gòu)。聯(lián)想超融合 HX 系列:將路線到前沿的超融合基礎(chǔ)架構(gòu)值得信賴的硬件和,同時還可實現(xiàn)自動化與靈活性、可擴展性和運營效率,因此能夠降低總擁有成本(TCO),并實現(xiàn)更高的投資回報(ROI)。按自己的實際需要實施,并根據(jù)需要輕松擴展,從而節(jié)省成本。開始使用 HX

23、 系列時,只需要三個節(jié)點,但它具備強大的擴展性,可隨著您需求的增長而靈活擴展。另外,還有一些也可促成成本節(jié)?。杭泄芾砉蚕碣Y源、單一虛擬化管理和高度安全的數(shù)據(jù)。實現(xiàn)更高的可靠性值得信賴的聯(lián)想超融合解決方案和企業(yè)級服務(wù)器,帶來更高的可靠性。超融合解決方案部署是否成功,在很大程度上取決于是否擁有可靠的服務(wù)器。服務(wù)器需要同時執(zhí)行計算和可靠性。任務(wù),因此正常運行時間就尤為重要。您需要聯(lián)想服務(wù)器的ITIC 2015-2016 服務(wù)器硬件和OS 可靠性結(jié)果顯示:聯(lián)想服務(wù)器在被的X86 服務(wù)器中連續(xù)三年榮登-機構(gòu)在 2015 年 5 月和 7 月了數(shù)百家企業(yè)(代表 47 個不業(yè))。這種值得信賴的可靠性,再加

24、上聯(lián)想服務(wù)器的易用性與高性能,讓它在 TBR 客戶滿意度中前列,也就為奇了。所有 HX 系列都由完善的聯(lián)想服務(wù)與支持提供堅實后盾。聯(lián)想服務(wù)與 HX 系列相輔相成,為用戶帶來了卓越的服務(wù)體驗。聯(lián)想服務(wù)可實現(xiàn)卓越價值,并滿足您的正常運行時間需求,無論是基礎(chǔ)保修延期還是當(dāng)天承諾維修,甚至是硬盤保留、安裝以及定務(wù)選項,都能根據(jù)您的工作負載需求靈活提供方案。對聯(lián)想服務(wù)的投資將確保用戶獲得聯(lián)想原裝優(yōu)質(zhì)的工程師提供的可靠一致的服務(wù),還可聯(lián)絡(luò)聯(lián)想全球,以及技術(shù)嫻熟、經(jīng)過培訓(xùn)認證和現(xiàn)場支持團隊。聯(lián)想超融合 HX 系列可以根據(jù)工作負載量身定制,根據(jù)用戶的具體需要,選擇三種可用的型號:HX3500:適合于計算密集型

25、環(huán)境HX5500:適合于密集型工作負載HX7500:適合于高性能工作負載型號HX3500HX5500HX7500典型負載計算密集型(VDI 和小型虛擬化)密集型(服務(wù)器虛擬化和大容量需求負載)高性能(數(shù)據(jù)庫及 I/O 密集型負載)2U 機架8 個 2.5 英寸硬盤2U 機架8 個 3.5 英寸硬盤2U 機架24 個 2.5 英寸硬盤處理器el Xeon E5 v3:2 個 E5-2630 v3(16 核)2 個 E5-2660 v3(20 核)2 個 E5-2680 v3(24 核)2 個 E5-2697 v3(28 核)2 個 E5-2699 v3(36 核)el Xeon E5 v3:2

26、個 E5-2620 v3(12 核)2 個 E5-2630 v3(16 核)2 個 E5-2660 v3(20 核)2 個 E5-2680 v3(24 核)2 個 E5-2697 v3(28 核)el Xeon E5 v3:2 個 E5-2643 v3(12 核)2 個 E5-2680 v3(24 核)2 個 E5-2697 v3(28 核)2 個 E5-2699 v3(36 核)內(nèi)存128GB 到 768GB,DDR4128GB 到 768GB,DDR4128GB 到 768GB,DDR4SSD 選項2 個 400GB2 個 800GB2 個 400GB2 個 800GB4 個 400GB4

27、 個 800GBHDD 選件6 個 1TB(6TB)6 個 2TB(12TB)6 個 2TB(12TB)6 個 4TB(24TB)6 個 6TB(36TB)20 個 1TB(20TB)20 個 2TB(40TB)聯(lián)想超融合 HX 系列:技術(shù)規(guī)格HX 系列搭載的版本,根據(jù)用戶的需求和節(jié)點數(shù)量,分為三個:NIC 選項1 個雙端口 10 Gb可選的額外雙端口 10 Gb1 個雙端口 10 Gb可選的額外雙端口 10 Gb2 個雙端口 10 Gb支持Lenovo 3 年或 5 年有限硬件、保修聯(lián)想超融合 HX 系列基于 System X 服務(wù)器,采用先進的行業(yè)技術(shù)和高 RAS 標(biāo)準(zhǔn)設(shè)計,適用于絕大多數(shù)

28、企業(yè)關(guān)鍵負載,在計算性能、內(nèi)存速率、應(yīng)對日益復(fù)雜的企業(yè)基礎(chǔ)架構(gòu)時亦游刃有余。容量上大幅,在在 ITIC 2015-2016 全球服務(wù)器硬件、服務(wù)器操作系統(tǒng)可靠性中,聯(lián)想 System X服務(wù)器在 99.999%(5 個 9 的穩(wěn)定性,年停機時間不到 6 分鐘)這一可靠性級別中占比最高,在總體運行時間和可用性上也第一(如下圖)。聯(lián)想超融合 HX 系列: SYSTEM X 的可靠性System X 高端服務(wù)器擁有久經(jīng)考驗的性能、可靠性和先進特性,可以適應(yīng)計算密集型和混合工作負載的需求,如復(fù)雜分析和數(shù)據(jù)庫相關(guān)等。與市場其他服務(wù)器產(chǎn)品相比,System X 在年停機時間比例上占比最低(如下圖)。在統(tǒng)計

29、非計劃內(nèi)停機時間時,也可以注意到,與市場同類相比,System X 的比例最低,甚至僅為某些廠商的 1/101/6!正是因為如此出色的可靠性,聯(lián)想 System X 服務(wù)器在 TBR 2015 年X86 服務(wù)器用戶滿意度中第一,也就為奇了。“System X 服務(wù)器滿足和超出了客戶在部署x86 服務(wù)器上的期望?;贑SAT X86服務(wù)器研究中持續(xù)的客戶反饋,System X 在硬件品質(zhì)和可靠性、性能、虛擬化、效率和擴展性,及采購成本和TCO,都使得客戶滿意。聯(lián)想System X 服務(wù)器在TBR 2015CSAT X86 服務(wù)器研究中取得No.1,證明 System X 很好的滿足了其全球用戶不

30、斷變化的需求?!睘槭裁捶?wù)器的可靠性如此重要?2015 年的數(shù)據(jù)顯示,98%的對象提到每宕機 1 小時,企業(yè)就要損失 100K$,81%的76%。對象提到每宕機 1 小時,企業(yè)損失將超過 300K$,在 2014 年,這個數(shù)字僅為在分布式系統(tǒng)中,雖然可以依靠多個節(jié)點和數(shù)據(jù)副本技術(shù),實現(xiàn)更高的可靠性和冗余度,但硬件的穩(wěn)定性對系統(tǒng)的可靠性影響較大。尤其是在企業(yè)數(shù)據(jù)中心點數(shù)量通常在幾個到幾十個之間,其上承載的業(yè)務(wù)負載較多,數(shù)據(jù)密度較高,如果某個節(jié)點因為硬件故障下線,會立即啟動數(shù)據(jù)重建過程,從而對其余節(jié)點造成影響和壓力。聯(lián)想超融合 HX 系列,采用可靠性極佳的 System X 服務(wù)器,為超融合基礎(chǔ)架

31、構(gòu)奠定堅實的硬件基礎(chǔ)。聯(lián)想 XClarity 是一種集中式資源管理解決方案,旨在降低復(fù)雜性、加快響應(yīng)速度并增強 Lenovo 服務(wù)器系統(tǒng)和解決方案的可用性。它以虛擬設(shè)備的形式運行,可用于在安全環(huán)境中管理 Flex System 機箱和 System x 機架服務(wù)器。XClarity 提供一個集中式的界面,可以對所有受管端點執(zhí)行相應(yīng)功能。如:用戶管理:XClarity 提供一個集中認證服務(wù)器以創(chuàng)建和管理所有用戶賬戶以及管理和認證用戶憑證。創(chuàng)建用戶賬戶時,可使用預(yù)定義或定制的角色組控制級別,如賬戶具有讀/寫權(quán)限還是只讀權(quán)限。XClarity 包括一個審核日志,其中提供用戶操作(如登錄、創(chuàng)建新用戶或

32、更改用戶)的歷史。硬件管理:通過自動發(fā)現(xiàn)現(xiàn)有或新的 System X 服務(wù)器和 Flex System 基礎(chǔ)架構(gòu),可加快創(chuàng)造價值的過程。其中收集所發(fā)現(xiàn)的端點的了然。,因此受管硬件及其狀態(tài)可一目所支持的每個端點均有多種管理任務(wù),包括查看狀態(tài)和屬性、配置系統(tǒng)信息和網(wǎng)絡(luò)設(shè)置以及啟動管理Web 界面。硬件監(jiān)視:可集中查看從所有受管端點生成的事件和警報。當(dāng)受管端點檢測到問題時,將向 XClarity 傳遞一個事件??蓮膬x表板、狀態(tài)欄查看警報和事件,對于特定系統(tǒng),還可通過警報和事件詳細信息查看警報和事件。配置管理:配置管理使用基于模式的配置快速配置和預(yù)先配置一個或多個機架服務(wù)器計算節(jié)點,所有這些都只需要一

33、組配置設(shè)置(如本地、I/O 適配器、引導(dǎo)設(shè)置、固件、端口、集成管理模塊(IMM)和可擴展固件接口(UEFI)設(shè)置)。還可配址聯(lián)想超融合 HX 系列:強大的 XCLARITY 管理工具協(xié)助部署,配置模式加入對虛擬化 I/O 地址的支持,因此可虛擬化服務(wù)器構(gòu)造連接,或改變服務(wù)器用途而不中斷構(gòu)造。操作系統(tǒng)部署:可使用 XClarity 管理操作系統(tǒng)映像受管服務(wù)器。庫以及將操作系統(tǒng)映像部署到要從 XClarity 部署操作系統(tǒng)映像,至少有一個網(wǎng)絡(luò)接口必須通過 IP 網(wǎng)絡(luò)連接到用于主機操作系統(tǒng)的服務(wù)器網(wǎng)絡(luò),而且必須為其配置 IPv4 地址。固件更新:使用 XClarity,可管理固件更新庫以及為所有受管

34、端點應(yīng)用并激活固件更新??芍贫ê弦?guī)性策略以標(biāo)出不符合所定義的固件規(guī)則的受管端點。安全性:如果需要符合NIST SP 800-131A 或 FIPS 140-2 標(biāo)準(zhǔn),則 XClarity 可幫助您使環(huán)境完全合規(guī)。XClarity 支持自簽名 SSL或商業(yè) CA 頒發(fā))。(由頒發(fā)機構(gòu)頒發(fā))或外部SSL(由私有使用自動執(zhí)行任務(wù):可在erS會話中運行XClarity cmdlet 以自動執(zhí)行某些管理功能。這些 cmdlet 使用 REST API,可自動執(zhí)行如下功能:登錄到 XClarity管理用戶賬戶管理機箱將操作系統(tǒng)映像部署到一個或多個服務(wù)器使用配置模式配置服務(wù)器與其他受管集成:有以下工具可將

35、System X 的管理功能與其他管理相集成。通過這些工具,可進行發(fā)現(xiàn)、配置、監(jiān)視和管理,從而降低日常系統(tǒng)管理所需的成本和復(fù)雜性。Lenovo XClarityegrator forSystem CenterLenovo XClarityegrator for VMware vCenter借助 XClarity,超融合 HX 系列將底層的服務(wù)器硬件和上層的超融合的整體。System X 服務(wù)器硬件提供硬件資源,XClarity 負責(zé)硬件資源的整合為一個有機和管理,而上層則將硬件資源為共享的資源池,為虛擬機提供服務(wù)。聯(lián)想超融合 HX 系列利用系統(tǒng)架構(gòu)、硬件和現(xiàn)虛擬化環(huán)境的新型部署。技術(shù)的發(fā)展建立

36、起一個系統(tǒng),實一、支柱分布式計算:HX 系列借鑒了互聯(lián)網(wǎng)數(shù)據(jù)中心的架構(gòu),是無需網(wǎng)絡(luò)的橫向擴展計算和基礎(chǔ)架構(gòu),提供一種企業(yè)級的解決方案。HX 系列提供通用的解決方案,適用于各種虛擬化的環(huán)境。除了橫向擴展能力之外,它還具備與各種先進的網(wǎng)絡(luò)解決方案相同甚至更好的企業(yè)級數(shù)據(jù)管理功能,包可用性、備份、快照、恢復(fù)等。虛擬化:HX 系列專門針對虛擬化環(huán)境而設(shè)計,因此支持傳統(tǒng)網(wǎng)絡(luò)架構(gòu)所支持的全部管理程序功能,包括實時虛擬機遷移和高可用性等功能。此外,因為架構(gòu)為虛擬機感知型,所以能夠克服配合物理服務(wù)器使用的傳統(tǒng)解決方案的各種局限。例如,在計算側(cè)按單個虛擬機開展管理時,管理單元傳統(tǒng)上為。當(dāng)由許多虛擬機共享時,按。

37、在過度共享的環(huán)境中,識單個虛擬機執(zhí)行備份、恢復(fù)、快照等操作就會越來越別瓶頸問題也非常,因為計算層和層之間存在斷層。而 HX 系列以VM 為中心的超融合架構(gòu)則克服了這些局限。SSD 固態(tài)硬盤:HX 系列可充分利用企業(yè)級的固態(tài)硬盤(SSD),借助 SSD各種各樣的常用數(shù)據(jù),如虛擬機元數(shù)據(jù)到主數(shù)據(jù),一方面通過分布式緩存獲得高性能,另一方面通過實現(xiàn)快速檢索。為了將 SSD 的性能優(yōu)勢最大化,HX 系列:保留 SSD 用于 I/O 密集型功能采用各種節(jié)省空間的技術(shù),使得較小的物理空間能夠大量邏輯數(shù)據(jù)自動將冷數(shù)據(jù)活非常用數(shù)據(jù)遷移至機械硬盤,低優(yōu)先級的虛擬機避開SSD二、架構(gòu)綜述HX 系列是一個由高性能的節(jié)

38、點或服務(wù)器組成的橫向擴展集群,每臺設(shè)備運行一個標(biāo)準(zhǔn)的管理程序;集群還含有處理器、內(nèi)存和本地都運行虛擬機,如同標(biāo)準(zhǔn)的虛擬主機一樣。器,包括 SSD 和機械硬盤。每個節(jié)點聯(lián)想超融合 HX 系列: 創(chuàng)新的超融合系統(tǒng)此外,所有節(jié)點的本地器均通過橫向擴展型融合架構(gòu)(SOCS)進行虛擬化,成為一個的池。實際上,SOCS 的作用就像一個先進的SAN,利用所有節(jié)點的本地 SSD 和機械硬盤虛擬機數(shù)據(jù)。集群中運行的虛擬機將數(shù)據(jù)寫入 SOCS,就像寫入 SAN 一樣。SOCS 為虛擬機感知型,可提供先進的數(shù)據(jù)管理功能。它將數(shù)據(jù)近虛擬機,從而降低了成本并提高了性能。于本地系統(tǒng)上,因此數(shù)據(jù)更接HX 系列能夠從幾個節(jié)點

39、水平擴展到大量的節(jié)點,因此組織機構(gòu)可根據(jù)自身需要擴展其基礎(chǔ)設(shè)施。借助 HX 系列組成的超融合集群,高可用性和實時虛擬機遷移等虛擬化功能便可無縫發(fā)揮作用。管理員通過標(biāo)準(zhǔn)程序即可創(chuàng)建虛擬機,而 SOCS 通過虛擬硬盤或 vDisk 為虛擬機提供。三、主要組件超融合架構(gòu)的關(guān)鍵是 SOCS,這是一種橫向擴展型融合特點:層,具備下列獨特的功能與計算層融合在一起。虛擬機和 SOCS 共存于同一集群;為虛擬機感知型,針對單個虛擬機提供,并能夠識別每臺虛擬機的 I/O;能夠從幾個節(jié)點擴展到大量的節(jié)點;全面整合固態(tài)硬盤;提供高可用性,不存在硬盤或節(jié)點故障;通過本地 I/O提高性能,充分利用固態(tài)硬盤的性能優(yōu)勢;提

40、供獨特的容量優(yōu)化功能。傳統(tǒng)的 SAN 解決方案一般擁有 1、2、4 或 8 個控制器,而 n 節(jié)點的 HX 系列超融合集群擁有 n 個控制器。每個節(jié)點運行一臺特定的虛擬機,稱為控制器虛擬機。該虛擬機用作 SOCS 的虛擬控制器。集群中的所有控制器虛擬機彼此通信,形成單一的分布式系統(tǒng)。與限制于少量固定控制器的傳統(tǒng) SAN/NAS 解決方案不同,這種架構(gòu)可隨著節(jié)點的增加而不斷擴展。熱度優(yōu)化分層緩存(HOTcache)HOTcache 是一種高性能的緩存,受到集群中每個節(jié)點的 SSD 的支持。當(dāng)訪客虛擬機寫入數(shù)據(jù)時,數(shù)據(jù)先寫入 HOTcache,然后在清空至 SOCS。HOTcache 采用一種順序

41、數(shù)據(jù)布局,即使虛擬機工作負載混為隨機工作負載,也能夠?qū)崿F(xiàn)較高的性能。HOTcache 在本地 SSD 上保留一個數(shù)據(jù)副本,并在一個不同的節(jié)點上保留另外一個數(shù)據(jù)副本,這樣,即使節(jié)點發(fā)生故障,數(shù)據(jù)也不會丟失。分布式元數(shù)據(jù)服務(wù)(Medusa)在傳統(tǒng)的系統(tǒng)中,隨著的增加,控制器通常會成為瓶頸。造成這個問題的主要原因之一在于:元數(shù)據(jù)在控制器上。傳統(tǒng)系統(tǒng)可擴展至少量的控制器,因此當(dāng)虛擬機數(shù)量增加時,每個控制器的 I/O 負載也會隨之增加。分布式元數(shù)據(jù)服務(wù),即 Medusa,可將集群元數(shù)據(jù)在整個集群上進行分布,從而實現(xiàn)可擴展性;同時還可將數(shù)據(jù)到多個節(jié)點,以實現(xiàn)容錯功能。該服務(wù)高度可用,并能夠多個模塊故障。相

42、對而言,傳統(tǒng)解決方案依賴于少數(shù)控制器,無法多個控制器故障。分布式數(shù)據(jù)服務(wù)(Curator)分布式數(shù)據(jù)服務(wù)(Curator)是一個基于MapReduce 的框架,用于以大規(guī)模平行方式執(zhí)行數(shù)據(jù)管理操作。這些操作包括:將冷門數(shù)據(jù)遷移至較低的分層(實現(xiàn)熱度優(yōu)化分層);收集已刪除的數(shù)據(jù);通過程序校驗實現(xiàn)數(shù)據(jù)的一致性;節(jié)點或硬盤發(fā)生故障時數(shù)據(jù);添加或移除節(jié)點時對數(shù)據(jù)進行再平衡;虛擬機從一個節(jié)點移動到另一節(jié)點時,對數(shù)據(jù)進行遷移以將本地最大化;FlashStore 和DiskStoreFlashStore 是一個性的、基于閃存的器,由集群中所有節(jié)點的 SSD 聯(lián)合提供。數(shù)據(jù)首先寫入FlashStore,然后在

43、成為冷門數(shù)據(jù)后遷移至 DiskStore。當(dāng)冷門數(shù)據(jù)重新成為熱點數(shù)據(jù)后,將被重新提取至 FlashStore。對于用于低優(yōu)先級虛擬機的 vDisk,管理員可選擇跳過FlashStore。DiskStore 是整個集群的大容量 SATA層,針對冷門數(shù)據(jù)提供較大的容量。將 FlashStore 和 DiskStore 整合在一起,能夠以較低的成本實現(xiàn)較高的性能和較大的容量。一、數(shù)據(jù)本地化HX 系列在設(shè)計時已經(jīng)考慮了 SSD,與傳統(tǒng)的基于 SAN 的SSD 相比,HX 系列基于服務(wù)器的 SSD 避免了網(wǎng)絡(luò)瓶頸,因而性能更高。傳統(tǒng)系統(tǒng)通常受限于保存在控制器緩存中的元數(shù)據(jù)量。而在 HX 系列中,SSD

44、不僅用于虛擬機數(shù)據(jù),而且用于SOCS 元數(shù)據(jù),從而實現(xiàn)快速。將豐富的元數(shù)據(jù)保存在 SSD 上,使得 SOCS 能夠提供先進的數(shù)據(jù)管理功能。在橫向擴展型架構(gòu)中,系統(tǒng)的 SSD 容量將隨著集群點的增加而提高。當(dāng)虛擬機數(shù)據(jù)寫入時,數(shù)據(jù)首先寫入保存在本地的SSD 上,并一份到其他節(jié)點。因此數(shù)據(jù)化本地化特性實現(xiàn)了本地的高性能吞吐,數(shù)據(jù)據(jù)冗余保護。到其他節(jié)點則提供了強大的數(shù)本地 SSD 為本節(jié)點 I/O 最高優(yōu)先級的位置(而不僅僅是緩存層),其次是其他節(jié)點的SSD,最后才是 HDD 硬盤,整個集群的SSD 和 HDD 層均作為一個整體提供虛擬機使用。聯(lián)想超融合 HX 系列:特性如果節(jié)點本地的 SSD 被用

45、滿之后,性能是否會下降?HX 系列的磁盤平衡功能會保證集群范圍內(nèi)所有磁盤的利用率基本一致。當(dāng)本地 SSD利用率非常高時,磁盤平衡功能會自動遷移 SSD 中最冷的數(shù)據(jù)到集群內(nèi)另一節(jié)點的 SSD上。從而本地 SSD 的空間,數(shù)據(jù)會繼續(xù)寫到本地 SSD 上,而不會因為通過網(wǎng)絡(luò)寫到另一節(jié)點的SSD 上而導(dǎo)致性能下降。另一種情況則是當(dāng)?shù)?HDD 上。利用率達到一定的閾值,將會自動觸發(fā),將數(shù)據(jù)從 SSD 上遷移二、容量優(yōu)化HX 系列集成了多種優(yōu)化技術(shù)并協(xié)同工作,使任何工作負載的可用容量被有效利用,這些技術(shù)具備智能和自適應(yīng)的工作特性,消除了需要手動配置和微調(diào)。糾刪碼HX 系列使用副本來保護數(shù)據(jù)和可用性,這種

46、方法提供了最高程度的可用性,當(dāng)數(shù)據(jù)失效時,不需要從其他源的成本比較高。位置或者重新計算來,當(dāng)然,由于需要完全,資為了取得可用性和容量的平衡,HX 系列提供了糾刪碼的技術(shù)。與 RAID 的概念類似,糾刪碼對不同節(jié)點上的數(shù)據(jù)塊條帶進行編碼和計算校驗位。當(dāng)主機或者磁盤故障時,校驗位可以被利用為計算任何缺失的數(shù)據(jù)塊。在某種意義上,糾刪碼類似于數(shù)獨無需事先填滿所有空格,這也就意味著,通過給定的規(guī)則可以恢復(fù)出缺失的數(shù)字,而空間的大量節(jié)省。HX 系列只會對 HDD 硬盤上的冷數(shù)據(jù)進行編碼處理,由于是事后處理,不會影響寫I/O 通道。壓縮HX 系列也提供了壓縮功能,來增加磁盤中數(shù)據(jù)的效率,分為式以滿足客戶的需

47、求和不同數(shù)據(jù)類型。和事后兩種壓縮方壓縮是在數(shù)據(jù)寫入到磁盤之前,對順序的數(shù)據(jù)流或大 I/O 數(shù)據(jù)塊在內(nèi)存里進行壓縮。事后壓縮是正常寫數(shù)據(jù),然后在集群范圍內(nèi)壓縮數(shù)據(jù)。當(dāng)啟用壓縮時,隨機 I/O數(shù)據(jù)沒有壓縮地寫入 OpLog,合并后在內(nèi)存里壓縮,然后才寫入擴展。壓縮時使用Snappy 壓縮庫,提供較高的壓縮率,減少計算負擔(dān),特別快的壓縮和解壓縮速度。對于事后壓縮,所有的寫 I/O 按照正常 I/O 通道沒有壓縮地寫入。當(dāng)數(shù)據(jù)變冷時,數(shù)據(jù)可以被壓縮。事后壓縮使用Mduce 框架,所有節(jié)點將參與壓縮任務(wù)。重刪HX 系列可在性能層(SDD)和容量層(HDD)對數(shù)據(jù)進行重刪操作。順序的數(shù)據(jù)流在寫入時,按照設(shè)定的粒度進行 hash 運算標(biāo)記。標(biāo)記操作僅在數(shù)據(jù)寫入的時候進行,并作為該數(shù)據(jù)塊的元數(shù)據(jù)信息的一部分被持久保存。傳統(tǒng)的重刪操作需要在而 HX 系列是在寫入時執(zhí)行進行數(shù)據(jù)塊掃描,數(shù)據(jù)被重新并開銷大量系統(tǒng)資源,的。標(biāo)記操作,重刪時,重

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論