大數(shù)據(jù)實訓室建設(shè)項目解決方案 大數(shù)據(jù)實訓室建設(shè)方案_第1頁
大數(shù)據(jù)實訓室建設(shè)項目解決方案 大數(shù)據(jù)實訓室建設(shè)方案_第2頁
大數(shù)據(jù)實訓室建設(shè)項目解決方案 大數(shù)據(jù)實訓室建設(shè)方案_第3頁
大數(shù)據(jù)實訓室建設(shè)項目解決方案 大數(shù)據(jù)實訓室建設(shè)方案_第4頁
大數(shù)據(jù)實訓室建設(shè)項目解決方案 大數(shù)據(jù)實訓室建設(shè)方案_第5頁
已閱讀5頁,還剩32頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

大數(shù)據(jù)實訓室建設(shè)項目解決方案目錄1. 大數(shù)據(jù)實訓室建設(shè)背景 41.1 中國大數(shù)據(jù)產(chǎn)業(yè)空間高速增長 41.2 大數(shù)據(jù)人才緊缺 51.3 教學中存在的問題 71.4 大數(shù)據(jù)人才就業(yè)方向 82. H3C大數(shù)據(jù)解決方案簡介 143. H3C大數(shù)據(jù)實訓室建設(shè)目標 184. H3C大數(shù)據(jù)實訓室總體設(shè)計 194.1 培養(yǎng)方向及目標 194.2 實訓室方案設(shè)計 214.3 大數(shù)據(jù)實訓室建設(shè)思路 234.4 實驗平臺建設(shè)原則 244.5 實驗平臺教材大綱 274.6 實訓室課程目標 284.7 學員能力要求 295. 實訓室室的相關(guān)服務(wù) 295.1 **培訓中心介紹 295.2 師資培訓 325.3 新技術(shù)、新應(yīng)用定期交流 345.4 實驗室設(shè)備維護服務(wù) 35大數(shù)據(jù)實訓室建設(shè)背景中國大數(shù)據(jù)產(chǎn)業(yè)空間高速增長2015年9月5日,國務(wù)院印發(fā)《促進大數(shù)據(jù)發(fā)展行動綱要》。《綱要》首次從國家層面認定數(shù)據(jù)是國家基礎(chǔ)性戰(zhàn)略資源,將大數(shù)據(jù)行業(yè)定位到國家戰(zhàn)略層面,大數(shù)據(jù)成為推動經(jīng)濟轉(zhuǎn)型發(fā)展的新動力,成為重塑國家競爭優(yōu)勢的新機遇,成為提升政府治理能力的新途徑。大數(shù)據(jù)發(fā)展,打破信息孤島是關(guān)鍵?!毒V要》指出,要加強頂層設(shè)計和統(tǒng)籌規(guī)劃,形成公共數(shù)據(jù)資源合理適度開放共享的法規(guī)制度和政策體系。2018年底前,建成國家政府數(shù)據(jù)統(tǒng)一開放平臺。2020年底前,逐步實現(xiàn)信用、交通、醫(yī)療等領(lǐng)域的政府數(shù)據(jù)集向社會開放。目前,信息孤島問題依然是阻礙大數(shù)據(jù)前行的關(guān)鍵要素。目前,60%的主管部門認為數(shù)據(jù)分布和共享存在難題,這源于不同部門間數(shù)據(jù)開放標準的不統(tǒng)一,以及在早期建設(shè)中各自獨立進行和外包導致數(shù)據(jù)格式標準等的不同。因而建立數(shù)據(jù)統(tǒng)一平臺的前提就是打破信息孤島,實現(xiàn)數(shù)據(jù)共享,這對于行業(yè)發(fā)展至關(guān)重要。大數(shù)據(jù)行業(yè)空間將逐步釋放。《綱要》提出,到2020年,我國將形成一批具有國際競爭力的大數(shù)據(jù)處理、分析、可視化軟件和硬件支撐平臺等產(chǎn)品;并且培育10家國際領(lǐng)先的大數(shù)據(jù)核心龍頭企業(yè),500家大數(shù)據(jù)應(yīng)用、服務(wù)和產(chǎn)品制造企業(yè)。相關(guān)內(nèi)容以及時間節(jié)點表明大數(shù)據(jù)產(chǎn)業(yè)行業(yè)空間將逐步加速釋放。2014年全球大數(shù)據(jù)產(chǎn)業(yè)對GDP貢獻約270億美元,行業(yè)尚處于幼稚階段。我國2014年大數(shù)據(jù)產(chǎn)業(yè)市場約80億RMB,這一數(shù)據(jù)正以接近年30%的速度增長。大數(shù)據(jù)人才緊缺當下,大數(shù)據(jù)的趨勢已逐步從概念走向落地,而在IT人跟隨大數(shù)據(jù)浪潮的轉(zhuǎn)型中,各大企業(yè)對大數(shù)據(jù)高端人才的需求也越來越緊迫。這一趨勢,也給想要從事大數(shù)據(jù)方面工作的人員提供了難得的職業(yè)機遇。伴隨移動互聯(lián)網(wǎng)、智能終端、云計算、物聯(lián)網(wǎng)技術(shù)的發(fā)展,數(shù)據(jù)呈現(xiàn)爆炸式增長,大數(shù)據(jù)時代正向我們逐步展開一場意義深遠的數(shù)據(jù)革命,對全球整合經(jīng)濟時代的業(yè)務(wù)和服務(wù)產(chǎn)生深遠的影響。大數(shù)據(jù)已經(jīng)不再局限于技術(shù)領(lǐng)域,而是已經(jīng)成為組織機構(gòu)一項優(yōu)先考慮的技術(shù)創(chuàng)新,因為它除了能夠應(yīng)對長期存在的業(yè)務(wù)挑戰(zhàn)之外,大數(shù)據(jù)還為流程、組織、整個行業(yè)、甚至社會本身的轉(zhuǎn)型激發(fā)了許多新的方式。國內(nèi)各行業(yè)也都在積極投身到大數(shù)據(jù)應(yīng)用的浪潮中,迎接“互聯(lián)網(wǎng)+”帶給我們的機遇和挑戰(zhàn)。在大數(shù)據(jù)時代,企業(yè)之間正在為了吸引并留住大數(shù)據(jù)專業(yè)人才而展開競爭,不論是拓展大數(shù)據(jù)業(yè)務(wù)的百度、阿里、奇虎360等互聯(lián)網(wǎng)公司,還是專業(yè)提供數(shù)據(jù)服務(wù)的大數(shù)據(jù)服務(wù)商,以及擁有大量數(shù)據(jù)的傳統(tǒng)行業(yè),對專業(yè)大數(shù)據(jù)人才都有著迫切的需求。據(jù)專業(yè)機構(gòu)的調(diào)查預(yù)測,中國未來3-5年內(nèi)的大數(shù)據(jù)人才需求總量將達到180萬人,目前的人才缺口現(xiàn)狀至少有150萬人。在《國家中長期教育改革和發(fā)展規(guī)劃綱要》中,教育信息化首次被納入國家信息化發(fā)展整體戰(zhàn)略,它的重要意義被提升到前所未有的高度。教育信息化已經(jīng)開始為支撐學校的整體發(fā)展戰(zhàn)略提供保障,并成為提升高校核心競爭力的重要手段。教學中存在的問題“知己知彼,百戰(zhàn)百勝“,培養(yǎng)社會需求的人才,首要是了解目前的教學中存在的問題,從這些問題著手進行分析,得出結(jié)論,并有針對性的進行教學改革,當前,教學中大體有如下5個問題急需解決:院校教學目標界定不清,無法滿足“零距離”上崗的要求,很多學生在院校學習了IT相關(guān)的基礎(chǔ)課程,但進入工作崗位后仍需要到專門的培訓機構(gòu)進行培訓后方可上崗。教材內(nèi)容嚴重與所學專業(yè)脫節(jié),教材中的知識已經(jīng)滿足不了當前行業(yè)的需求。如果更換教材,那么院校需要重新進行課程建設(shè),而且還牽扯到課程體系建設(shè),課程研發(fā)的問題,此類方式受各方面原因的影響無法實施。師資力量薄弱,當前院校進行教學規(guī)劃時,被一個硬指標制約著——師資水平。但是,網(wǎng)絡(luò)技術(shù)行業(yè)發(fā)展十分迅速,院校教師又無法及時的了解到當前最前沿的網(wǎng)絡(luò)技術(shù)。實踐環(huán)節(jié)重視不夠,學生動手能力明顯不足,網(wǎng)絡(luò)技術(shù)專業(yè)是典型的理論與實踐結(jié)合的專業(yè),學生光學不練,無法滿足用人單位的需求。校企合作力度不足,院校培養(yǎng)的畢業(yè)生最終要實現(xiàn)就業(yè),接口單位就是用人公司。那么用人公司是最有權(quán)威提供其就業(yè)條件的機構(gòu),校企合作是提升人才培養(yǎng)效果的最佳實踐。新型實訓室的建立,將會涉及相關(guān)課程教學方法與模式的改革,以及虛擬化、云計算和大數(shù)據(jù)等前沿技術(shù)的研究與開發(fā),有力推進教學研究和教學改革工作的開展,促進校企合作、教學研究論文的發(fā)表與專利的申請。先進的實驗環(huán)境也為學生提供了良好的科技創(chuàng)新和學科競賽的環(huán)境與氛圍。大數(shù)據(jù)人才就業(yè)方向在“互聯(lián)網(wǎng)+”戰(zhàn)略之下,互聯(lián)網(wǎng)行業(yè)高速發(fā)展,百度、新浪、阿里、騰訊等大型互聯(lián)網(wǎng)公司以及大眾創(chuàng)業(yè),萬眾創(chuàng)新的創(chuàng)業(yè)型公司都在部署各自的大數(shù)據(jù)戰(zhàn)略,大數(shù)據(jù)相關(guān)人才十分亟需,同時互聯(lián)網(wǎng)、政府、金融、電力等各企事業(yè)單位信息化部署都在向大數(shù)據(jù)全面轉(zhuǎn)型,大數(shù)據(jù)行業(yè)畢業(yè)生作為服務(wù)區(qū)域經(jīng)濟IT行業(yè)和企事業(yè)單位發(fā)展的重要力量大數(shù)據(jù)需要以下六類人才:大數(shù)據(jù)系統(tǒng)研發(fā)工程師。這一專業(yè)人才負責大數(shù)據(jù)系統(tǒng)研發(fā),包括大規(guī)模非結(jié)構(gòu)化數(shù)據(jù)業(yè)務(wù)模型構(gòu)建、大數(shù)據(jù)存儲、數(shù)據(jù)庫構(gòu)設(shè)、優(yōu)化數(shù)據(jù)庫構(gòu)架、解決數(shù)據(jù)庫中心設(shè)計等,同時,還要負責數(shù)據(jù)集群的日常運作和系統(tǒng)的監(jiān)測等,這一類人才是任何構(gòu)設(shè)大數(shù)據(jù)系統(tǒng)的機構(gòu)都必須的。大數(shù)據(jù)應(yīng)用開發(fā)工程師。此類人才負責搭建大數(shù)據(jù)應(yīng)用平臺以及開發(fā)分析應(yīng)用程序,他們必須熟悉工具或算法、編程、優(yōu)化以及部署不同的MapReduce,他們研發(fā)各種基于大數(shù)據(jù)技術(shù)的應(yīng)用程序及行業(yè)解決方案。其中,ETL開發(fā)者是很搶手的人才,他們所做的是從不同的源頭抽取數(shù)據(jù),轉(zhuǎn)換并導入數(shù)據(jù)倉庫以滿足企業(yè)的需要,將分散的、異構(gòu)數(shù)據(jù)源中的數(shù)據(jù)如關(guān)系數(shù)據(jù)、平面數(shù)據(jù)文件等抽取到臨時中間層后進行清洗、轉(zhuǎn)換、集成,最后加載到數(shù)據(jù)倉庫,成為聯(lián)機分析處理、數(shù)據(jù)挖掘的基礎(chǔ),為提取各類型的需要數(shù)據(jù)創(chuàng)造條件。大數(shù)據(jù)分析師。此類人才主要從事數(shù)據(jù)挖掘工作,運用算法來解決和分析問題,讓數(shù)據(jù)顯露出真相,同時,他們還推動數(shù)據(jù)解決方案的不斷更新。隨著數(shù)據(jù)集規(guī)模不斷增大,企業(yè)對Hadoop及相關(guān)的廉價數(shù)據(jù)處理技術(shù)如Hive、HBase、MapReduce、Pig等的需求將持續(xù)增長,具備Hadoop框架經(jīng)驗的技術(shù)人員是最搶手的大數(shù)據(jù)人才,他們所從事的是熱門的分析師工作。數(shù)據(jù)可視化工程師。此類人才負責在收集到的高質(zhì)量數(shù)據(jù)中,利用圖形化的工具及手段的應(yīng)用,清楚地揭示數(shù)據(jù)中的復(fù)雜信息,幫助用戶更好地進行大數(shù)據(jù)應(yīng)用開發(fā),如果能使用新型數(shù)據(jù)可視化工具如Spotifre,Qlikview和Tableau,那么,就成為很受歡迎的人才。數(shù)據(jù)安全研發(fā)人才。此類人才主要負責企業(yè)內(nèi)部大型服務(wù)器、存儲、數(shù)據(jù)安全管理工作,并對網(wǎng)絡(luò)、信息安全項目進行規(guī)劃、設(shè)計和實施,而對于數(shù)據(jù)安全方面的具體技術(shù)的人才就更需要了,如果數(shù)據(jù)安全技術(shù),同時又具有較強的管理經(jīng)驗,能有效地保證大數(shù)據(jù)構(gòu)設(shè)和應(yīng)用單位的數(shù)據(jù)安全,那就是搶手的人才。數(shù)據(jù)科學研究人才。數(shù)據(jù)科學研究是一個全新的工作,夠?qū)挝?、企業(yè)的數(shù)據(jù)和技術(shù)轉(zhuǎn)化為有用的商業(yè)價值,隨著大數(shù)據(jù)時代的到來,越來越多的工作、事務(wù)直接涉及或針對數(shù)據(jù),這就需要有數(shù)據(jù)科學方面的研究專家來進行研究,通過研究,他們能將數(shù)據(jù)分析結(jié)果解釋給IT部門和業(yè)務(wù)部門管理者聽,數(shù)據(jù)科學專家是聯(lián)通海量數(shù)據(jù)和管理者之間的橋梁,需要有數(shù)據(jù)專業(yè)、分析師能力和管理者的知識,這也是搶手的人才。專業(yè)服務(wù)的職業(yè)崗位及典型工作任務(wù)如下表。崗位典型工作任務(wù)運維大數(shù)據(jù)初級工程師了解storm/cassandra/hbase/spark/hadoop等大數(shù)據(jù)相關(guān)技術(shù),至少精通一種處理和一種存儲技術(shù)。熟悉ApacheHadoop的部署、性能調(diào)優(yōu);Linux系統(tǒng)管理工作經(jīng)驗,精通一種或多種LinuxShell語言;大數(shù)據(jù)運維工程師負責大數(shù)據(jù)(Hadoop)的運維和優(yōu)化工作;2、熟悉RDBMS(比如MySQL)的開發(fā),熟悉SQL語言;3、精通java/c++/python之一開發(fā)大數(shù)據(jù)架構(gòu)師對Hadoop框架有較深的源代碼研究大數(shù)據(jù)分析與數(shù)據(jù)倉庫設(shè)計及開發(fā)經(jīng)驗有良好的數(shù)據(jù)分析及數(shù)據(jù)挖掘能力,可根據(jù)需求定制數(shù)據(jù)處理策略分布式存儲系統(tǒng)軟件開發(fā)工程師精通Java,對數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計有較為深刻的理解,具有良好的分析問題和解決問題的能力對Hadoop框架有較深的源代碼研究,對于HDFS相關(guān)組件有深入了解在開源社群活躍并有積極貢獻者優(yōu)先。分析大數(shù)據(jù)產(chǎn)品經(jīng)理具有數(shù)據(jù)挖掘分析功底通過海量數(shù)據(jù),挖掘用戶行為,推動技術(shù)團隊,提供數(shù)據(jù)解決方案;了解底層數(shù)據(jù)的架構(gòu)技術(shù)以及應(yīng)用層數(shù)據(jù)分析和算法的基本概念,能夠運用數(shù)據(jù)作為產(chǎn)品解決業(yè)務(wù)方運營及決策問題;大數(shù)據(jù)分析師掌握SAS、SPSS等相關(guān)統(tǒng)計分析軟件精通統(tǒng)計及數(shù)據(jù)挖掘理論掌握基本的市場分析方法和模型,有較強的數(shù)據(jù)分析能力H3C大數(shù)據(jù)解決方案簡介H3CDataEngine大數(shù)據(jù)平臺采用Hadoop和MPP分布式數(shù)據(jù)庫混搭的計算框架為用戶提供一套完整的大數(shù)據(jù)平臺解決方案,包括數(shù)據(jù)采集轉(zhuǎn)換、計算存儲、分析挖掘、共享交換、BI展示以及運維管理等全系列功能,幫助用戶構(gòu)建海量數(shù)據(jù)處理系統(tǒng),發(fā)現(xiàn)數(shù)據(jù)的內(nèi)在價值,獲取新的市場機會。先進的混合計算架構(gòu)采用Hadoop和MPP融合技術(shù)架構(gòu),對半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)支持并行計算和低成本存儲,提供低時延、高并發(fā)的查詢和分析功能;對結(jié)構(gòu)化數(shù)據(jù)采用MPP分布式列存儲,支持分布式計算、智能索引等功能,實現(xiàn)高性能結(jié)構(gòu)化數(shù)據(jù)分析處理。集成MapReduce、Spark、Storm、Tez等多種計算框架,利用YARN資源管理做統(tǒng)一管理,可在同一份數(shù)據(jù)集上運行多種計算。離線計算、內(nèi)存計算和流式計算并存,能滿足高吞吐、大數(shù)據(jù)量和低時延實時處理等多方面的數(shù)據(jù)計算要求。高性價比的分布式集群基于x86服務(wù)器本地的計算與存儲資源,計算集群可以動態(tài)調(diào)整,從數(shù)臺到數(shù)千臺之間彈性擴展,按需構(gòu)建應(yīng)用,減少總體成本;同時,在設(shè)計時充分考慮了硬件設(shè)備的不可靠因素,在軟件層面提供計算和存儲的高可靠保證,具備較強的容錯性。云化ETL將不同業(yè)務(wù)系統(tǒng)中分散、零亂、標準不統(tǒng)一的各種源數(shù)據(jù)中的數(shù)據(jù)進行匯聚。支持從DBMS、互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、企業(yè)生產(chǎn)系統(tǒng)等各種數(shù)據(jù)源中提取數(shù)據(jù)。各類數(shù)據(jù)經(jīng)過抽取、清洗和轉(zhuǎn)化后,實現(xiàn)多對多地加載到包含但不限于大數(shù)據(jù)集群和各類關(guān)系型數(shù)據(jù)庫中。該過程由一個統(tǒng)一的操作接口封裝,經(jīng)過無代碼的可視化配置后,可實現(xiàn)自動化地、分布式地執(zhí)行整個ETL作業(yè)流程。數(shù)據(jù)分層和分級存儲把數(shù)據(jù)按照不同階段分為ODS(OperationalDataStore)數(shù)據(jù)、輕度匯總數(shù)據(jù)、信息子層數(shù)據(jù)和應(yīng)用數(shù)據(jù),分別存儲在Hadoop平臺、MPP分布式數(shù)據(jù)庫和數(shù)據(jù)倉庫,滿足不同階段的計算需求;按照在線數(shù)據(jù)、歷史數(shù)據(jù)等來管理數(shù)據(jù)生命周期,滿足在線數(shù)據(jù)的高性能存儲的需求;將核心模型數(shù)據(jù)通過改造融入到數(shù)據(jù)倉庫的核心模型中,減少數(shù)據(jù)冗余,提升數(shù)據(jù)質(zhì)量;將數(shù)據(jù)倉庫中的歷史數(shù)據(jù)遷移到低成本分布式數(shù)據(jù)庫,減輕數(shù)據(jù)倉庫的計算與存儲壓力并支撐深度數(shù)據(jù)分析。數(shù)據(jù)分析挖掘支持R語言,集成機器學習算法庫Mahout和SparkMLlib,包含聚類分析、分類算法、頻度關(guān)聯(lián)分析和推薦系統(tǒng)在內(nèi)的常用機器學習算法。滿足批處理統(tǒng)計分析、在線數(shù)據(jù)檢索、R語言數(shù)據(jù)挖掘、實時流處理、全文搜索等全方位需求??蓭椭髽I(yè)建立高速可擴展的數(shù)據(jù)倉庫和數(shù)據(jù)集市,結(jié)合多種報表工具提供交互式數(shù)據(jù)分析、即時報表和BI可視化展示能力。數(shù)據(jù)服務(wù)接口提供交互式SQL和可編程API,提取數(shù)據(jù)存儲計算平臺的數(shù)據(jù)處理結(jié)果,屏蔽底層細節(jié),為上層應(yīng)用提供數(shù)據(jù)服務(wù)。主要包括SQL接口、MapReduce/Spark/Storm計算接口等多種可編程API、全文實時搜索接口、業(yè)務(wù)定向接口、關(guān)聯(lián)查詢接口,滿足數(shù)據(jù)查詢、可視化BI展示、數(shù)據(jù)交換、數(shù)據(jù)分析、目錄服務(wù)、綜合查詢等業(yè)務(wù)應(yīng)用的需要??梢暬\維管理提供Web圖形化界面實現(xiàn)運集群的管理和監(jiān)控,集群的節(jié)點、主機和服務(wù)的運行狀態(tài)都能在界面上顯示,操作友好,功能豐富。提供集群快速安裝部署、機架展示、用戶權(quán)限管理、主機與服務(wù)管理、監(jiān)控及告警通知等多方面支持,在可管理性方面優(yōu)勢顯著。H3C大數(shù)據(jù)實訓室建設(shè)目標提供先進的教學內(nèi)容及先進的教學方法,提高教學質(zhì)量;提升專業(yè)教師的技術(shù)水平;打造大數(shù)據(jù)相關(guān)精品專業(yè);共同完善課程系統(tǒng),聯(lián)合開發(fā)更為實用的大數(shù)據(jù)范疇技術(shù)教材;完善院校實踐條件,提高學生動手實踐能力;H3C大數(shù)據(jù)實訓室總體設(shè)計培養(yǎng)方向及目標大數(shù)據(jù)人才培養(yǎng)方案是H3C在網(wǎng)絡(luò)學院十周年之際,推出的下一代人才培養(yǎng)計劃。H3C將響應(yīng)國家號召,全力配合各類院校開展大數(shù)據(jù)人才培養(yǎng)工作,H3C大數(shù)據(jù)實訓室方案已就緒,將支持校方植入完整的H3C課程體系,輔助高校全力培養(yǎng)“零距離”上崗,綜合素質(zhì)達到企業(yè)要求的優(yōu)秀畢業(yè)生。H3C大數(shù)據(jù)實訓室為學生制定了循序漸進的能力提升計劃,理論與實驗緊密結(jié)合,培養(yǎng)學生思考、動手能力,助力各個學校進行全流程、全方位、可持續(xù)的創(chuàng)新型大數(shù)據(jù)人才培養(yǎng)。人才培養(yǎng)計劃如下:實訓室方案設(shè)計實訓室依據(jù)業(yè)務(wù)屬性,共分為3個功能區(qū):實驗區(qū):學生學習大數(shù)據(jù)實訓室課程內(nèi)容和實際操作實驗課程的區(qū)域,根據(jù)每組學生數(shù)量配置終端(PC);實驗設(shè)備區(qū):放置大數(shù)據(jù)實訓室實驗設(shè)備的區(qū)域,包括服務(wù)器、存儲、網(wǎng)絡(luò)設(shè)備和大數(shù)據(jù)、虛擬化軟件,所有的實驗內(nèi)容均運行在該實驗設(shè)備區(qū)內(nèi);實驗管理區(qū):老師管理區(qū)和演示區(qū),負責演示實驗課程內(nèi)容并對所有實驗組的實驗設(shè)備做監(jiān)控和管理;管理區(qū)亦可作為校內(nèi)大數(shù)據(jù)分析的實驗過渡平臺,將學校數(shù)據(jù)導入該區(qū)域大數(shù)據(jù)集群,根據(jù)業(yè)務(wù)需求進行海量數(shù)據(jù)存儲處理、分析挖掘,為校園大數(shù)據(jù)建設(shè)貢獻力量學生可分為不同實驗小組進行實戰(zhàn)練習,每個小組內(nèi)不超過5人,集群可將計算、存儲資源隔離,使實驗小組件底層隔離,互不影響;教師區(qū)實驗設(shè)備性能較高,除帶領(lǐng)學生實驗外,還可承接校內(nèi)大數(shù)據(jù)集中、應(yīng)用開發(fā)等項目。實驗平臺所需軟硬件如下:計算節(jié)點:可選用機架或刀片服務(wù)器存儲節(jié)點:使用計算幾點本地磁盤承載網(wǎng)絡(luò)設(shè)備:連通整個實驗環(huán)境與校園網(wǎng)絡(luò),可選二層、三層交換機PC機:教師、學生終端虛擬化軟件:為學生提供靈活的實驗環(huán)境大數(shù)據(jù)平臺軟件:為學生提供大數(shù)據(jù)實驗集群大數(shù)據(jù)實訓室建設(shè)思路為實現(xiàn)建設(shè)目標要求,大數(shù)據(jù)實訓室設(shè)計構(gòu)建中堅持以下設(shè)計原則:第一,高可靠性。大數(shù)據(jù)實驗平臺的穩(wěn)定可靠是實驗正常運行的關(guān)鍵保證,在大數(shù)據(jù)實驗設(shè)備設(shè)計中選用高可靠性產(chǎn)品,合理設(shè)計大數(shù)據(jù)實驗平臺架構(gòu),制訂可靠的備份策略,保證大數(shù)據(jù)實驗平臺具有故障自愈的能力,最大限度地支持系統(tǒng)的正常運行。第二,標準開放性。選用業(yè)界主流大數(shù)據(jù)處理系統(tǒng),保證與生態(tài)內(nèi)各組件之間的平滑集成與連接互通,以及將來的擴展;對外提供標準統(tǒng)一API接口。第三,靈活性及可擴展性。根據(jù)未來業(yè)務(wù)的增長和變化,實驗平臺可以平滑地擴充和升級,最大程度地減少對現(xiàn)有實驗平臺的調(diào)整?,F(xiàn)有設(shè)備可以在擴容過程中得到充分利用,從而保護用戶現(xiàn)有投資。第四,可管理性。對實驗平臺實行集中監(jiān)測、分權(quán)管理,并統(tǒng)一分配資源管理。選用先進的大數(shù)據(jù)平臺,具有對實驗平臺內(nèi)的虛機資源創(chuàng)建、監(jiān)控、遷移等管理能力。第五,統(tǒng)一標準、統(tǒng)一平臺。大數(shù)據(jù)平臺的建設(shè)要從長遠角度出發(fā),考慮平臺的擴展能力,采用開放的技術(shù)和國際標準。實驗平臺建設(shè)原則從在方案設(shè)計思路上,針對大數(shù)據(jù)實驗平臺,我們從以下幾個方面進行深思熟慮的設(shè)計:1.技術(shù)標準開放當前階段大數(shù)據(jù)整個產(chǎn)業(yè)化還不夠成熟,相關(guān)標準還在不斷完善中。目前H3C選用業(yè)界使用最為廣泛的Hadoop作為平臺當中一部分,能夠與生態(tài)內(nèi)各類常用組件無縫對接。此外,為保證方案的前瞻性,設(shè)備的選型應(yīng)充分考慮計算、存儲、網(wǎng)絡(luò)節(jié)點的能力,保證良好的先進性,以適應(yīng)未來的技術(shù)發(fā)展。2.開放接口為保證服務(wù)器、存儲、網(wǎng)絡(luò)等資源能夠被大數(shù)據(jù)平臺良好的調(diào)度與管理,要求系統(tǒng)提供開放的API接口。同時大數(shù)據(jù)平臺也提供開放的API接口,未來可以在這些接口的基礎(chǔ)上進行二次定制開放。3.豐富、清晰的培訓教材對于實驗室承擔的培訓工作,比如基礎(chǔ)課程的培訓、行業(yè)應(yīng)用培訓,應(yīng)該具有豐富、清晰的教材,包括教師指導書、學員課本和實驗手冊。這樣可以充分提高教學培訓的效率。但是不是所有標準化教材都能滿足所有實驗室,很多學校在承擔特殊化的培訓工作時,往往需要定制開發(fā)教材,這就需要實驗設(shè)備提供商和學校聯(lián)合開發(fā)相應(yīng)的課程。4.師資培訓新技術(shù)交流雖然多數(shù)科研人員和授課教師都有很深的學術(shù)功底,但是不見得對實驗設(shè)備了解非常深入,這就對科研進度和培訓工作帶來影響。供應(yīng)商在提供實驗設(shè)備的同時應(yīng)該對科研人員和授課教師進行詳細的設(shè)備使用培訓,使他們能夠更好的開展后續(xù)工作。為了使研究、培訓內(nèi)容跟上最新技術(shù)的發(fā)展,應(yīng)當有業(yè)界技術(shù)領(lǐng)先的企業(yè)定期和科研人員、授課教師充分交流前沿技術(shù)的發(fā)展,已達到開拓科研視野、增加企業(yè)產(chǎn)品方案競爭力的雙贏目的。5.權(quán)威認證培訓來到實驗室接受培訓和參加技術(shù)進修的學員,實際上對實驗教學內(nèi)容和實驗設(shè)施比較挑剔的。這是非常現(xiàn)實的,因為每個人都不希望來到實驗室還是學習很多過時的技術(shù),也不希望學習一些非主流設(shè)備。除了自身技術(shù)技能的提升,另外一個學員關(guān)心的問題是能夠拿到一個非常權(quán)威的、被廣泛認可的能力證明,這對學員個人今后的發(fā)展會有較大促進作用。6.技術(shù)服務(wù)保障雖然實驗室對設(shè)備的可靠性不及電信、金融系統(tǒng)對設(shè)備可靠性要求高,但是如果科研課題進度非常緊,或者學員是付費使用實驗室,那么實驗平臺對可靠性以及廠家對故障的服務(wù)響應(yīng)就非常重要了。另一個維度來講,實驗平臺涉及多種高、精、尖技術(shù),廠家服務(wù)人員對技術(shù)掌握的深度和范圍也顯得非常必要。實驗平臺教材大綱課程體系架構(gòu)如下:課程大綱如下:第一篇大數(shù)據(jù)概述大數(shù)據(jù)技術(shù)的起源、發(fā)展歷程大數(shù)據(jù)技術(shù)流派、體系結(jié)構(gòu)大數(shù)據(jù)典型應(yīng)用、商用案例大數(shù)據(jù)發(fā)展業(yè)前景第二篇大數(shù)據(jù)關(guān)鍵技術(shù)Hadoop概術(shù)分布式計算概述數(shù)據(jù)分析挖掘算法數(shù)據(jù)倉庫與商業(yè)智能第三篇大數(shù)據(jù)應(yīng)用設(shè)計Mapreduce/Spark等編程實踐HDFS/HBase等編程實踐綜合實訓實訓室課程目標掌握大數(shù)據(jù)的基本概念與解決方案。掌握大數(shù)據(jù)的基礎(chǔ)平臺部署掌握大數(shù)據(jù)常見計算框架原理及操作掌握數(shù)據(jù)采集工具使用掌握常用數(shù)據(jù)分析挖掘算法及使用掌握數(shù)據(jù)倉庫與商業(yè)智能理論及使用掌握大數(shù)據(jù)產(chǎn)品維護學員能力要求熟悉windows、Linux業(yè)務(wù)服務(wù)器的配置,維護,監(jiān)控,調(diào)優(yōu),故障排除等具備數(shù)據(jù)庫基礎(chǔ)知識,熟悉數(shù)據(jù)庫相關(guān)操作具備數(shù)學及統(tǒng)計學相關(guān)基礎(chǔ)知識具備計算機編程能力具備數(shù)據(jù)結(jié)構(gòu)、算法相關(guān)知識實訓室室的相關(guān)服務(wù)**培訓中心介紹H3C培訓中心是H3C公司為客戶、渠道合作伙伴、內(nèi)部員工和社會IT從業(yè)人員提供全系列的網(wǎng)絡(luò)產(chǎn)品培訓和網(wǎng)絡(luò)技術(shù)認證的專業(yè)培訓機構(gòu),致力于向全球客戶提供高品質(zhì)、全方位的認證培訓服務(wù)。H3C培訓中心完全繼承了華為網(wǎng)絡(luò)技術(shù)認證培訓體系和資源平臺,同時融合了3Com公司的課程體系,并將充分考慮客戶不同層次的需求,對華為認證培訓體系進行完善和補充,增加行業(yè)解決方案認證培訓和系列網(wǎng)絡(luò)產(chǎn)品的專項認證培訓,全力支持企業(yè)和院校培養(yǎng)優(yōu)秀的網(wǎng)絡(luò)技術(shù)人才,提升員工的工作技能,更好地提升客戶投資的效益,給客戶帶來最大的收益。H3C培訓中心總部設(shè)在中國北京,在北京、**設(shè)立了大型的培訓基地。目前H3C在中國各大中心城市擁有40余家授權(quán)培訓中心(HATC),120多家H3C網(wǎng)絡(luò)學院(HNC),并在巴西、德國、埃及等地建立了多個授權(quán)培訓中心和網(wǎng)絡(luò)學院。覆蓋全球的豐富的培訓資源可以為客戶提供大規(guī)模、高質(zhì)量、個性化的專業(yè)培訓服務(wù),并能夠快速響應(yīng)客戶需求,量身定制客戶化培訓解決方案。已有三十多個國家和地區(qū)的4萬5千余人接受過認證培訓,2萬多人獲得認證證書.另外H3C培訓中心還擁有一支專門負責課程開發(fā)的專家隊伍。他們深諳職業(yè)教育的特點,精于系統(tǒng)化的課程設(shè)計和開發(fā),確保所有的培訓項目優(yōu)質(zhì)高效,滿足客戶需求。H3C培訓中心將產(chǎn)品開發(fā)理念貫穿到課程開發(fā)中,歷經(jīng)市場調(diào)研、設(shè)計、開發(fā)以及教學效果評估等四個階段。課程設(shè)計特別注重學員實際工作能力的提高,課程中高度強調(diào)是實際的上機維護操作、網(wǎng)上案例講解、故障模擬演練,緊密聯(lián)系當前的網(wǎng)上情況,能極大地提高學員的實際操作維護能力。根據(jù)用戶需要和產(chǎn)品特點,培訓課程采用模塊化的設(shè)計思想,每個課程都有可衡量的培訓目標、具體的培訓內(nèi)容及合理的時長。并且在各種課程的設(shè)置中強調(diào)案例教學,強調(diào)技術(shù)應(yīng)用能力培養(yǎng),在認證考試中也有相當?shù)膶嶋H配置考察。培訓課程的各模塊也以恰當?shù)臅r序進行組合,以保證最佳的培訓效果。優(yōu)良的培訓和實驗環(huán)境H3C培訓中心和全球的培訓合作伙伴均擁有良好的培訓環(huán)境,尤其是實驗環(huán)境,教學用的實驗設(shè)備全部采用華為網(wǎng)絡(luò)產(chǎn)品,培訓設(shè)備選型以主流設(shè)備為主,并及時更新軟件以提供最新特性。學員上機操作占1/3以上課時,實驗過程要求1:1的人機比例,賦以各種解決方案的組網(wǎng)案例,突出實際動手能力和應(yīng)用技能的培養(yǎng)。對于每一個培訓合作伙伴,都有專門的培訓教室,至少擁有兩名通過認證的講師,教材全部采用H3C公司標準認證培訓教材。師資培訓專業(yè)的師資隊伍是培訓和教學質(zhì)量的最佳保證。H3C公司極其重視師資隊伍的建設(shè),當院校建立了H3C大數(shù)據(jù)計算實訓室后,H3C公司將會為學校培訓老師,以充分保證學校大數(shù)據(jù)實訓室的效果和質(zhì)量。師資培訓的內(nèi)容分為三類:一是實驗課程內(nèi)容的培訓,H3C公司對學校的老師進行大數(shù)據(jù)實訓室相關(guān)課程的培訓,以使老師熟悉課程內(nèi)容,徹底掌握H3C產(chǎn)品的配置、維護等必要知識,成為一個專家,通過這些培訓,一方面提高了學校實驗室老師的技術(shù)能力和動手能力,另一方面又能最大限度地發(fā)揮大數(shù)據(jù)實訓室的功能,更好地為學校教學和科研服務(wù);二是關(guān)于實驗室管理方面的培訓,H3C公司根據(jù)多年來在院校建立實訓室的經(jīng)驗,已總結(jié)出一套行之有效的實驗室管理方法和流程,比如實驗室的設(shè)備管理流程,實驗室上機管理方法和實驗室值班員、管理員守則等一系列規(guī)章制度等,這些經(jīng)驗可以和學校進行共享,使學校根據(jù)這些內(nèi)容迅速地制訂出適合本校實際情況的實驗室管理辦法來,而不用從頭去摸索和掌握,從而促進了大數(shù)據(jù)實訓室的成功運行;三是關(guān)于行業(yè)解決方案的培訓,大數(shù)據(jù)實訓室可以對社會其它行業(yè)進行開放,培訓其它行業(yè)的技術(shù)人員,比如大數(shù)據(jù)實訓室可以招收政府行業(yè)的學員,開展關(guān)于政府內(nèi)部數(shù)據(jù)大集中、海量數(shù)據(jù)分析挖掘的培訓,另外,對學校內(nèi)部學生的培訓,也有需要模擬其它行業(yè)數(shù)據(jù)處理實際環(huán)境,這就需要學校的老師對各行各業(yè)的網(wǎng)絡(luò)解決方案非常熟悉,才能順利地開展這些培訓。H3C公司積累了各個行業(yè)的客戶群體,對各行各業(yè)的網(wǎng)絡(luò)有著深刻的認識和獨到的見解,可以根據(jù)學校的要求進行行業(yè)解決方案的培訓,以使學校老師掌握迅速掌握各行業(yè)的網(wǎng)絡(luò)特點,更好地為教學、社會培訓服務(wù)。新技術(shù)、新應(yīng)用定期交流IT行業(yè)是不斷變化和發(fā)展的,不斷地有新技術(shù)、新應(yīng)用、新產(chǎn)品出現(xiàn),H3C公司作為業(yè)界領(lǐng)先的IT廠商,可通過定期、不定期資料發(fā)放,與學校進行交流,在學校召開技術(shù)研討會,以及邀請學校參加

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論