高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案

1、高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案目錄 TOC o 1-5 h z 專(zhuān)業(yè)建設(shè)背景 3 HYPERLINK l bookmark2 o Current Document 大數(shù)據(jù)產(chǎn)業(yè)發(fā)展趨勢(shì) 3 HYPERLINK l bookmark4 o Current Document 大數(shù)據(jù)人才需求分析 4 HYPERLINK l bookmark6 o Current Document 大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)設(shè)置 5 HYPERLINK l bookmark8 o Current Document 專(zhuān)業(yè)人才培養(yǎng)目標(biāo) 6人才培養(yǎng)方向及職業(yè)能力分析 7

2、 HYPERLINK l bookmark10 o Current Document 專(zhuān)業(yè)課程體系設(shè)計(jì) 10 HYPERLINK l bookmark12 o Current Document 專(zhuān)業(yè)課程設(shè)置思路 10 HYPERLINK l bookmark14 o Current Document 專(zhuān)業(yè)課程知識(shí)體系 10 HYPERLINK l bookmark16 o Current Document 崗位發(fā)展學(xué)習(xí)路徑 12 HYPERLINK l bookmark18 o Current Document 教學(xué)計(jì)劃設(shè)計(jì) 14 HYPERLINK l bookmark20 o Curren

3、t Document 教學(xué)資源建設(shè) 17 HYPERLINK l bookmark22 o Current Document 師資隊(duì)伍建設(shè) 20 HYPERLINK l bookmark24 o Current Document 專(zhuān)兼結(jié)合教學(xué)團(tuán)隊(duì)建設(shè) 20 HYPERLINK l bookmark26 o Current Document 雙師型教師培養(yǎng) 20 HYPERLINK l bookmark28 o Current Document 實(shí)踐教學(xué)環(huán)境建設(shè) 23 HYPERLINK l bookmark30 o Current Document 實(shí)踐教學(xué)環(huán)境架構(gòu)設(shè)計(jì) 23 HYPERLIN

4、K l bookmark32 o Current Document 實(shí)踐教學(xué)環(huán)境建設(shè) 24 HYPERLINK l bookmark34 o Current Document 職業(yè)技能認(rèn)證 26 HYPERLINK l bookmark36 o Current Document 認(rèn)證體系概述 26高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案專(zhuān)業(yè)建設(shè)背景2016年，習(xí)近平總書(shū)記指出，“大數(shù)據(jù)戰(zhàn)略作為十三五期間的十四大國(guó) 家戰(zhàn)略之一，是中國(guó)經(jīng)濟(jì)發(fā)展新的驅(qū)動(dòng)力。”至此，大數(shù)據(jù)戰(zhàn)略上升到國(guó)家戰(zhàn)略。 未來(lái)五年信息化建設(shè)將重點(diǎn)實(shí)施網(wǎng)絡(luò)強(qiáng)國(guó)戰(zhàn)略， 并且明確提出實(shí)施網(wǎng)絡(luò)強(qiáng)國(guó)戰(zhàn)略, 實(shí)施國(guó)家大數(shù)據(jù)戰(zhàn)略。根據(jù)國(guó)務(wù)院關(guān)于印發(fā)促

5、進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要的通知， 主要分解了三大任務(wù)和十項(xiàng)工程。1、三大任務(wù)加快政府?dāng)?shù)據(jù)開(kāi)放共享，推動(dòng)資源整合，提升治理能力 推動(dòng)產(chǎn)業(yè)創(chuàng)新發(fā)展，培育新興業(yè)態(tài)，助力經(jīng)濟(jì)轉(zhuǎn)型 強(qiáng)化安全保障，提高管理水平，促進(jìn)健康發(fā)展2、十項(xiàng)工程政府?dāng)?shù)據(jù)資源共享開(kāi)放工程、國(guó)家大數(shù)據(jù)資源統(tǒng)籌發(fā)展工程政府治理大數(shù)據(jù)工程、公共服務(wù)大數(shù)據(jù)工程工業(yè)和新興產(chǎn)業(yè)大數(shù)據(jù)工程、現(xiàn)代農(nóng)業(yè)大數(shù)據(jù)工程萬(wàn)眾創(chuàng)新大數(shù)據(jù)工程、大數(shù)據(jù)關(guān)鍵技術(shù)及產(chǎn)品研發(fā)與產(chǎn)業(yè)化工程 大數(shù)據(jù)產(chǎn)業(yè)支撐能力提升工程、網(wǎng)絡(luò)和大數(shù)據(jù)安全保障工程大數(shù)據(jù)產(chǎn)業(yè)發(fā)展趨勢(shì)大數(shù)據(jù)在2011年由全球最著名的管理咨詢(xún)公司麥肯錫首次提出并迅速在全球范圍內(nèi)引起共鳴。短短幾年，大數(shù)據(jù)應(yīng)用已經(jīng)在各行各

6、業(yè)形成不可阻擋產(chǎn)業(yè)技術(shù)革新浪潮。當(dāng)今社會(huì)已經(jīng)進(jìn)入了大數(shù)據(jù)的時(shí)代， 大數(shù)據(jù)的應(yīng)用正在逐步從互聯(lián)網(wǎng)、金融擴(kuò)展到教育、政務(wù)、交通物流、醫(yī)療健康等各大社會(huì)和經(jīng)濟(jì)領(lǐng)域，其必 將深刻影響中國(guó)未來(lái)社會(huì)和經(jīng)濟(jì)的發(fā)展進(jìn)程。大數(shù)據(jù)的產(chǎn)業(yè)規(guī)模也在急速增長(zhǎng)，高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案如下為部分相關(guān)數(shù)據(jù):IDC預(yù)計(jì)，全球大數(shù)據(jù)技術(shù)及服務(wù)市場(chǎng) 2016年收入將達(dá)238億美元據(jù)麥肯錫預(yù)測(cè)，預(yù)計(jì)到2020年，美國(guó)的大數(shù)據(jù)可創(chuàng)造3800億-6900億 美元的價(jià)值2014年，我國(guó)大數(shù)據(jù)市場(chǎng)規(guī)模為84億元，2015年接近116億元，增速 為38%與2014年中國(guó)信息產(chǎn)業(yè)規(guī)模15萬(wàn)億元相比，大數(shù)據(jù)市場(chǎng)還是一個(gè)非 常小的市場(chǎng)，還

7、處在非常初級(jí)的階段大數(shù)據(jù)人才需求分析根據(jù)領(lǐng)英最近發(fā)布的一份研究表明，過(guò)去四年從事數(shù)據(jù)分析的專(zhuān)業(yè)人士數(shù)量 翻了一倍。相關(guān)工作的招聘量急劇上升，這一趨勢(shì)反映了人們對(duì)高端數(shù)據(jù)分析人 才的需求在不斷增加，因?yàn)槠髽I(yè)需要他們對(duì)數(shù)據(jù)進(jìn)行各式處理分析，這必然會(huì)對(duì) 2016年甚至以后的大數(shù)據(jù)局面 產(chǎn)生影響。另外，麥肯錫發(fā)布大數(shù)據(jù)人才需求報(bào)告并預(yù)測(cè)大數(shù)據(jù)人才短缺，到2018年，在“具有深入分析能力的人才”方面，美國(guó)可能面臨著14萬(wàn)19萬(wàn)人的缺口，而“可以利用大數(shù)據(jù)分析來(lái)作出有效決策的經(jīng)理和分析師”缺口則會(huì)達(dá)到150萬(wàn)。國(guó)內(nèi)大數(shù)據(jù)人才有多大的缺口？目前尚無(wú)權(quán)威研究報(bào)告指出，不過(guò)今年2月萬(wàn)達(dá)集團(tuán)的一份“求賢帖”頗能說(shuō)

8、明問(wèn)題：萬(wàn)達(dá)開(kāi)出50萬(wàn)70萬(wàn)元年薪吸納大數(shù)據(jù)架構(gòu)師、大數(shù)據(jù)研發(fā)工程師和算法工程師，應(yīng)者寥寥。同時(shí)，從如下 Gartner研 究報(bào)告中也可以看出來(lái)大數(shù)據(jù)人才的缺口。Gartner公司預(yù)測(cè)大數(shù)據(jù)將為全球帶來(lái) 440萬(wàn)個(gè)IT新崗位和上千萬(wàn)個(gè)非 IT崗位Gartner公司預(yù)測(cè)在未來(lái)6年，僅在美國(guó)本土就可能面臨缺乏 14萬(wàn)至 19萬(wàn)具備深入分析數(shù)據(jù)能力人才的情況，同時(shí)具備通過(guò)分析大數(shù)據(jù)并 為企業(yè)做出有效決策的數(shù)據(jù)的管理人員和分析師也有150萬(wàn)人的缺口。涵蓋了大數(shù)據(jù)的數(shù)據(jù)開(kāi)發(fā)工程師、大數(shù)據(jù)分析師、數(shù)據(jù)架構(gòu)師、大數(shù)據(jù)高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案后臺(tái)開(kāi)發(fā)工程師、算法工程師等多個(gè)方向數(shù)據(jù)崗位需求在上海是5萬(wàn)

9、多，北京則10萬(wàn)多 大數(shù)據(jù)產(chǎn)品地圖分布及人才就業(yè)去向圖如下所示：大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)設(shè)置教育戰(zhàn)略需要服務(wù)于國(guó)家戰(zhàn)略，從國(guó)家大數(shù)據(jù)戰(zhàn)略發(fā)展來(lái)看，隨著大樹(shù)產(chǎn)業(yè) 的飛速發(fā)展，未來(lái)社會(huì)對(duì)大數(shù)據(jù)的人才需求將劇烈增長(zhǎng)，為服務(wù)國(guó)家大數(shù)據(jù)戰(zhàn)略， 我們要提前做好大數(shù)據(jù)人才培養(yǎng)的準(zhǔn)備，滿足社會(huì)需求。2016年9月，教育部研究決定正式批準(zhǔn)高職大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè) （專(zhuān)業(yè)代碼：610215）（普通高等學(xué) 校高等職業(yè)教育（專(zhuān)科）專(zhuān)業(yè)目錄 2016年增補(bǔ)專(zhuān)業(yè)）。高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案專(zhuān)業(yè)人才培養(yǎng)目標(biāo)本專(zhuān)業(yè)人才配培養(yǎng)主要技術(shù)崗位方向有大數(shù)據(jù)應(yīng)用開(kāi)發(fā)、大數(shù)據(jù)分析挖掘、 大數(shù)據(jù)系統(tǒng)運(yùn)維等方向，學(xué)生的知識(shí)體系符合大數(shù)據(jù)

10、行業(yè)需求的復(fù)合型、創(chuàng)新型 和實(shí)用型人才。本專(zhuān)業(yè)方向特別注重培養(yǎng)能夠?yàn)槠笫聵I(yè)單位提供進(jìn)行大數(shù)據(jù)系統(tǒng) 的搭建、管理、和運(yùn)維技術(shù)和能力的學(xué)生。學(xué)生在學(xué)習(xí)計(jì)算機(jī)基礎(chǔ)課程和計(jì)算機(jī) 系統(tǒng)管理的同時(shí)，接受大數(shù)據(jù)系統(tǒng)和應(yīng)用知識(shí)的培養(yǎng)，并進(jìn)行各種計(jì)算機(jī)系統(tǒng)， 大數(shù)據(jù)平臺(tái)系統(tǒng)，大數(shù)據(jù)應(yīng)用系統(tǒng)搭建、配置、管理、及運(yùn)維實(shí)訓(xùn)I。在獲得計(jì)算 機(jī)系統(tǒng)管理技術(shù)的基礎(chǔ)上，學(xué)生通過(guò)大量的案例與實(shí)踐操作，可以熟練掌握大數(shù) 據(jù)系統(tǒng)管理所需的各種專(zhuān)業(yè)知識(shí)和能力， 具備一定的職業(yè)素養(yǎng)，為他們從事大數(shù) 據(jù)這個(gè)尖端行業(yè)的系統(tǒng)管理工作奠定堅(jiān)實(shí)的基礎(chǔ)。 本專(zhuān)業(yè)方向重點(diǎn)培養(yǎng)具有大數(shù) 據(jù)應(yīng)用、大數(shù)據(jù)分析以及大數(shù)據(jù)系統(tǒng)管理與運(yùn)維方向的，應(yīng)用型高技能人

11、才。高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案通過(guò)對(duì)主流招聘網(wǎng)站、主流互聯(lián)網(wǎng)公司、大數(shù)據(jù)相關(guān)產(chǎn)業(yè)聯(lián)盟對(duì)人才的需求 和崗位能力要求分析，了解到人才培養(yǎng)目標(biāo)中涉及的三個(gè)主要技術(shù)崗位需要學(xué)生 掌握的能力有如下幾個(gè)方面。需要理解大數(shù)據(jù)系統(tǒng)的基本概念、掌握大數(shù)據(jù)應(yīng)用的設(shè)計(jì)與開(kāi)發(fā)方法、 數(shù)據(jù)挖掘與大數(shù)據(jù)分析方法、以及大數(shù)據(jù)系統(tǒng)搭建運(yùn)維方法； 經(jīng)過(guò)大數(shù)據(jù)應(yīng)用開(kāi)發(fā)工程實(shí)踐的基本訓(xùn)練，具備從事大數(shù)據(jù)應(yīng)用開(kāi)發(fā)、高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案大數(shù)據(jù)分析、或大數(shù)據(jù)系統(tǒng)運(yùn)維的基本能力。對(duì)上述能力目標(biāo)進(jìn)行細(xì)化與分解形成如下所示的崗位職業(yè)能力分析簡(jiǎn)表高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案岡位力1可崗位職業(yè)能力大數(shù)據(jù)應(yīng)用工程師1、掌握大數(shù)

12、據(jù)的基本概念和應(yīng)用領(lǐng)域2、掌握程序設(shè)計(jì)和實(shí)現(xiàn)方法3、掌握使用HBass HDFS存儲(chǔ)和管理數(shù)據(jù)的方法4、具后開(kāi)發(fā)Java Web應(yīng)用的能力5、具有基于MapReduce開(kāi)發(fā)大數(shù)據(jù)應(yīng)用開(kāi)發(fā)的能力6、了解大數(shù)據(jù)系統(tǒng)的架構(gòu)和設(shè)計(jì)方法7、了解大數(shù)據(jù)系統(tǒng)的基本搭建和調(diào)優(yōu)方法8、了解大數(shù)據(jù)的發(fā)展趨勢(shì)和應(yīng)用領(lǐng)域9、了解云計(jì)算的基本概念和作用大數(shù)據(jù)分析工程師1、掌握大數(shù)據(jù)的基本概念和應(yīng)用領(lǐng)域2、掌握程序設(shè)計(jì)和實(shí)現(xiàn)方法3、掌握使用HBass HDFS存儲(chǔ)和管理數(shù)據(jù)的方法3、具有使用Mahout數(shù)據(jù)挖掘算法進(jìn)行數(shù)據(jù)分析的能力4、具有基于MapReduce開(kāi)發(fā)大數(shù)據(jù)應(yīng)用開(kāi)發(fā)的能力5、了解大數(shù)據(jù)系統(tǒng)的架構(gòu)和設(shè)計(jì)方法6

13、、了解大數(shù)據(jù)系統(tǒng)的基本搭建和調(diào)優(yōu)方法7、了解大數(shù)據(jù)的發(fā)展趨勢(shì)和應(yīng)用領(lǐng)域8、了解云計(jì)算的基本概念和作用大數(shù)據(jù)系統(tǒng)運(yùn)維工程師1、掌握大數(shù)據(jù)的基本概念和應(yīng)用領(lǐng)域2、掌握大數(shù)據(jù)系統(tǒng)的架構(gòu)和設(shè)計(jì)方法3、掌握計(jì)算機(jī)網(wǎng)絡(luò)基本原理和基本知識(shí)3、熟練掌握Linux Shell的使用4、熟悉Linux操作系統(tǒng)5、具有大數(shù)據(jù)系統(tǒng)的搭建、調(diào)優(yōu)和運(yùn)維能力6、了解虛擬化技術(shù)7、了解大數(shù)據(jù)的發(fā)展趨勢(shì)和應(yīng)用領(lǐng)域8、了解云計(jì)算的基本概念和作用高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案專(zhuān)業(yè)課程體系設(shè)計(jì)4.1專(zhuān)業(yè)課程設(shè)置思路以學(xué)生實(shí)際動(dòng)手能力為主導(dǎo)，項(xiàng)目式教學(xué)為驅(qū)動(dòng)，理論、技術(shù)與實(shí)踐課程 體化教學(xué)為主。.以理論課程為輔，使學(xué)生了解技術(shù)概況理

14、論是大數(shù)據(jù) 認(rèn)知的必經(jīng)途徑，也是被廣泛認(rèn)同和傳播的基線講解大數(shù)據(jù)的概念、作用、挑戰(zhàn)和各種技術(shù)概念.以技術(shù)實(shí)驗(yàn)課程過(guò)程為主導(dǎo)，使學(xué)生掌握使用技術(shù)的方法技術(shù)是大數(shù)據(jù)價(jià)值體現(xiàn)的手段和前進(jìn)的基石講解用于大數(shù)據(jù)應(yīng)用開(kāi)發(fā)過(guò)程中的各種系統(tǒng)和工具.通過(guò)項(xiàng)目實(shí)戰(zhàn)課程使學(xué)生具有靈活使用技術(shù)解決實(shí)際問(wèn)題的能力培養(yǎng)學(xué)生的綜合實(shí)踐 能力，以滿足社會(huì)就業(yè)的需要專(zhuān)業(yè)課程知識(shí)體系根據(jù)課程設(shè)置總體思路以及大數(shù)據(jù)專(zhuān)業(yè)崗位的職業(yè)能力分析，大數(shù)據(jù)專(zhuān)業(yè)需要掌握的知識(shí)體系如下表所示：知識(shí)類(lèi)別知識(shí)名稱(chēng)知識(shí)描述理論知識(shí)大數(shù)據(jù)概念大數(shù)據(jù)概念出現(xiàn)的歷史，大數(shù)據(jù)定義和主要特征，大數(shù)據(jù)與云計(jì)算、物聯(lián)網(wǎng)、互聯(lián)網(wǎng)的關(guān)系，大數(shù)據(jù) 的重要意義、大數(shù)據(jù)的處理

15、流程大數(shù)據(jù)應(yīng)用領(lǐng)域通過(guò)介紹典型的大數(shù)據(jù)應(yīng)用實(shí)例的設(shè)計(jì)思想、主要 方法和應(yīng)用過(guò)程等講解大數(shù)據(jù)應(yīng)用的系統(tǒng)化的開(kāi)發(fā) 步驟和關(guān)鍵性問(wèn)題解決方法高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案大數(shù)據(jù)關(guān)鍵技術(shù)與挑戰(zhàn)1、大數(shù)據(jù)集成：數(shù)據(jù)異構(gòu)性和數(shù)據(jù)質(zhì)量問(wèn)題2、大數(shù)據(jù)分析：數(shù)據(jù)形式多樣化、數(shù)據(jù)處理的實(shí)時(shí)性、索引結(jié)構(gòu)的復(fù)雜性等3、大數(shù)據(jù)隱私問(wèn)題：隱 私保護(hù)和數(shù)據(jù)分析的矛盾4、大數(shù)據(jù)管理易用性問(wèn)題以及性能測(cè)試基準(zhǔn)大數(shù)據(jù)存儲(chǔ)和管理技術(shù)1、大數(shù)據(jù)存儲(chǔ)、管理 和調(diào)用2、分布式文件系統(tǒng)3、去冗余及高效低成本的大數(shù)據(jù)存儲(chǔ)技術(shù)4、新型數(shù)據(jù)庫(kù)技術(shù)（鍵值數(shù)據(jù)庫(kù)、列存數(shù)據(jù)庫(kù)、圖存數(shù)據(jù)庫(kù)以及文檔數(shù)據(jù)庫(kù)等）5、異構(gòu)數(shù)據(jù)融合技術(shù)6、分布式非關(guān)系型大數(shù)據(jù)

16、管理與處理技術(shù)7、大數(shù)據(jù)索引技術(shù)和大數(shù)據(jù)移動(dòng)、備份、復(fù)制大數(shù)據(jù)分析及挖掘技術(shù)1、數(shù)據(jù)挖掘分為分類(lèi)或預(yù)測(cè)模型發(fā)現(xiàn)、數(shù)據(jù)總結(jié)、聚類(lèi)、關(guān)聯(lián)規(guī)則 發(fā)現(xiàn)、序列模式發(fā)現(xiàn)、依賴(lài)關(guān)系或依賴(lài)模型發(fā)現(xiàn)、異常 和趨勢(shì)發(fā)現(xiàn)等2、數(shù)據(jù)準(zhǔn)備：從大數(shù)據(jù)中心存儲(chǔ)的數(shù)據(jù)中選取所需數(shù)據(jù)并整合成用于數(shù)據(jù)挖掘的數(shù)據(jù)集3、規(guī)律尋找：用某種方法將數(shù)據(jù)集所含規(guī)律找出來(lái)4、規(guī)律表示：以用戶可理解的方式（如可視化）將找出的規(guī)律表示出來(lái)實(shí)驗(yàn)知識(shí)新型數(shù)據(jù)庫(kù)系統(tǒng)1、HBase產(chǎn)生的背景和現(xiàn)狀2、HBase的功能、作用和特點(diǎn)3、HBase的邏輯模型、物理模型、數(shù)據(jù)一致性模型4、HBase的系統(tǒng)架構(gòu)及實(shí)現(xiàn)方法5、HBase的搭建方法和使用方法分布式文件

17、系統(tǒng)1、Hadoop出現(xiàn)的背景、應(yīng)用現(xiàn)狀和發(fā)展趨勢(shì)2、Hadoop的優(yōu)點(diǎn)、功能與作用3、Hadoop的體系結(jié)構(gòu)4、 HDFS文件系統(tǒng)5、Hadoop與分布式開(kāi)發(fā)6、Hadoop應(yīng)用案例7、Hadoop系統(tǒng)搭建與調(diào)優(yōu)分布式處理模式1、MapReduce分體式并行計(jì)算框架2、編程模型：Map和Reduce函數(shù)3、MapReduce工作流程4、分布式資源管理架構(gòu) YARN5、基于MapReduce的大數(shù)據(jù)應(yīng)用開(kāi)發(fā)數(shù)據(jù)挖掘工具1、Mahout數(shù)據(jù)挖掘系統(tǒng)2、海量數(shù)據(jù)的數(shù)據(jù)挖掘?qū)崿F(xiàn)3、Mahout的搭建與部署4、Mahout聚類(lèi)、分類(lèi)、關(guān)聯(lián)、推薦算法的實(shí)現(xiàn)5、Mahout各種挖掘算法的使用方法高校大數(shù)據(jù)

18、技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案基于內(nèi)存的分布式計(jì)算框 架1、Spark的歷史、現(xiàn)狀和特點(diǎn)2、Spark的計(jì)算模式和運(yùn)行流程3、Spark的使用方法4、基于Spark的大數(shù)據(jù)應(yīng)用開(kāi)發(fā)5、基于Spark的數(shù)據(jù)挖掘方法6、基于Spark的流式數(shù)據(jù)處理7、Spark的搭建、部署與調(diào)優(yōu)項(xiàng)目實(shí)踐項(xiàng)目開(kāi)發(fā)流程1、選題、需求分析、數(shù)據(jù)收集及預(yù)處理2、探索性數(shù)據(jù)分析、模型選定分析3、模型驗(yàn)證、分析報(bào)告崗位發(fā)展學(xué)習(xí)路徑根據(jù)每個(gè)崗位需要掌握的知識(shí)和技能的不同， 對(duì)上述知識(shí)體系進(jìn)行分解與組 合，形成如下圖所示的大數(shù)據(jù)崗位知識(shí)學(xué)習(xí)路徑圖。*，-*H-+境升何實(shí)現(xiàn)方維1用inwH impufr用庫(kù)kEVI與世與息中 *F5fep

19、KJwEW3t 重的力萬(wàn)無(wú)壯貝噫時(shí)疑朝一世TW3ISI節(jié)肉附本甘 花調(diào)魚(yú)ULIr*uA，忡* 事政/*小計(jì)*履率*摘步 n如幫蛇塞贏酬*，-*H-+境升何實(shí)現(xiàn)方維1用inwH impufr用庫(kù)kEVI與世與息中 *F5fepKJwEW3t 重的力萬(wàn)無(wú)壯貝噫時(shí)疑朝一世TW3ISI節(jié)肉附本甘 花調(diào)魚(yú)ULIr*uA，忡* 事政/*小計(jì)*履率*摘步 n如幫蛇塞贏酬“酬。3軟件閨工Androbd且用即發(fā)高LK1J操作泵統(tǒng)高簸計(jì)算機(jī)網(wǎng)第Spark系統(tǒng)Hlvjggfcffi殷裾護(hù)*HYJAVA Web I. I 開(kāi)發(fā)電劑化技術(shù)JavaScript* Jqrueryn 工”：f，產(chǎn)用nnnn im*#惻十，式

20、11才法. 揖.RII9- ma 修帕停,勝林崎才跳* AffMMiibibMttll ，此W件IHMN縣啊1 卬代向w3t HHRII并博用力+ T解比靠戢噫時(shí)總軸占世 *t酬虹演修不閔m享甘 忙國(guó)第JjLI/1單in呻*立立目 國(guó)HM/例4計(jì)*M*靠旭和 m人數(shù)據(jù)案明分向it說(shuō)商注行田互.全基礎(chǔ)數(shù)帚物棚系統(tǒng)M&houi灶蛔摩電筑城第軟件匚程AndrokdT 陽(yáng) JF 發(fā)H育LtoUK嫌作嶷鰭商縱計(jì)算機(jī)網(wǎng)第匕park系統(tǒng)HI”；克倉(cāng)改裾護(hù)史“就JAVA Web I. I二VttWAg/Tlftil-JavaScript* J query商俎仃管刑中什工不向因*景掾火載*的*際此 陶葡-玄黠幻

21、0率M的*利旭信 IO法事紈. MiVHLingAMM n+胃鼻*靠1誄喇初t，if 吃利包1*H-Trrwimt-1r *時(shí)星吟宴41勢(shì)即立 IHM-了iHWli零f / 局高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案p JAVAWabh： f|. 1F軟件工程AnMd理陽(yáng)JF發(fā)高Uhwdt作茶展高皴計(jì)籍機(jī),阿停_Spark_制仃涉/地?cái)?shù)據(jù)挖堀荽繞Mahuut虛摞化技術(shù)有用云管理平臺(tái)鼻事燈應(yīng)用人曲期分析辦向If說(shuō)由注高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案5教學(xué)計(jì)劃設(shè)計(jì)通過(guò)對(duì)上述崗位發(fā)展學(xué)習(xí)路徑的分析， 并結(jié)合學(xué)校、學(xué)生的學(xué)習(xí)規(guī)律，推薦的大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)教學(xué)計(jì)劃表如下所示:崗位類(lèi)型課程方向課程名稱(chēng)第一學(xué)期第

22、二 學(xué)期第三 學(xué)期第四 學(xué)期第五 學(xué)期學(xué)期總計(jì)大數(shù)據(jù)應(yīng)用 開(kāi)發(fā)專(zhuān)業(yè)核心 課Java程序設(shè)計(jì)6計(jì)算機(jī)基礎(chǔ)4網(wǎng)頁(yè)設(shè)計(jì)與制作4數(shù)據(jù)結(jié)構(gòu)4大數(shù)據(jù)導(dǎo)論4數(shù)據(jù)庫(kù)基礎(chǔ)3MySql數(shù)據(jù)庫(kù)3操作系統(tǒng)基礎(chǔ)3Linux操作系統(tǒng)3計(jì)算機(jī)網(wǎng)絡(luò)基礎(chǔ)4Java Web應(yīng)用開(kāi)發(fā)4Hadoop系統(tǒng)基礎(chǔ)6HBase系統(tǒng)基礎(chǔ)6大數(shù)據(jù)應(yīng)用開(kāi)發(fā)6云計(jì)算導(dǎo)論4高級(jí)大數(shù)據(jù)應(yīng)用開(kāi)發(fā)6Hive數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用開(kāi)發(fā)6Spark應(yīng)用開(kāi)發(fā)4合計(jì)141414221680專(zhuān)業(yè)選修 課信息安全技術(shù)4軟件工程4高級(jí)Linux操作系統(tǒng)4高級(jí)計(jì)算機(jī)網(wǎng)絡(luò)4虛擬化技術(shù)4Android應(yīng)用開(kāi)發(fā)4合計(jì)88824大數(shù)據(jù)系統(tǒng) 運(yùn)維專(zhuān)業(yè)核心 課Java程序設(shè)計(jì)6計(jì)算機(jī)組成原理4

23、計(jì)算機(jī)應(yīng)用基礎(chǔ)4數(shù)據(jù)結(jié)構(gòu)4大數(shù)據(jù)導(dǎo)論4數(shù)據(jù)庫(kù)系統(tǒng)基礎(chǔ)3MySql數(shù)據(jù)庫(kù)運(yùn)維3操作系統(tǒng)基礎(chǔ)3高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案Linux操作系統(tǒng)4計(jì)算機(jī)網(wǎng)絡(luò)基礎(chǔ)4Web系統(tǒng)運(yùn)維3Hadoop系統(tǒng)基礎(chǔ)6HBase系統(tǒng)基礎(chǔ)6Shell實(shí)戰(zhàn)6云計(jì)算導(dǎo)論4Hadoop系統(tǒng)運(yùn)維6HBase系統(tǒng)運(yùn)維4大數(shù)據(jù)平臺(tái)運(yùn)維6合計(jì)141414221680專(zhuān)業(yè)選修 課軟件工程4信息安全技術(shù)4高級(jí)Linux操作系統(tǒng)4高級(jí)計(jì)算機(jī)網(wǎng)絡(luò)4Spark系統(tǒng)4虛擬化技術(shù)4合計(jì)88824大數(shù)據(jù)獲取專(zhuān)業(yè)核心 課Java程序設(shè)計(jì)6計(jì)算機(jī)組成原理4計(jì)算機(jī)應(yīng)用基礎(chǔ)4數(shù)據(jù)結(jié)構(gòu)4大數(shù)據(jù)導(dǎo)論4數(shù)據(jù)庫(kù)系統(tǒng)基礎(chǔ)3MySql數(shù)據(jù)庫(kù)運(yùn)維3操作系統(tǒng)基礎(chǔ)3Lin

24、ux操作系統(tǒng)4計(jì)算機(jī)網(wǎng)絡(luò)基礎(chǔ)4Web系統(tǒng)運(yùn)維3Hadoop系統(tǒng)基礎(chǔ)6HBase系統(tǒng)基礎(chǔ)6Shell實(shí)戰(zhàn)6云計(jì)算導(dǎo)論4Hadoop系統(tǒng)運(yùn)維6HBase系統(tǒng)運(yùn)維4大數(shù)據(jù)平臺(tái)運(yùn)維6合計(jì)141414221680專(zhuān)業(yè)選修課軟件工程4信息安全技術(shù)4高級(jí)Linux操作系統(tǒng)4高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案高級(jí)計(jì)算機(jī)網(wǎng)絡(luò)4Spark系統(tǒng)4虛擬化技術(shù)4合計(jì)88824高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案教學(xué)資源建設(shè)經(jīng)過(guò)多年的實(shí)踐經(jīng)驗(yàn)發(fā)現(xiàn)，教學(xué)資源開(kāi)發(fā)必須通過(guò)校企合作共建的模式，才 可以得到適合學(xué)教學(xué)、滿足企業(yè)用人需求的教材。通過(guò)校企合作共建教學(xué)資源，才 能更好將學(xué)校的教學(xué)經(jīng)驗(yàn)和企業(yè)的人才需求融合在一起。這樣開(kāi)發(fā)出來(lái)的

25、教學(xué)資源不僅有助于課程內(nèi)容與企業(yè)崗位需求的粘合度， 同時(shí)也有助于根據(jù)市場(chǎng)的變化 及時(shí)做出調(diào)整。如下課程為校企聯(lián)合共建課程的部分樣例介紹。大數(shù)據(jù)導(dǎo)論章節(jié)理論課實(shí)驗(yàn)課合計(jì)A階段ITT 大數(shù)據(jù)時(shí)代及思維2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第二節(jié)什么是大數(shù)據(jù)1學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第三節(jié)大數(shù)據(jù)技術(shù)簡(jiǎn)介1學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第四節(jié)大數(shù)據(jù)應(yīng)用及現(xiàn)狀和發(fā)展趨勢(shì)2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第二階段第五節(jié)數(shù)據(jù)存儲(chǔ)概述及現(xiàn)狀2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第六節(jié)海量數(shù)據(jù)存儲(chǔ)關(guān)鍵技術(shù)概述2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第七節(jié) Hadoop文件系統(tǒng)HDFS2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第八節(jié) 面向列數(shù)據(jù)庫(kù)HBase2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第九節(jié)數(shù)據(jù)倉(cāng)庫(kù)2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第三階段第d卜節(jié)批量處理模式1

26、學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第dL節(jié)隨機(jī)查詢(xún)模式1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第d卜一節(jié) 流式處理模式1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第d卜二節(jié) 圖處理模式1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第四階段第十四節(jié)數(shù)據(jù)挖掘概述1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第十五節(jié)分類(lèi)算法2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第d聚類(lèi)算法2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十七節(jié)關(guān)聯(lián)算法2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十八節(jié)時(shí)序挖掘算法2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第五階段第十九節(jié)大數(shù)據(jù)用十預(yù)測(cè)與決策1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第二十節(jié)大數(shù)據(jù)用于市場(chǎng)營(yíng)銷(xiāo)1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第二節(jié)數(shù)據(jù)挖掘與互聯(lián)網(wǎng)廣告1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第二十二節(jié)數(shù)據(jù)挖掘與文本數(shù)據(jù)分析1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第二十三節(jié)數(shù)據(jù)挖掘與日志分析1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案第一十四節(jié)數(shù)

27、據(jù)挖掘與電子商務(wù)1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第二十五節(jié)數(shù)據(jù)挖掘與查找引擎1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)合計(jì)36學(xué)時(shí)28學(xué)時(shí)66學(xué)時(shí)Hdoop基礎(chǔ)早1理論課實(shí)驗(yàn)課合計(jì)務(wù)T課Hadoop知識(shí)背景2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第二節(jié)課Hadoop集群架構(gòu)2學(xué)時(shí)10學(xué)時(shí)2學(xué)時(shí)第二節(jié)課Hadoop文件系統(tǒng)HDFS2學(xué)時(shí)6學(xué)時(shí)8學(xué)時(shí)第四節(jié)課Hadoop命令行1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第五節(jié)課Hadoop計(jì)算模式簡(jiǎn)介1學(xué)時(shí)1學(xué)時(shí)2學(xué)時(shí)第六節(jié)課HDFS基本概念2學(xué)時(shí)P 2學(xué)時(shí)4學(xué)時(shí)1第七節(jié)課HDFS運(yùn)行機(jī)制2學(xué)時(shí)r 2學(xué)時(shí)4學(xué)時(shí)第八節(jié)課Block的劃分及存儲(chǔ)方式2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第九節(jié)課HDFS的備份和文件管理機(jī)制2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十節(jié)課HDFS文

28、件的讀寫(xiě)流程2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)HDFS的 JAVA API2學(xué)時(shí)r 2學(xué)時(shí)4學(xué)時(shí)1用1 IJ課第十二節(jié)課MapReduce的基本概念1學(xué)時(shí)p 1學(xué)時(shí)2學(xué)時(shí)第十三節(jié)課 調(diào)用MapReduce相關(guān)類(lèi)的功能及2學(xué)時(shí)4學(xué)時(shí)6學(xué)時(shí)第十四節(jié)課MapReduce程序的運(yùn)行機(jī)制2學(xué)時(shí)r 2學(xué)時(shí)4學(xué)時(shí)1第十五節(jié)課Combiner的概念和使用2學(xué)時(shí)r 2學(xué)時(shí)4學(xué)時(shí)第十六節(jié)課Partitioner的概念和使用2學(xué)時(shí)4學(xué)時(shí)6學(xué)時(shí)合計(jì)29學(xué)時(shí)33學(xué)時(shí)62學(xué)時(shí)Hbase基礎(chǔ)章節(jié)理論課實(shí)驗(yàn)課合計(jì)第一節(jié)HBase概述2學(xué)時(shí)2學(xué)時(shí)3學(xué)時(shí)第一節(jié) HBase表的設(shè)計(jì)2學(xué)時(shí)6學(xué)時(shí)8學(xué)時(shí)第二節(jié) PUT方法：?jiǎn)涡?put、KeyValu

29、e類(lèi)2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第四節(jié)PUT方法：寫(xiě)緩沖區(qū)、put列表、原子 操作2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第五節(jié) GET方法：?jiǎn)涡?get、result類(lèi)2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第六節(jié)GET方法：get列表、獲取數(shù)據(jù)的方法2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第七節(jié) DELETE方法：?jiǎn)涡衐elete、歹U表delete 原子性操作2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第八節(jié)批量處理操作、行鎖2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第九節(jié)掃描2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十節(jié)過(guò)濾器簡(jiǎn)介2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第1節(jié)比較過(guò)濾器：行過(guò)濾器、列族過(guò)濾器、 列名過(guò)濾命、值過(guò)濾俞、繪專(zhuān)列過(guò)濾命2學(xué)時(shí)4學(xué)時(shí)6學(xué)時(shí)高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案第葉一節(jié) 專(zhuān)用過(guò)濾器：?jiǎn)瘟兄颠^(guò)濾器、單列排 除過(guò)濾器、前綴過(guò)

30、濾器、分頁(yè)過(guò)濾器2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十二節(jié) 專(zhuān)用過(guò)濾器：行鍵過(guò)濾器、首次行鍵過(guò)濾器、包含結(jié)束的過(guò)濾器、時(shí)間戳過(guò)濾器、列計(jì)數(shù)過(guò)濾器、列分頁(yè)過(guò)濾器、列前綴過(guò)濾器、 隨機(jī)行過(guò)濾器2學(xué)時(shí)4學(xué)時(shí)6學(xué)時(shí)第十四節(jié)附加過(guò)濾器2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十五節(jié)自定義過(guò)濾器2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第d計(jì)數(shù)器：?jiǎn)斡?jì)數(shù)器、多計(jì)數(shù)器2學(xué)時(shí)2學(xué)時(shí)4學(xué)時(shí)第十七節(jié)協(xié)處理器簡(jiǎn)介2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)第十八節(jié)總結(jié)2學(xué)時(shí)0學(xué)時(shí)2學(xué)時(shí)總結(jié)36學(xué)時(shí)36學(xué)時(shí)72學(xué)時(shí)高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案師資隊(duì)伍建設(shè)專(zhuān)兼結(jié)合教學(xué)團(tuán)隊(duì)建設(shè)通過(guò)校企合作，共建穩(wěn)定的專(zhuān)兼結(jié)合雙師隊(duì)伍，采用“走出去、請(qǐng)進(jìn)來(lái)”的 方式培養(yǎng)骨干教師，提升教學(xué)團(tuán)隊(duì)職教能力、工程素養(yǎng)和社會(huì)服務(wù)能

31、力，做實(shí)兼 職教師隊(duì)伍，形成相對(duì)穩(wěn)定的兼職教師隊(duì)伍和完善的管理辦法。專(zhuān)業(yè)遵循高職教育師資成長(zhǎng)的客觀規(guī)律，充分考慮校內(nèi)教師實(shí)踐性培養(yǎng)和企 業(yè)兼職教師教學(xué)能力提升的實(shí)際需求， 通過(guò)在企業(yè)設(shè)立聯(lián)絡(luò)工作站，派遣校內(nèi)教 師駐場(chǎng)頂崗實(shí)習(xí)，提升網(wǎng)絡(luò)工程項(xiàng)目實(shí)踐能力，在學(xué)校設(shè)立企業(yè)導(dǎo)師工作室，讓 企業(yè)兼職教師來(lái)校開(kāi)展專(zhuān)業(yè)講座、指導(dǎo)生產(chǎn)性實(shí)訓(xùn)I?；陔p方互派教師，定期輪崗機(jī)制，把與企業(yè)合作共同培養(yǎng)教師專(zhuān)業(yè)實(shí)踐能 力作為雙師素質(zhì)教師培訓(xùn)工作的重要途徑，雙方通過(guò)制定教師 /工程師能力發(fā)展 計(jì)劃，有計(jì)劃、分方向地安排專(zhuān)業(yè)教師到企業(yè)進(jìn)行頂崗鍛煉、網(wǎng)絡(luò)工程師到學(xué)校 參與實(shí)踐教學(xué)。鼓勵(lì)教師/工程師參加職業(yè)技能培訓(xùn)，考取高質(zhì)

32、量的職業(yè)資格證 書(shū)。定期讓教師“上講臺(tái)、下企業(yè)、進(jìn)項(xiàng)目、出成效”，有效培養(yǎng)教師的專(zhuān)業(yè)建 設(shè)能力、技術(shù)服務(wù)能力和團(tuán)隊(duì)合作能力，逐步建立校企技術(shù)研討和經(jīng)驗(yàn)交流的合 作機(jī)制，并擴(kuò)大高技能兼職教師指導(dǎo)實(shí)踐技能課程的比例。雙師型教師培養(yǎng)根據(jù)教育部大力培養(yǎng)雙師型教師的指導(dǎo)性文件與評(píng)估標(biāo)準(zhǔn)，我們向合作院校提供階段式的骨干教師培養(yǎng)體系， 通過(guò)集中培訓(xùn)、頂崗實(shí)習(xí)、長(zhǎng)期掛職鍛煉三個(gè) 階段向講師灌輸網(wǎng)絡(luò)項(xiàng)目實(shí)施與維護(hù)流程標(biāo)準(zhǔn)， 以掌握當(dāng)前熱門(mén)應(yīng)用及典型工程 案例應(yīng)用方案，并將之融入到教學(xué)過(guò)程中，從而提升教師企業(yè)項(xiàng)目指導(dǎo)水平， 最高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案終達(dá)到教育部雙師型講師實(shí)踐能力標(biāo)準(zhǔn)具有雙證書(shū)CII教育聯(lián)

33、盟對(duì)教師設(shè)計(jì)了階梯化的骨干教師培養(yǎng)體系，通過(guò)實(shí)驗(yàn)學(xué)習(xí)、認(rèn) 證培訓(xùn)，使教師真正成為雙師型教師。CII教育聯(lián)盟師資培養(yǎng)體系，旨在幫助合作學(xué)校開(kāi)展持續(xù)的骨干師資培養(yǎng)， 為學(xué)校的未來(lái)發(fā)展儲(chǔ)備人才。骨干師資的培養(yǎng)內(nèi)容主要包括：講師的實(shí)驗(yàn)室管理 能力、技術(shù)能力、實(shí)驗(yàn)、授課能力等。合作院系的專(zhuān)業(yè)教師通過(guò)參加銳捷網(wǎng)絡(luò)組 織師資培訓(xùn)體系，建立“工作過(guò)程”的課程思想，按照“行動(dòng)導(dǎo)向”實(shí)施項(xiàng)目制 教學(xué)。培養(yǎng)目標(biāo)通過(guò)集中培訓(xùn)或項(xiàng)目式培訓(xùn)，為高校教師全面而又深入的介紹 Spark、Hadoop 平臺(tái)的構(gòu)建流程，涉及Spark Hadoop系統(tǒng)基礎(chǔ)知識(shí)，概念及架構(gòu)，Spark、Hadoop 實(shí)戰(zhàn)技巧，Spark Hado

34、op經(jīng)典案例等技能。1,幫助高校教師對(duì)Spark Hadoop生態(tài)系統(tǒng)有一個(gè)清晰明了的認(rèn)識(shí)；2, 了解大數(shù)據(jù)中Spark Hadoop系統(tǒng)適用的場(chǎng)景；3,掌握Spark Hadoop等初中級(jí)應(yīng)用開(kāi)發(fā)技能；.搭建穩(wěn)定可靠的Spark Hadoop集群，滿足生產(chǎn)環(huán)境的標(biāo)準(zhǔn)；, 了解和清楚大數(shù)據(jù)應(yīng)用的幾個(gè)行業(yè)中的經(jīng)典案例，包括阿里巴巴，騰訊高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案實(shí)踐教學(xué)環(huán)境建設(shè)根據(jù)專(zhuān)業(yè)人才培養(yǎng)方案，在實(shí)訓(xùn)過(guò)程中需配備符合實(shí)際教學(xué)需求的專(zhuān)業(yè)實(shí)訓(xùn) 室教學(xué)裝備，以滿足專(zhuān)業(yè)課程的一體化教學(xué)、生產(chǎn)性實(shí)習(xí)、綜合實(shí)訓(xùn)I、職業(yè)技能 培訓(xùn)、技能鑒定等教學(xué)需要。實(shí)訓(xùn)項(xiàng)目與工作崗

35、位任務(wù)對(duì)接，實(shí)訓(xùn)設(shè)備選型盡可 能與實(shí)習(xí)實(shí)踐及就業(yè)目標(biāo)企業(yè)業(yè)務(wù)過(guò)程中常用設(shè)備保持一致。實(shí)踐教學(xué)環(huán)境架構(gòu)設(shè)計(jì)大數(shù)據(jù)實(shí)驗(yàn)室采用以下4層架構(gòu)作為建設(shè)理念。硬件資源層：基于高性能計(jì)算與海量存儲(chǔ)節(jié)點(diǎn)構(gòu)建的運(yùn)算資源池，作為云計(jì) 算各項(xiàng)實(shí)驗(yàn)學(xué)習(xí)環(huán)境的主要承載平臺(tái)。業(yè)務(wù)平臺(tái)層：面向教學(xué)活動(dòng)中的實(shí)驗(yàn)課程與項(xiàng)目實(shí)訓(xùn)業(yè)務(wù)提供流程化支撐。資源平臺(tái)層：提供教學(xué)活動(dòng)中必不可少的理論學(xué)習(xí)類(lèi)資源、 實(shí)驗(yàn)學(xué)習(xí)類(lèi)資源、 項(xiàng)目實(shí)戰(zhàn)案例。統(tǒng)一管理層：基于教育云領(lǐng)航中心的統(tǒng)一資源調(diào)度引擎， 統(tǒng)一管理層為用戶 使用業(yè)務(wù)平臺(tái)層與資源平臺(tái)層提供便捷的使用入口。 用戶不需要花費(fèi)額外的平臺(tái) 功能學(xué)習(xí)成本，只需面向云計(jì)算技術(shù)教學(xué)活動(dòng)本身，實(shí)驗(yàn)教學(xué)既

36、有效、又高效高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案實(shí)踐教學(xué)環(huán)境建設(shè)組件名稱(chēng)組件介紹昶天教育云領(lǐng)航中心教育云領(lǐng)航中心，內(nèi)置 CII公有云接入客戶端與 CII私有 云資源統(tǒng)一調(diào)度中心。中心內(nèi)置教學(xué)云、實(shí)戰(zhàn)云等多種教 育云組件承載模塊，并負(fù)責(zé)各教育云組件與 CII公有云的 IP通信與資源分發(fā)。同時(shí)，中心支持對(duì)教學(xué)實(shí)踐環(huán)境中的 軟硬件設(shè)備的集中管理并提供用戶門(mén)戶，實(shí)現(xiàn)對(duì)網(wǎng)絡(luò)數(shù)據(jù) 通信實(shí)驗(yàn)資源池與云實(shí)踐節(jié)點(diǎn)資源池的調(diào)度與分配。昶天教學(xué)云平臺(tái)與CII公有云教學(xué)實(shí)驗(yàn)中心同步資源，獲取最新的目標(biāo)職 位教學(xué)路徑，為教師建立教學(xué)計(jì)劃、分配教學(xué)資源提供指 導(dǎo)。教學(xué)云平臺(tái)，同時(shí)也是學(xué)生進(jìn)行云計(jì)算專(zhuān)業(yè)實(shí)踐課程學(xué)習(xí) 的首選平臺(tái)

37、。學(xué)生根據(jù)教師建立的教學(xué)計(jì)劃完成學(xué)習(xí)目標(biāo) 與實(shí)驗(yàn)?zāi)繕?biāo)。昶大實(shí)戰(zhàn)云平臺(tái)實(shí)戰(zhàn)云平臺(tái)是一款實(shí)踐教學(xué)平臺(tái)。為學(xué)校提供不同技術(shù)方向的企業(yè)實(shí)戰(zhàn)教學(xué)項(xiàng)目，面向?qū)W生提供企業(yè)真實(shí)的業(yè)務(wù)流程；面向 教師提供知識(shí)與崗位路徑圖動(dòng)態(tài)匹配、教師快捷排課、實(shí)戰(zhàn)分 組、SRP項(xiàng)目管理子系統(tǒng)。必須配合教育云領(lǐng)航中心使用。昶云控制節(jié)點(diǎn)女控制節(jié)點(diǎn)，內(nèi)置CII玄虛擬實(shí)踐控制中心操作系統(tǒng)。2U 高度，固化千兆電口2個(gè)，萬(wàn)兆光口2個(gè)。云控制節(jié)點(diǎn)與教育云領(lǐng)航中心聯(lián)動(dòng)，實(shí)現(xiàn)對(duì)云實(shí)踐環(huán)境中高校大數(shù)據(jù)技術(shù)與應(yīng)用專(zhuān)業(yè)建設(shè)方案的鏡像資源的調(diào)用、遷移、卸載與存儲(chǔ)以及對(duì)所有運(yùn)算節(jié) 點(diǎn)的負(fù)載均衡與性能監(jiān)控。同時(shí)，導(dǎo)入教育云領(lǐng)航中心從 CII公有云同步的實(shí)

38、踐鏡像資源。昶右計(jì)算節(jié)點(diǎn)云運(yùn)算節(jié)點(diǎn)，內(nèi)置CII云虛擬實(shí)踐運(yùn)算中心操作系統(tǒng)。2U 高度，固化千兆電口2個(gè)，萬(wàn)兆光口2個(gè)。云運(yùn)算節(jié)點(diǎn)作為云計(jì)算實(shí)踐環(huán)境的主要載體，運(yùn)行所有學(xué) 生的云計(jì)算課程環(huán)境，并負(fù)責(zé)存儲(chǔ)學(xué)生的實(shí)驗(yàn)過(guò)程。同時(shí)， 運(yùn)算節(jié)點(diǎn)內(nèi)部集成了完整的云計(jì)算應(yīng)用平臺(tái), 在云計(jì)算應(yīng) 用開(kāi)發(fā)課程中，為學(xué)生的實(shí)驗(yàn)環(huán)境提供可調(diào)用的 API。昶星教學(xué)資源包根據(jù)崗位人才發(fā)展路徑圖，提供相應(yīng)的學(xué)習(xí)課程資源部?jī)?nèi) 容，客戶根據(jù)實(shí)際情況選擇適合自己的課程內(nèi)容， 并從教 育云領(lǐng)航中心下載對(duì)應(yīng)的教學(xué)資源（教學(xué)云資源和實(shí)戰(zhàn)云 資源）昶陽(yáng)師資培訓(xùn)通過(guò)集中培訓(xùn)或項(xiàng)目式培訓(xùn)，為高校教師全面而乂深入的 介紹Spark、Hadoop平臺(tái)的構(gòu)建流程，涉及Spark、Hadoop 系統(tǒng)基礎(chǔ)知識(shí)，概念及架構(gòu)，Spark Hadoop頭戰(zhàn)技巧，Spark、Hadoop經(jīng)典案例等技能。網(wǎng)絡(luò)互聯(lián)設(shè)備數(shù)據(jù)中心交換機(jī)（全萬(wàn)兆），1臺(tái)千兆互聯(lián)交換機(jī)，1臺(tái)安全網(wǎng)關(guān)產(chǎn)品，1臺(tái)星云大數(shù)據(jù)