云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)室建設(shè)_第1頁
云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)室建設(shè)_第2頁
云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)室建設(shè)_第3頁
云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)室建設(shè)_第4頁
云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)室建設(shè)_第5頁
已閱讀5頁,還剩22頁未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)室建設(shè)需求一、產(chǎn)品一覽表:序號(hào)貨物名稱數(shù)量(單位)1云計(jì)算服務(wù)器3臺(tái)2大數(shù)據(jù)服務(wù)器4臺(tái)3大數(shù)據(jù)計(jì)算節(jié)點(diǎn)77套4千兆交換機(jī)5臺(tái)5萬兆交換機(jī)1臺(tái)6投影儀1臺(tái)7投影幕布1套8講臺(tái)1套9服務(wù)器機(jī)柜1套10網(wǎng)絡(luò)機(jī)柜1套11電腦桌椅40套12顯示拓展屏2臺(tái)13擴(kuò)聲系統(tǒng)1套14云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)支撐平臺(tái)1套15虛擬桌面環(huán)境試驗(yàn)臺(tái)1套16數(shù)據(jù)分析實(shí)驗(yàn)工具臺(tái)1套17數(shù)據(jù)可視化分析實(shí)驗(yàn)工具臺(tái)1套18實(shí)驗(yàn)教學(xué)管理平臺(tái)1套19大數(shù)據(jù)工程–大數(shù)據(jù)原理與技術(shù)課程資源包1套20大數(shù)據(jù)工程–大數(shù)據(jù)應(yīng)用開發(fā)技術(shù)課程資源包1套21大數(shù)據(jù)工程–Spark技術(shù)與應(yīng)用課程資源包1套22大數(shù)據(jù)工程–數(shù)據(jù)存儲(chǔ)與管理技術(shù)課程資源包1套23云平臺(tái)的安裝部署與使用課程資源包1套24云平臺(tái)的本地儲(chǔ)存管理課程資源包1套25私有云的VPC技術(shù)實(shí)踐課程資源包1套26云平臺(tái)的網(wǎng)絡(luò)管理和實(shí)踐課程資源包1套27云平臺(tái)規(guī)劃運(yùn)維最佳實(shí)踐課程資源包1套28云平臺(tái)的災(zāi)備服務(wù)實(shí)踐課程資源包1套29軟件工程課程資源包1套30靜電地板162平米31綜合布線162平米32窗簾安裝1套二、技術(shù)需求參數(shù)序號(hào)貨物名稱配置、技術(shù)參數(shù)及商務(wù)條款1云計(jì)算服務(wù)器服務(wù)器性能須等同或優(yōu)于下列指標(biāo):1、處理器:不低于2顆Inte18358P,單顆CPU核數(shù)32,主頻2.6GHz;2、內(nèi)存:不低于768GB內(nèi)存(64GB*12),單條內(nèi)存配置不低于64GB;3、硬盤:不低于2塊480GB企業(yè)級(jí)SATASSD硬盤,4塊1.92TB企業(yè)級(jí)SATASSD硬盤;4、陣列卡:1塊12GB/sSASRAID卡,2GB緩存,支持8個(gè)SAS口,PCIe)(FIO);5、網(wǎng)卡:1塊4口千兆網(wǎng)卡,1塊雙口萬兆網(wǎng)卡(光口含模塊);6、800W交流&240V高壓直流電源模塊(GW-R2-白金-輕載高效)(CTO&BTO),AUX信號(hào)電纜-0.35m-(HMB(6*1)1.25)-(UL2835)-(HMB(6*1)1.25),背板電源線-0.33m-(HMB(5*1)3.0)-(UL1007)-(HMB(3*2)3.0);7、保修:3年7×24四小時(shí)現(xiàn)場支持。2大數(shù)據(jù)服務(wù)器服務(wù)器性能須等同或優(yōu)于下列指標(biāo):1、處理器:不低于2顆Intel4314,單顆CPU核數(shù)16,主頻2.4GHz。(響應(yīng)時(shí)提供承諾函,格式見后附)2、內(nèi)存:不低于512GB內(nèi)存(8*64GB),單條內(nèi)存配置不低于64GB;3、硬盤:不低于2塊480GB企業(yè)級(jí)SATASSD硬盤,3塊1.92TB企業(yè)級(jí)SATASSD硬盤;4、陣列卡:1塊12Gb/sSASRAID卡,2GB緩存,支持8個(gè)SAS口,PCIe)(FIO);5、網(wǎng)卡:1塊4口千兆網(wǎng)卡,1塊雙口萬兆網(wǎng)卡(光口含模塊);6、2*800W交流&240V高壓直流電源模塊(GW-R2-白金-輕載高效)(CTO&BTO);AUX信號(hào)電纜-0.35m-(HMB(6*1)1.25)-(UL2835)-(HMB(6*1)1.25);背板電源線-0.33m-(HMB(5*1)3.0)-(UL1007)-(HMB(3*2)3.0);SAS電纜-0.9m-(MiniSAS68P直)-(SAS3.0)-(MiniSASHD72P下彎);6*G52U6038風(fēng)扇模塊(CTO&BTO);7、保修:3年7×24四小時(shí)現(xiàn)場支持。3大數(shù)據(jù)計(jì)算節(jié)點(diǎn)計(jì)算節(jié)點(diǎn)需等同或等同下列指標(biāo)性能:1、處理器:不低于英特爾酷睿I7-12700,12代IntelCPU。(響應(yīng)時(shí)提供承諾函,格式見后附)2、芯片組:英特爾?H670或以上;3、內(nèi)存指標(biāo):不低于16GBDDR4SynchDRAM2933MHz8*2,2個(gè)DIMM插槽,最大支持64GBDDR4-2933SDRAM;4、硬盤:不低于1TSSD固態(tài)硬盤;5、顯卡:730顯卡;6、網(wǎng)卡:主板集成1000M自適應(yīng)以太網(wǎng)卡;7、聲卡和音箱:主板集成聲卡,標(biāo)配內(nèi)置音箱;內(nèi)置降噪軟件;8、鍵盤/鼠標(biāo):無線靜音鍵鼠套裝(與主機(jī)同一品牌);9、主板插槽:不少于1個(gè)PCI,1個(gè)PCIe*1,1個(gè)PCIe*16,2個(gè)M.2插槽;10、端口:USB接口不低于8個(gè)(滿足前置6個(gè)USB3.2或以上);VGA接口,HDMI接口,1個(gè)串口,1個(gè)并口(選配),1個(gè)串口(選配),PS/2端口(選配)11、電源:不低于300W90%能效電源;12、顯示器:23.8"寬屏16:9LED背光液晶顯示器。13、操作系統(tǒng):計(jì)算節(jié)點(diǎn)需配備實(shí)驗(yàn)環(huán)境操作系統(tǒng)。14、云桌面管理軟件:支持教師端一鍵開關(guān)機(jī)、一鍵還原、對(duì)學(xué)生端桌面監(jiān)控、windows/Linux系統(tǒng)鏡像更新。4千兆交換機(jī)交換機(jī)性能需等同或等同下列指標(biāo)性能:1.交換容量≥336Gbps;2.包轉(zhuǎn)發(fā)率≥50Npps;3.24個(gè)千兆電口,4個(gè)千光SFP;4.無風(fēng)扇,自然散熱;5.傳輸速率(Mbps)10/100/1000Mbps;6.交換方式:存儲(chǔ)-轉(zhuǎn)發(fā);7.背板帶寬(Gbps)336Mpps/3.36Tbps;8.包轉(zhuǎn)發(fā)率:51/126Mpps;9.地址表大?。褐С趾诙碝AC地址表,支持端口MAC地址學(xué)習(xí)個(gè)數(shù)設(shè)置功能;10.VLAN功能:支持基于端口的VLAN,支持QinQ,靈活QinQ,支持VoiceVLAN,支持協(xié)議VLAN,支持MACCLAN;11.端口參數(shù):端口結(jié)構(gòu)非模塊化,端口數(shù)28個(gè);12.端口類型:24個(gè)10/100/1000Base-T端口,4個(gè)1000Base-XSFP端口;13.工作溫度(℃):工作環(huán)境溫度:0℃-45℃;14.工作環(huán)境濕度(非凝露):5%~95%。5萬兆交換機(jī)交換機(jī)性能需等同或等同下列指標(biāo)性能:1.交換容量≥2Tbps(2.4T/24T);2.包轉(zhuǎn)發(fā)率≥720Mpps/1260Mpps;3.支持24個(gè)萬兆SFP+,2個(gè)40GEQSFP+,含16個(gè)萬兆多模模塊;4.持MAC表項(xiàng)>128K;5..傳輸速率(Mbps)10/100/1000Mbps;6.交換方式:存儲(chǔ)-轉(zhuǎn)發(fā);7.背板帶寬(Gbps)336Mpps/3.36Tbps;8.包轉(zhuǎn)發(fā)率:51/126Mpps;9.地址表大?。褐С趾诙碝AC地址表,支持端口MAC地址學(xué)習(xí)個(gè)數(shù)設(shè)置功能;10.VLAN功能:支持基于端口的VLAN,支持QinQ,靈活QinQ,支持VoiceVLAN,支持協(xié)議VLAN,支持MACCLAN;11.端口參數(shù):端口結(jié)構(gòu):非模塊化;端口數(shù):不低于28個(gè);端口類型:24個(gè)10/100/1000Base-T端口,4個(gè)1000Base-XSFP端口;工作溫度(℃):工作環(huán)境溫度:0℃-45℃;工作環(huán)境濕度(非凝露):5%~95%。6投影儀1、投影技術(shù):3LCD單鏡頭投影技術(shù);2、液晶板:BrightEra無機(jī)液晶板芯片,長寬比4:3;3、標(biāo)準(zhǔn)分辨率:≥1024*768(2,359,296像素);4、亮度輸出:≥3600流明(ISO國際標(biāo)準(zhǔn));5、變焦:手動(dòng)1.3倍,投影比:1.37:1-1.80:1;6、燈泡功率≤225W高壓汞燈泡;7、燈泡壽命:不低于10000小時(shí)(燈泡模式:低)/6000小時(shí)(燈泡模式:標(biāo)準(zhǔn));8、不低于燈泡2000小時(shí)亮度恒定功能;9、包含長距離的數(shù)據(jù)通信及電源線、信號(hào)放大器。10、包含吊架和安裝。7投影幕布1、顏色:白色;2、尺寸:≥100英寸;3、凈重:≤10kg;4、驅(qū)動(dòng)方式:電動(dòng);5、比例:16:9。8講臺(tái)1、材料:臺(tái)面采用耐劃花材料;臺(tái)下鋼結(jié)構(gòu),進(jìn)行防銹處理后靜電噴塑,具備防盜設(shè)計(jì)。2、尺寸:≥長1200×寬660×高760MM;3、講臺(tái)特點(diǎn):臺(tái)面預(yù)留筆記本電腦、教案位置;右側(cè)設(shè)有抽屜式實(shí)物展臺(tái)放置區(qū);4、講臺(tái)鎖:整個(gè)講臺(tái)用1把鑰匙便能開啟講臺(tái)所有的門。5、地臺(tái):可根據(jù)學(xué)校講壇高度任意選配地臺(tái)。6、安全設(shè)計(jì):講臺(tái)邊角采用圓弧過渡,具有專業(yè)接地保護(hù),防止設(shè)備漏電,確保使用安全。8、包含教師椅1張。9服務(wù)器機(jī)柜42U標(biāo)準(zhǔn)服務(wù)器機(jī)柜,尺寸≥600*1000*2000MM,配機(jī)柜PDU*2個(gè),黑色,符合《網(wǎng)絡(luò)機(jī)柜技術(shù)條件》。10網(wǎng)絡(luò)機(jī)柜42U標(biāo)準(zhǔn)網(wǎng)絡(luò)機(jī)柜,配機(jī)柜PDU*2個(gè),黑色,符合《網(wǎng)絡(luò)機(jī)柜技術(shù)條件》。11電腦桌椅1.規(guī)格:≥1600*1200*750MM。2.面板,用材:E1級(jí)具高密度三聚氰氨板,具有防火、阻燃、防腐蝕、耐磨等特點(diǎn)(符合環(huán)保標(biāo)準(zhǔn));符合國際ISO標(biāo)準(zhǔn)驗(yàn)正,防酸、防堿、防潮、防蛀性強(qiáng),承重力強(qiáng)、尺寸穩(wěn)定性好,表面張力一致,不易變形。3.所有方管具有整體焊接牢固、焊接點(diǎn)均勻、耐磨抗刮花(內(nèi)置走線槽)。4.配學(xué)生椅2張。12顯示擴(kuò)展不低于60寸電視機(jī),帶電視機(jī)吊架及安裝,HDMI線,HDMI分配器。13擴(kuò)聲系統(tǒng)擴(kuò)聲系統(tǒng)應(yīng)包含如下設(shè)備:1、2支三模合一高品質(zhì)無線教學(xué)話筒;2、1支有線話簡;3、2支吊咪;4、1套音頻處理器;5、4只高保真專業(yè)語言音箱。14云計(jì)算與大數(shù)據(jù)實(shí)驗(yàn)支撐平臺(tái)1.平臺(tái)支持學(xué)生或教師保存當(dāng)前實(shí)驗(yàn)環(huán)境。支持學(xué)生或教師在下次實(shí)驗(yàn)時(shí),重新恢復(fù)之前保存的實(shí)驗(yàn)環(huán)境。支持實(shí)驗(yàn)所用到的虛擬機(jī)、容器的備份和還原。2.平臺(tái)支持以圖形化界面和命令行界面兩種形式提供實(shí)驗(yàn)環(huán)境,可隨時(shí)切換兩種界面。3.平臺(tái)支持一鍵獲取剪貼板內(nèi)容功能,可一鍵獲取實(shí)驗(yàn)環(huán)境中剪貼板的內(nèi)容,并可將實(shí)驗(yàn)結(jié)果粘貼到報(bào)告編輯區(qū)域中。4.平臺(tái)支持本地環(huán)境與實(shí)驗(yàn)環(huán)境之間的文件傳輸。5.支持課程編排、學(xué)生信息導(dǎo)入、實(shí)驗(yàn)報(bào)告歸檔等功能。6.為教師提供作業(yè)發(fā)布、實(shí)驗(yàn)指導(dǎo)、在線演示實(shí)驗(yàn)、實(shí)驗(yàn)環(huán)境錄屏等功能。7.為教師提供對(duì)學(xué)生實(shí)驗(yàn)報(bào)告進(jìn)行批改、評(píng)分及成績管理等功能。8.教師批改實(shí)驗(yàn)報(bào)告后,可給學(xué)生的實(shí)驗(yàn)報(bào)告進(jìn)行打分,支持學(xué)生成績的批量查看和導(dǎo)出。9.為學(xué)生提供查看實(shí)驗(yàn)內(nèi)容、編寫實(shí)驗(yàn)報(bào)告、上傳并提交等報(bào)告、查看實(shí)驗(yàn)結(jié)果、在線完成實(shí)驗(yàn)等功能。10.平臺(tái)支持根據(jù)客觀題的作答情況,推算出學(xué)生實(shí)驗(yàn)報(bào)告的完成質(zhì)量。11.平臺(tái)支持學(xué)生或教師在線編寫實(shí)驗(yàn)報(bào)告,提供如字體大小、加粗、傾斜等等常用的字體設(shè)置,支持圖像等多媒體數(shù)據(jù)的導(dǎo)入。12.平臺(tái)支持對(duì)學(xué)生或教師完成每一小節(jié)實(shí)驗(yàn)所使用時(shí)間進(jìn)行統(tǒng)計(jì),該時(shí)間以學(xué)生創(chuàng)建實(shí)驗(yàn)環(huán)境為起點(diǎn),學(xué)生完成實(shí)驗(yàn)報(bào)告并驗(yàn)證實(shí)驗(yàn)結(jié)果正確為終點(diǎn)進(jìn)行統(tǒng)計(jì)。13.平臺(tái)支持對(duì)學(xué)生或教師對(duì)每一本實(shí)驗(yàn)手冊(cè)中的每一個(gè)小節(jié)構(gòu)建里程碑式管理,記錄學(xué)生完成情況,并顯示已完成小節(jié)的耗時(shí)。14.提供云計(jì)算/大數(shù)據(jù)的實(shí)訓(xùn)環(huán)境,包括課程所需的虛擬機(jī)或容器、代碼和平臺(tái)開發(fā)工具等供教學(xué)使用,提供學(xué)生實(shí)訓(xùn)報(bào)告管理和學(xué)生云計(jì)算/大數(shù)據(jù)的課程實(shí)驗(yàn)等功能。需提供軟件功能截圖。15.教師可遠(yuǎn)程查看學(xué)生實(shí)驗(yàn)的完成情況,學(xué)生在實(shí)驗(yàn)中遇到問題時(shí)可向老師進(jìn)行提問。教師可遠(yuǎn)程協(xié)助學(xué)生進(jìn)行實(shí)驗(yàn),支持實(shí)驗(yàn)過程的在線解答。16.實(shí)驗(yàn)數(shù)據(jù)文檔和數(shù)據(jù)庫具備定時(shí)備份功能,可設(shè)置自動(dòng)備份和手動(dòng)備份。15虛擬桌面環(huán)境實(shí)驗(yàn)臺(tái)1.支持基于瀏覽器B/S模式的“一鍵式”訪問Linux的虛擬桌面環(huán)境,可提供Linux桌面和終端命令行操作,并可實(shí)現(xiàn)Linux系統(tǒng)管理,數(shù)據(jù)創(chuàng)建、文件管理等,包括但不限定于:Linux基礎(chǔ)操作命令;Linux軟件包安裝,刪除,配置和管理;Linux磁盤、內(nèi)存與進(jìn)程分析。需提供軟件功能截圖。2.虛擬桌面試驗(yàn)臺(tái)需提供的功能包括:1)支持重置實(shí)驗(yàn)環(huán)境,即實(shí)驗(yàn)內(nèi)容或?qū)嶒?yàn)環(huán)境被更改后,可通過重置功能恢復(fù)到起始狀態(tài)2)支持實(shí)時(shí)保存當(dāng)前實(shí)驗(yàn)環(huán)境,即個(gè)人數(shù)據(jù),系統(tǒng)數(shù)據(jù),配置數(shù)據(jù),以及虛擬實(shí)驗(yàn)臺(tái)上安裝的軟件等,都會(huì)被自動(dòng)保存并生成環(huán)境備份。保存成功后,學(xué)生可隨時(shí)選擇保存的環(huán)境備份,繼續(xù)學(xué)習(xí)。系統(tǒng)支持老師可自行設(shè)定環(huán)境備份數(shù)量上限。3)虛擬桌面實(shí)驗(yàn)臺(tái)需支持SSH客戶端直連訪問:a.老師或?qū)W生在本地安裝SSH客戶端后,可直接登錄自己的虛擬桌面實(shí)驗(yàn)室臺(tái)環(huán)境,并進(jìn)行相應(yīng)的系統(tǒng)操作;b.每個(gè)賬號(hào)建立的SSH鏈接需相互獨(dú)立的,并提供連包括但不限于IP地址、用戶名、密碼、端口號(hào)等,所有密碼和端口號(hào)是隨機(jī)產(chǎn)生;c.提供學(xué)生SSH客戶端登錄的詳細(xì)說明指導(dǎo),并提供幫助示例。4)虛擬桌面實(shí)驗(yàn)臺(tái)的共享和協(xié)作a.提供兩人及以上的多人虛擬桌面實(shí)驗(yàn)臺(tái)協(xié)作共享功能,并支持只讀觀看和協(xié)作兩種模式,自動(dòng)生成鏈接,復(fù)制分享后即可進(jìn)行協(xié)作共享;b.支持觀看模式中,支持多人在線實(shí)時(shí)觀看虛擬桌面實(shí)驗(yàn)臺(tái)的操作及內(nèi)容,但是不可進(jìn)行操作,即支持老師進(jìn)行在線實(shí)驗(yàn)操作,一個(gè)或多個(gè)學(xué)生可遠(yuǎn)程觀看老師操作步驟等應(yīng)用場景;c.支持協(xié)作模式中,支持多人在線實(shí)時(shí)觀看虛擬桌面實(shí)驗(yàn)臺(tái)的操作及內(nèi)容,并可進(jìn)行演示操作,即支持老師在學(xué)生自己的虛擬桌面實(shí)驗(yàn)環(huán)境上進(jìn)行實(shí)時(shí)的演示操作等應(yīng)用場景。16數(shù)據(jù)分析實(shí)驗(yàn)工具臺(tái)1.兼容Notebook的大數(shù)據(jù)分析工具:JupyterNotebook是一種數(shù)據(jù)科學(xué)分析的工具平臺(tái),能讓用戶將說明文本、數(shù)學(xué)方程、代碼和可視化內(nèi)容全部組合到一個(gè)易于共享的文檔中。實(shí)驗(yàn)環(huán)境提供學(xué)生Notebook數(shù)據(jù)分析和開發(fā)工具平臺(tái),其支持?jǐn)?shù)據(jù)清理、數(shù)據(jù)整理、數(shù)據(jù)爬蟲、數(shù)據(jù)可視化、機(jī)器學(xué)習(xí)、數(shù)據(jù)分析、深度學(xué)習(xí)等大數(shù)據(jù)開發(fā)以及數(shù)據(jù)分析的工作。平臺(tái)包含但不限于以下功能:1)支持瀏覽器中直接實(shí)現(xiàn)文件的上載。用戶可在實(shí)驗(yàn)環(huán)境中,直接上傳數(shù)據(jù)集等文件,所有文件被自動(dòng)保存在學(xué)生賬號(hào)的個(gè)人存儲(chǔ)空間中,可隨時(shí)訪問和更改。2)支持瀏覽器中實(shí)驗(yàn)文件和目錄的管理,對(duì)文件和目錄可以進(jìn)行重命名,刪除,移動(dòng)等操作,并支持可以創(chuàng)建新的目錄和子目錄。3)支持?jǐn)?shù)據(jù)集的實(shí)時(shí)掛載,即在學(xué)生進(jìn)行大數(shù)據(jù)分析相關(guān)的使用學(xué)習(xí)中,可實(shí)時(shí)掛載私有和公共數(shù)據(jù)集,自動(dòng)導(dǎo)入到實(shí)驗(yàn)環(huán)境中供數(shù)據(jù)分析和實(shí)驗(yàn)教學(xué)使用。數(shù)據(jù)集包括個(gè)人數(shù)據(jù)集、公開數(shù)據(jù)集、預(yù)置數(shù)據(jù)集至少三種分類。4)支持重置實(shí)驗(yàn)環(huán)境,重置實(shí)驗(yàn)內(nèi)容,即實(shí)驗(yàn)內(nèi)容或?qū)嶒?yàn)環(huán)境被更改后,可通過重置功能恢復(fù)到起始狀態(tài)。5)支持實(shí)時(shí)保存當(dāng)前實(shí)驗(yàn)環(huán)境,即個(gè)人數(shù)據(jù),系統(tǒng)數(shù)據(jù),配置數(shù)據(jù),以及虛擬實(shí)驗(yàn)臺(tái)上安裝的軟件等,都會(huì)被自動(dòng)保存并生成環(huán)境備份。保存成功后,學(xué)生可隨時(shí)選擇保存的環(huán)境備份,繼續(xù)學(xué)習(xí)。系統(tǒng)支持老師可自行設(shè)定環(huán)境備份數(shù)量上限。支持實(shí)驗(yàn)環(huán)境的實(shí)時(shí)保存,并生成備份。6)支持圖形界面和字符界面兩種使用方式,并可實(shí)現(xiàn)“一鍵”自由切換的功能。7)實(shí)驗(yàn)環(huán)境需支持R、Python、Java、Javas.c.r.i.p.t、C、C++、BashShel、sql等編程語言,并可自行安裝、卸載、更新類庫操作。8)實(shí)驗(yàn)環(huán)境平臺(tái)預(yù)裝算法性能分析類工具,可對(duì)實(shí)驗(yàn)代碼進(jìn)行實(shí)時(shí)分析、比較,并展示性能分析結(jié)果。9)實(shí)驗(yàn)內(nèi)容的保存?zhèn)浞?,在退出?shí)驗(yàn)后,下次可選擇繼續(xù)保存的實(shí)驗(yàn)10)提供代碼片段庫功能,可直接“一鍵式”插入Notebook內(nèi)容,并運(yùn)行。11)學(xué)生可在線填寫實(shí)驗(yàn)報(bào)告,可保存,導(dǎo)出實(shí)驗(yàn)報(bào)告內(nèi)容。實(shí)驗(yàn)報(bào)告在線編輯器要求支持基于Markdown語言的富文本編輯,并提供在線的Markdown語法簡介幫助,報(bào)告中可插入圖片,鏈接等。支持報(bào)告預(yù)覽,并進(jìn)行全屏最大化進(jìn)行編輯。學(xué)生在保存完報(bào)告后,可以進(jìn)行提交,或?qū)С霾⑾螺d實(shí)驗(yàn)報(bào)告,12)實(shí)驗(yàn)環(huán)境支持圖形界面和字符界面兩種方式,并可以自由切換。在字符界面中可直接進(jìn)行Python命令行的代碼操作,同時(shí)也支持雙屏顯示,即兩個(gè)界面可實(shí)現(xiàn)并排顯示。13)實(shí)驗(yàn)環(huán)境支持普通模式和沉浸模式兩種視圖模式,提高實(shí)驗(yàn)學(xué)習(xí)體驗(yàn)和效果。14)實(shí)驗(yàn)環(huán)境需內(nèi)部預(yù)置PythonPackageRepository服務(wù),且支持本地部署,即無互聯(lián)網(wǎng)連接情況下,仍然支撐python類庫的下載和安裝,學(xué)生實(shí)驗(yàn)課正常進(jìn)行和繼續(xù)。15)支持Jupyter實(shí)驗(yàn)在線實(shí)時(shí)輔導(dǎo)與協(xié)作功能。學(xué)生端可以自主創(chuàng)建分享連接,老師端通過學(xué)生的分享連接,可以直接打開學(xué)生的在線實(shí)時(shí)JupyterNotebook實(shí)驗(yàn)內(nèi)容和環(huán)境,同時(shí)通過頁面分屏的方式,提供老師與學(xué)生端的協(xié)作、輔導(dǎo),實(shí)現(xiàn)在線高效率的在線實(shí)驗(yàn)內(nèi)容、代碼、數(shù)據(jù)集等的協(xié)同。2.基于瀏覽器直接訪問的Rstudio工具:實(shí)驗(yàn)環(huán)境已經(jīng)預(yù)裝和配置了Hadoop,Spark的大數(shù)據(jù)運(yùn)行環(huán)境,包括:可直接調(diào)用和使用Hadoop的基礎(chǔ)組件,并直接進(jìn)行SparkR相關(guān)的管理和開發(fā),幫助用戶省去大量的安裝部署,配置以及維護(hù)的工作。3.數(shù)據(jù)科學(xué)計(jì)算框架:數(shù)據(jù)分析工具預(yù)裝大數(shù)據(jù)、人工智能計(jì)算等支持的各類計(jì)算框架與類庫,包括但不限于:a)shell環(huán)境:支持基本的shell命令,如vim、tar、unzip、ssh、scp、mv等,軟件包管理和環(huán)境管理工具conda、python包安裝工具pip;b)python環(huán)境:支持python3.7及以上;c)實(shí)驗(yàn)環(huán)境同時(shí)支持R、C、C++、JavaS.c.r.i.p.t、Java、SQL語言引擎運(yùn)行;d)支持開源機(jī)器學(xué)習(xí)框架:numpy、sklearn、pandas、seaborn、missingno、scipy、statsmodels、xgboost等;e)支持開源深度學(xué)習(xí)框架:pytorch-cpu、Keras、TensorFlow;f)支持計(jì)算機(jī)視覺框架:OpenCV、Pillow、scikit-image等;g)支持自然語言處理框架:jieba、gensim、spacy、scikit-crfsuite、nltk、pyaudio、pyltp;h)支持強(qiáng)化學(xué)習(xí):gym;i)支持語音識(shí)別框架:librosa、python-speech-features、hmmlearnj)支持網(wǎng)絡(luò)框架:requests、urllib3、tornado、flask、beautifulsoup4;k)支持可視化框架:matplotlib、graphviz、mglearn、tensorboard、pyechart、seaborn、Altair、bokeh;l)支持?jǐn)?shù)據(jù)庫:pymysql、sqlalchemy;m)支持其他:certifi、chardet、Cython、future、gevent、h5py、ipython、ipywidgets、json5、jupyter、lxml、Markdown、networkx、pycurl、pydot、pyyaml、six、qtpy、zhconv。17數(shù)據(jù)可視化分析實(shí)驗(yàn)工具臺(tái)提供一個(gè)可視化數(shù)據(jù)分析、數(shù)據(jù)建模的工具,基于可視化組件,簡單的和互動(dòng)的方式,實(shí)現(xiàn)快速的創(chuàng)建大數(shù)據(jù)分析及應(yīng)用。大數(shù)據(jù)分析應(yīng)用的創(chuàng)建過程,只需通過拖放在畫布上一樣容易,同時(shí)可以連接任何外部的計(jì)算引擎(YARN,MESOS)或綁定到一個(gè)本地的Spark計(jì)算引擎上,包括具體功能:1)支持的數(shù)據(jù)管理組件:-基于notebook的數(shù)據(jù)采集;-從指定的云端文件或者遠(yuǎn)程數(shù)據(jù)庫讀取數(shù)據(jù);-直接從一個(gè)指定的目錄讀取數(shù)據(jù)文件;-寫入數(shù)據(jù)到云端文件或者遠(yuǎn)程數(shù)據(jù)庫;-直接將結(jié)果數(shù)據(jù)寫入到一個(gè)指定的目錄并生成文件。2)支持的數(shù)據(jù)預(yù)處理組件:-通過SQL或者Python進(jìn)行的數(shù)據(jù)提煉和預(yù)處理;-針對(duì)不同類型的數(shù)據(jù)格式轉(zhuǎn)化;-基于數(shù)據(jù)特征的數(shù)據(jù)轉(zhuǎn)換和預(yù)處理;-基于文本特征標(biāo)識(shí)的數(shù)據(jù)格式和內(nèi)容轉(zhuǎn)換。3)支持的機(jī)器學(xué)習(xí)算法組件:-回歸算法;-分類算法;-聚類算法;-特征選擇;-推薦算法;-降維算法;-模型評(píng)估。用戶只需要把需要的組件從左邊的組件欄中拖拽到右手邊的畫布上,然后對(duì)每個(gè)組件進(jìn)行簡單的配置,底層的數(shù)據(jù)計(jì)算引擎Spark已經(jīng)預(yù)裝配置完成,所以點(diǎn)擊“Run”運(yùn)行后,即可創(chuàng)建大數(shù)據(jù)應(yīng)用,并快速得到運(yùn)行的結(jié)果。18實(shí)驗(yàn)教學(xué)管理平臺(tái)提供“一站式”的教學(xué)全過程的管理,包括班級(jí)、學(xué)生、課程、實(shí)驗(yàn)、資源庫等統(tǒng)一管理,并提供學(xué)生的學(xué)習(xí)全過程的最終,統(tǒng)計(jì),并對(duì)學(xué)習(xí)結(jié)果等實(shí)現(xiàn)智能統(tǒng)計(jì)和分析,主要功能如下:1.班級(jí)的管理:(1)支持添加新班級(jí),支持名稱、學(xué)院、系別、專業(yè)、管理員郵箱、管理員電話等信息的錄入,并可設(shè)置一個(gè)或多位老師給新建的班級(jí)。(2)支持添加學(xué)生,支持院系,專業(yè),學(xué)號(hào),姓名,郵箱,電話等信息的錄入。支持批量學(xué)生信息的導(dǎo)入,提供學(xué)生批量導(dǎo)入的模板。(3)支持學(xué)生信息的查詢、編輯、更改、或刪除,可重置學(xué)生登錄密碼,或從班級(jí)移除學(xué)生等操作。2.實(shí)驗(yàn)管理:(1)支持老師自定義新建實(shí)驗(yàn),可選擇大數(shù)據(jù)分析JupyterNotebook和虛擬桌面兩類實(shí)驗(yàn)環(huán)境,并提供自主創(chuàng)建和模板導(dǎo)入創(chuàng)建兩種模式。新建實(shí)驗(yàn)時(shí),可設(shè)置實(shí)驗(yàn)名稱、實(shí)驗(yàn)描述、實(shí)驗(yàn)學(xué)時(shí)、實(shí)驗(yàn)難易程度,以及實(shí)驗(yàn)運(yùn)行時(shí)需要配置的計(jì)算資源,包括CPU數(shù)量、內(nèi)存數(shù)量、是否使用GPU等。新建實(shí)驗(yàn)過程中,老師無需進(jìn)行任何容器鏡像的本地創(chuàng)建、打包、上傳等操作,僅需對(duì)實(shí)驗(yàn)內(nèi)容進(jìn)行操作和配置。需提供軟件功能截圖。(2)模板導(dǎo)入創(chuàng)建模式中,老師可選擇預(yù)置實(shí)驗(yàn)做為模板,選擇導(dǎo)入后預(yù)置實(shí)驗(yàn)名稱、實(shí)驗(yàn)步驟、實(shí)驗(yàn)描述、實(shí)驗(yàn)環(huán)境、實(shí)驗(yàn)數(shù)據(jù)等被自動(dòng)導(dǎo)入新建實(shí)驗(yàn)中,老師可對(duì)實(shí)驗(yàn)所有信息和內(nèi)容等進(jìn)行編輯、修改、增加等二次開發(fā),根據(jù)實(shí)驗(yàn)的需要,老師可掛載或上傳數(shù)據(jù)集文件到新建實(shí)驗(yàn)中,在完成保存后即可發(fā)布使用。(3)自主創(chuàng)建模式中,老師可選擇兩種實(shí)驗(yàn)環(huán)境,虛擬桌面環(huán)境或Jupyter環(huán)境,可對(duì)實(shí)驗(yàn)內(nèi)容進(jìn)行全定制化操作,包括實(shí)驗(yàn)名稱、實(shí)驗(yàn)步驟、實(shí)驗(yàn)描述、實(shí)驗(yàn)環(huán)境、實(shí)驗(yàn)數(shù)據(jù)等,要求支持BashShell,Java,Python,C,C++,Javas.c.r.i.p.t等語言的運(yùn)行示例代碼,所有實(shí)驗(yàn)步驟,可通過托拽的方式自由編排、調(diào)整實(shí)驗(yàn)步驟順序。無需制作、上傳容器鏡像等方式實(shí)現(xiàn)新建實(shí)驗(yàn)。實(shí)驗(yàn)支持步驟添加,步驟內(nèi)容支持文字描述,代碼,圖片等。(4)支持預(yù)置實(shí)驗(yàn)和自建實(shí)驗(yàn)的列表查詢,包括實(shí)驗(yàn)名稱、實(shí)驗(yàn)簡介、創(chuàng)建時(shí)間、更新時(shí)間、創(chuàng)建人等信息,并可對(duì)實(shí)驗(yàn)進(jìn)行在線編輯,刪除等操作。(5)支持實(shí)驗(yàn)報(bào)告模板,老師可添加自定義的實(shí)驗(yàn)報(bào)告模板,包括實(shí)驗(yàn)報(bào)告的名稱、格式以及內(nèi)容等,完成后發(fā)布到選定的實(shí)驗(yàn)課程中。學(xué)生在實(shí)驗(yàn)課程學(xué)習(xí)時(shí),實(shí)驗(yàn)報(bào)告模板會(huì)自動(dòng)裝載,根據(jù)實(shí)驗(yàn)報(bào)告模板的內(nèi)容,學(xué)生進(jìn)行填寫、保存并提交實(shí)驗(yàn)報(bào)告。支持附件上傳,教師可添加實(shí)驗(yàn)報(bào)告WORD模板供學(xué)生下載。(6)自建虛擬桌面實(shí)驗(yàn)支持創(chuàng)建過程查看,包括創(chuàng)建中,保存中,推送中,完成四個(gè)狀態(tài)查看桌面實(shí)驗(yàn)創(chuàng)建狀態(tài)。3.課程管理:(1)支持新建課程,提供課程名稱、難度、課程圖片、課程描述等。課程內(nèi)容可選擇預(yù)置實(shí)驗(yàn)和自建實(shí)驗(yàn),并進(jìn)行自由順序編排,組合創(chuàng)建新的課程。(2)支持新建課程中可以添加視頻、添加課件、添加習(xí)題功能,并可選擇預(yù)置課程配套的視頻、課件以及在線題庫中的習(xí)題,并進(jìn)行自由順序編排,組合創(chuàng)建新的課程。(3)新建課程中,要求支持設(shè)置是否強(qiáng)制實(shí)驗(yàn)順序功能,即要求學(xué)生需按照順序進(jìn)行實(shí)驗(yàn),并且要求根據(jù)實(shí)驗(yàn)難易程度和考察重點(diǎn)不同,支持是否允許學(xué)生粘貼代碼功能,提高學(xué)習(xí)實(shí)驗(yàn)效率。(4)自建課程可支持公開或私有兩種模式,若設(shè)置為私有模式,即課程發(fā)布時(shí),可指定到一個(gè)或多個(gè)班級(jí),僅指定的班級(jí)學(xué)生可訪問學(xué)習(xí)。若設(shè)置為公有模式,即課程發(fā)布后,所有班級(jí)的學(xué)生均可進(jìn)行訪問學(xué)習(xí)。(5)新建自制課程需支持視頻,課件等配套資源,可支持直接上傳視頻文件、課件文件,或從資源庫中選擇相應(yīng)的文件。(6)支持課程列表查詢,包括課程名稱、課程簡介、發(fā)布班級(jí)、課程學(xué)時(shí)、創(chuàng)建時(shí)間等信息,可對(duì)課程內(nèi)容、實(shí)驗(yàn)列表、視頻資源、課件等進(jìn)行增加、更改、刪除等操作。(7)提供建課程體系功能,支持將一門或多門課程進(jìn)行組合,創(chuàng)建新的課程體系,包括課程體系名稱,描述,標(biāo)簽等基本信息,并通過不同階段進(jìn)行系統(tǒng)化的課程組合,并提供“闖關(guān)模式”的設(shè)置,選中則按照任務(wù)階段進(jìn)行學(xué)習(xí),解鎖當(dāng)前階段才可開啟下一階段。(8)支撐創(chuàng)建課程時(shí)關(guān)聯(lián)相關(guān)的實(shí)訓(xùn)項(xiàng)目,并可在課程展示界面查看所相關(guān)的實(shí)訓(xùn)項(xiàng)目。4.學(xué)習(xí)管理:(1)提供實(shí)驗(yàn)報(bào)告列表,通過實(shí)驗(yàn)名稱,學(xué)生賬號(hào),班級(jí),提交時(shí)間,分?jǐn)?shù)等進(jìn)行排序??稍诰€評(píng)閱,批改,駁回實(shí)驗(yàn)報(bào)告,可批量導(dǎo)出實(shí)驗(yàn)報(bào)告的評(píng)閱匯總結(jié)果,可自動(dòng)生成xls格式文件供下載??膳看虬鼘W(xué)生實(shí)驗(yàn)報(bào)告包,自動(dòng)生成zip文件供下載,每個(gè)學(xué)生的實(shí)驗(yàn)報(bào)告以word文檔的方式保存。(2)提供學(xué)生學(xué)習(xí)進(jìn)度的管理,可根據(jù)班級(jí),課程,以及實(shí)驗(yàn),對(duì)實(shí)驗(yàn)完成進(jìn)度進(jìn)行統(tǒng)一的查詢,并自動(dòng)計(jì)算和顯示課程平均進(jìn)度,已完成比例,未完成比例等可視化統(tǒng)計(jì)結(jié)果。5.資源庫的管理:支持各種類型資源庫的統(tǒng)一集中管理,支持視頻,課件,數(shù)據(jù)集,手冊(cè)等教學(xué)資源庫的創(chuàng)建,編輯和統(tǒng)一集中的管理,為自建實(shí)驗(yàn)、實(shí)驗(yàn)課程包提供基礎(chǔ)素材庫,支持獨(dú)立文件夾保存,并提供缺省共享文件夾,可供所有老師創(chuàng)建實(shí)驗(yàn)使用。支持“復(fù)制鏈接”復(fù)制資源庫中資源的訪問地址,可供教師在自建實(shí)驗(yàn)等其他功能中使用。6.智能學(xué)情分析:1)總體分析:可供管理員整體查看班級(jí)學(xué)習(xí)情況和教師教學(xué)情況。支持查看課程總數(shù),實(shí)驗(yàn)總數(shù),視頻總數(shù),課件總數(shù),試卷總數(shù)。支持對(duì)平臺(tái)課訪問量的統(tǒng)計(jì)并進(jìn)行柱狀圖展示,并且列出訪問量前十的課程以及訪問次數(shù)。支持對(duì)班級(jí)中學(xué)生人均學(xué)習(xí)時(shí)長的統(tǒng)計(jì)并進(jìn)行柱狀圖展示,并列出人均時(shí)長最多的前十個(gè)班級(jí)以及對(duì)應(yīng)的學(xué)習(xí)時(shí)長。支持教師教學(xué)情況的分析。對(duì)教師的自建課程、發(fā)布習(xí)題、發(fā)布考試等教學(xué)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析并進(jìn)行圖表展示。列出教學(xué)數(shù)據(jù)前十的教師以及教學(xué)數(shù)據(jù)。圖表分析的時(shí)間快捷支持近1周,近1月,近2月篩選,也支持自定義時(shí)間段范圍篩選。2)自建課程分析:可供教師查看學(xué)生對(duì)自建課程的學(xué)習(xí)情況。支持對(duì)自建課程總數(shù)、實(shí)驗(yàn)總數(shù)、視頻總數(shù)、課件總數(shù)、習(xí)題總數(shù)的數(shù)據(jù)概覽。可選擇自建課程查看該課程各個(gè)班級(jí)的學(xué)習(xí)概況:包括班級(jí)人數(shù),該課程學(xué)習(xí)人數(shù),人均學(xué)習(xí)時(shí)長。學(xué)生詳情:支持對(duì)實(shí)驗(yàn)完成進(jìn)度、總學(xué)習(xí)時(shí)長、實(shí)驗(yàn)報(bào)告提交數(shù)、報(bào)告平均分進(jìn)行表格展示。支持查看單個(gè)學(xué)生所有實(shí)驗(yàn)的實(shí)驗(yàn)進(jìn)度和報(bào)告完成情況。實(shí)驗(yàn)報(bào)告分析:對(duì)每個(gè)實(shí)驗(yàn)的最高分、最低分、平均分進(jìn)行柱狀圖展示,可查看所有學(xué)生對(duì)該課程下所有實(shí)驗(yàn)的報(bào)告評(píng)閱情況和分?jǐn)?shù)并支持EXCEL格式導(dǎo)出。3)預(yù)置課程分析:可供教師查看學(xué)生對(duì)預(yù)置課程的學(xué)習(xí)情況。支持對(duì)預(yù)置課程總數(shù)、實(shí)驗(yàn)總數(shù)、視頻總數(shù)、課件總數(shù)、習(xí)題總數(shù)的數(shù)據(jù)概覽。按班級(jí)中學(xué)生對(duì)課程的參與度對(duì)課程進(jìn)行排序,可查看學(xué)習(xí)人數(shù)占比,視頻播放總次數(shù),課件學(xué)習(xí)總次數(shù),實(shí)驗(yàn)報(bào)告對(duì)評(píng)閱/提交數(shù)。支持對(duì)沒們課程進(jìn)行詳情分析:該課程近一周、一個(gè)月、兩個(gè)月或自定義時(shí)間段內(nèi)學(xué)生在線情況的折線統(tǒng)計(jì),支持對(duì)每個(gè)學(xué)生的實(shí)驗(yàn)學(xué)習(xí)時(shí)長,視頻學(xué)習(xí)時(shí)長,實(shí)驗(yàn)完成的的表格查看,并支持EXCEL格式導(dǎo)出。實(shí)驗(yàn)報(bào)告分析:對(duì)每個(gè)實(shí)驗(yàn)的最高分、最低分、平均分進(jìn)行柱狀圖、餅圖等方式展示,可查看所有學(xué)生對(duì)該課程下所有實(shí)驗(yàn)的報(bào)告評(píng)閱情況和分?jǐn)?shù)并支持EXCEL格式導(dǎo)出。4)教學(xué)結(jié)果分析-學(xué)生成績分析:1、測驗(yàn)分析:可對(duì)學(xué)生的所有作業(yè),考試,編程進(jìn)行分析。分析詳情包括對(duì)作業(yè),考試的分?jǐn)?shù)圖表展示,已批閱數(shù)統(tǒng)計(jì)。對(duì)學(xué)生歷屆編程題的通過率圖表展示,并支持EXCEL導(dǎo)出。2、成績概覽:提供根據(jù)學(xué)生以往的作業(yè),試卷,編程等測驗(yàn),教師可自定義設(shè)置一定比例,最終得出班級(jí)成員在整個(gè)教學(xué)過程中成績的功能。默認(rèn)提供“平時(shí)成績”,“考試成績”,“課程實(shí)驗(yàn)報(bào)告”三項(xiàng)考核項(xiàng)。教師可增加自定義考核項(xiàng),并支持自定義考核項(xiàng)成績導(dǎo)入。設(shè)置考核項(xiàng)比例與具體測驗(yàn)之后可一鍵計(jì)算學(xué)生最終成績,并支持EXCEL導(dǎo)出。7.通知公告:(1)提供實(shí)驗(yàn)平臺(tái)內(nèi)系統(tǒng)通知,提供自動(dòng)推送,用戶閱讀,刪除等功能。通知包括普通通知和教學(xué)通知,普通通知為平臺(tái)操作記錄通知,如實(shí)驗(yàn)報(bào)告下載完成等,教學(xué)通知為學(xué)生提交作業(yè),評(píng)論區(qū)回復(fù)等。(2)提供公告功能:支持老師針對(duì)學(xué)生發(fā)布相關(guān)公告信息,如作業(yè)、考試、實(shí)驗(yàn)報(bào)告等提交截止日期通知等。公告范圍可設(shè)置全部班級(jí)或部分班級(jí),支持滾動(dòng)展示,公告內(nèi)容支持markdown格式編寫,支持圖片上傳。公告支持第三方網(wǎng)頁鏈接跳轉(zhuǎn)。公告列表可支持公告標(biāo)題,創(chuàng)建類型,創(chuàng)建者,公告狀態(tài)和修改時(shí)間等字段查看。公告操作支持編輯,預(yù)覽,撤回,刪除功能。8.系統(tǒng)日志管理:管理員角色可對(duì)教師端所有資源進(jìn)行刪除的功能,刪除某個(gè)資源之后會(huì)有操作記錄可查看。其他教師角色賬號(hào)的創(chuàng)建課程,實(shí)驗(yàn),試卷等都會(huì)生成操作記錄。管理員可以看到所有用戶的操作記錄,以支持進(jìn)行相關(guān)審計(jì)與核查。19大數(shù)據(jù)工程–大數(shù)據(jù)原理與技術(shù)1.實(shí)驗(yàn)?zāi)康囊螅簽閷W(xué)生提供Hadoop基礎(chǔ)原理的實(shí)驗(yàn)學(xué)習(xí),成功完成所有實(shí)驗(yàn)后,將掌握Hadoop技術(shù)的部署,安裝,管理,維護(hù)以及開發(fā)編程語言的基本使用方法,可以獨(dú)立進(jìn)行Hadoop環(huán)境的實(shí)施和維護(hù),并能夠能夠獨(dú)立開發(fā)基于Hadoop技術(shù)的大數(shù)據(jù)應(yīng)用。2.實(shí)驗(yàn)內(nèi)容要求包括:《數(shù)據(jù)科學(xué)常用工具》實(shí)驗(yàn)課程:實(shí)驗(yàn)1-Eclipse的安裝與使用;實(shí)驗(yàn)2-IDEA的安裝與使用;實(shí)驗(yàn)3-Pycharm的安裝與使用;實(shí)驗(yàn)4-Anaconda的安裝與使用?!禜adoop原理與技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:Hadoop單點(diǎn)的部署,安裝和管理;實(shí)驗(yàn)2:Hadoop集群的部署,安裝和管理;實(shí)驗(yàn)3:HDFS的管理和使用;實(shí)驗(yàn)4:YARN的安裝部署和管理;實(shí)驗(yàn)5:Hbase的安裝部署;實(shí)驗(yàn)6:Zookeeper單點(diǎn)和集群的部署,安裝和管理;實(shí)驗(yàn)7:Hive的安裝部署和管理;實(shí)驗(yàn)8:Sqoop的安裝部署;實(shí)驗(yàn)9:Pig的安裝和部署;實(shí)驗(yàn)10:Mahout的安裝與部署;實(shí)驗(yàn)11:ApacheStorm的安裝和部署;實(shí)驗(yàn)12:ApacheAmbari安裝,配置,管理;實(shí)驗(yàn)13:ApacheChukwa的安裝,部署和使用;實(shí)驗(yàn)14:ApacheTez的安裝,部署和使用。配套課件講義≥15個(gè);配套習(xí)題集≥200道,包括單選題、多選題、判斷題、填空題、簡答題等。3.實(shí)驗(yàn)課件要求:總計(jì)不低于24個(gè)獨(dú)立的實(shí)驗(yàn)課件,實(shí)驗(yàn)課程內(nèi)容總計(jì)不得低于24學(xué)時(shí)。要求包括使用Hadoop環(huán)境的搭建與核心組件的管理,部署,包括Hadoop核心技術(shù)框架,HDFS,HBASE,HIVE,PIG,Zookeeper,Flume。20大數(shù)據(jù)工程–大數(shù)據(jù)應(yīng)用開發(fā)技術(shù)1.實(shí)驗(yàn)?zāi)康囊螅簽閷W(xué)生提供Hadoop應(yīng)用開發(fā)的實(shí)驗(yàn)學(xué)習(xí),成功完成所有實(shí)驗(yàn)后,將掌握Hadoop技術(shù)的應(yīng)用開發(fā)編程語言的基本使用方法,可以獨(dú)立進(jìn)行Hadoop環(huán)境的實(shí)施和維護(hù),并能夠能夠獨(dú)立開發(fā)基于Hadoop技術(shù)的大數(shù)據(jù)應(yīng)用。2.實(shí)驗(yàn)內(nèi)容要求包括:《MapReduce開發(fā)技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1-Eclipse的安裝和配置;實(shí)驗(yàn)2-MapReduce的編程開發(fā)-排序;實(shí)驗(yàn)3-MapReduce的編程開發(fā)-求平均值;實(shí)驗(yàn)4-MapReduce的編程開發(fā)-合并;實(shí)驗(yàn)5-MapReduce的編程開發(fā)-鏈合;實(shí)驗(yàn)6-MapReduce的編程開發(fā)-格式整理;實(shí)驗(yàn)7-MapReduce讀取Hbase;實(shí)驗(yàn)8-Mapreduce實(shí)例——去重;實(shí)驗(yàn)9-Mapreduce編程:單詞計(jì)數(shù);實(shí)驗(yàn)10-MapReduce編程:數(shù)據(jù)過濾及保存;實(shí)驗(yàn)11-MapReduce編程:檢索特定群體搜索記錄;實(shí)驗(yàn)12-MapReduce編程:UID去重;實(shí)驗(yàn)13-MapReduce編程:自定義計(jì)數(shù)器;實(shí)驗(yàn)14-MapReduce編程:自定義Split大??;實(shí)驗(yàn)15-MapReduce編程:Map端本地聚合;實(shí)驗(yàn)16-MapReduce編程框架和高級(jí)編程框架;實(shí)驗(yàn)17-MapReduce數(shù)據(jù)字典的使用和多目錄輸出?!禜ive原理與技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:ApacheFlink的安裝和部署;實(shí)驗(yàn)2:ApacheFlink的管理;實(shí)驗(yàn)3:ApacheFlink的編程開發(fā)入門?!禜ive原理與技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:Hive的安裝部署和管理;實(shí)驗(yàn)2:Hive的數(shù)據(jù)管理;實(shí)驗(yàn)3:Hive的編程開發(fā);實(shí)驗(yàn)4:Hive數(shù)倉:Hive操作分區(qū)表;實(shí)驗(yàn)5:Hive數(shù)倉:自定義函數(shù)UDF;實(shí)驗(yàn)6:Hive數(shù)倉:導(dǎo)入集合類型數(shù)據(jù);實(shí)驗(yàn)7:Hive數(shù)倉:創(chuàng)建、刪除數(shù)據(jù)庫、表;實(shí)驗(yàn)8:Hive數(shù)倉:導(dǎo)入、導(dǎo)出表數(shù)據(jù);實(shí)驗(yàn)9:Hive數(shù)倉:使用桶表;實(shí)驗(yàn)10:Hive數(shù)倉:修改表、分區(qū)、列;實(shí)驗(yàn)11:Hive數(shù)倉:distributeby和sortby的使用;實(shí)驗(yàn)12:Hive數(shù)倉:orderby和clusterby的使用;實(shí)驗(yàn)13:Hive數(shù)倉:使用UNIONALL合并表數(shù)據(jù);實(shí)驗(yàn)14:Hive數(shù)倉:使用JOIN聯(lián)接查詢;實(shí)驗(yàn)15:Hive數(shù)倉:創(chuàng)建數(shù)據(jù)視圖;實(shí)驗(yàn)16:Hive數(shù)倉:創(chuàng)建數(shù)據(jù)索引;實(shí)驗(yàn)17:Hive數(shù)倉:自定義函數(shù)UDTF;實(shí)驗(yàn)18:Hive數(shù)倉:自定義函數(shù)UDAF;配套課件講義≥10個(gè)?!禜adoop組件開發(fā)技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:HBase的數(shù)據(jù)管理和開發(fā);實(shí)驗(yàn)2:Sqoop的數(shù)據(jù)處理和開發(fā);實(shí)驗(yàn)3:基于Echarts的可視化開發(fā);實(shí)驗(yàn)4:Hbase的編程開發(fā)?!禨qoop數(shù)據(jù)倉庫開發(fā)技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1–Sqoop的安裝部署;實(shí)驗(yàn)2–數(shù)據(jù)倉庫工具:MySQL數(shù)據(jù)導(dǎo)入至HDFS;實(shí)驗(yàn)3–數(shù)據(jù)倉庫工具:HDFS數(shù)據(jù)導(dǎo)出至MySQL;實(shí)驗(yàn)4–數(shù)據(jù)倉庫工具:MySQL數(shù)據(jù)導(dǎo)入至Hive;實(shí)驗(yàn)5–數(shù)據(jù)倉庫工具:Hive數(shù)據(jù)導(dǎo)出至MySQL;實(shí)驗(yàn)6–數(shù)據(jù)倉庫工具:MySQL數(shù)據(jù)導(dǎo)入至HBase?!禟ettle的原理與技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1-Kettle安裝與部署;實(shí)驗(yàn)2-Kettle數(shù)據(jù)庫配置與連接;實(shí)驗(yàn)3-Kettle表輸入;實(shí)驗(yàn)4-Kettlecsv輸入;實(shí)驗(yàn)5-Kettle文本文件輸入;實(shí)驗(yàn)6-Kettle表輸出;實(shí)驗(yàn)7-Kettlecsv輸出;實(shí)驗(yàn)8-Kettle更新;實(shí)驗(yàn)9-Kettle插入更新;實(shí)驗(yàn)10-KettleSQL文件輸出;實(shí)驗(yàn)11-Kettle數(shù)據(jù)庫查詢;實(shí)驗(yàn)12-Kettle文本文件輸出。3.實(shí)驗(yàn)課件要求:總計(jì)不低于30個(gè)獨(dú)立的實(shí)驗(yàn)課件,實(shí)驗(yàn)課程內(nèi)容總計(jì)不得低于30學(xué)時(shí)。要求包括使用Hadoop環(huán)境的搭建與核心組件的管理,部署,包括Hadoop應(yīng)用開發(fā)核心技術(shù)框架,MapReduce,HIVE等。課程資源21大數(shù)據(jù)工程–Spark技術(shù)與應(yīng)用1.實(shí)驗(yàn)?zāi)康囊螅簽閷W(xué)生提供Spark原理與應(yīng)用技術(shù)的實(shí)驗(yàn)學(xué)習(xí),成功完成所有實(shí)驗(yàn)后,將掌握Spark技術(shù)的應(yīng)用開發(fā)編程語言的基本使用方法,可以獨(dú)立進(jìn)行Spark環(huán)境的實(shí)施和維護(hù),并能夠獨(dú)立開發(fā)基于Spark技術(shù)的大數(shù)據(jù)應(yīng)用。2.實(shí)驗(yàn)內(nèi)容要求包括:《Spark原理與技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:ApacheSpark:Yarn模式的安裝部署;實(shí)驗(yàn)2:ApacheSpark:Local模式的安裝和部署;實(shí)驗(yàn)3:ApacheSpark:Standalone模式的安裝和部署?!禨park編程與開發(fā)基礎(chǔ)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:SparkShell基礎(chǔ);實(shí)驗(yàn)2:SparkAPI的開發(fā);實(shí)驗(yàn)3:SparkSQL的編程開發(fā);實(shí)驗(yàn)4:SparkR處理數(shù)據(jù)框;實(shí)驗(yàn)5:基于Python的RDD操作;實(shí)驗(yàn)6:基于Scala的RDD操作;實(shí)驗(yàn)7:創(chuàng)建Spark應(yīng)用程序;實(shí)驗(yàn)8:PySpark中的RDD創(chuàng)建;實(shí)驗(yàn)9:PySpark中的RDD基本操作;實(shí)驗(yàn)10:PySpark中的RDD隨機(jī)抽樣;實(shí)驗(yàn)11:PySpark中的RDDsSet操作;實(shí)驗(yàn)12:PySpark中的RDDsAggregations操作;實(shí)驗(yàn)13:PySpark中的RDDskeyvalue操作;實(shí)驗(yàn)14:PySpark中的RDDs的描述性統(tǒng)計(jì);實(shí)驗(yàn)15:PySpark中的邏輯回歸;實(shí)驗(yàn)16:PySpark中的決策樹模型;實(shí)驗(yàn)17:PySpark中的SQL;實(shí)驗(yàn)18:MLlib二分類問題;配套課件講義≥10個(gè)?!禨park工程應(yīng)用開發(fā)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1–SparkCore:Scala單詞計(jì)數(shù);實(shí)驗(yàn)2–SparkCore:Java單詞計(jì)數(shù);實(shí)驗(yàn)3–SparkCore:Apache日志分析;實(shí)驗(yàn)4–SparkSQL:命令方式;實(shí)驗(yàn)5–SparkSQL:使用DSL語句對(duì)DataFrame進(jìn)行操作;實(shí)驗(yàn)6–SparkSQL:使用SQL語句對(duì)DataFrame進(jìn)行操作;實(shí)驗(yàn)7–基于Java的SparkMlib-Statistic開發(fā);實(shí)驗(yàn)8–基于Java的SparkMlib-pipeline開發(fā);實(shí)驗(yàn)9–基于Java的SparkMlib-features開發(fā);實(shí)驗(yàn)10–基于Java的SparkStreaming開發(fā)技術(shù)。3.實(shí)驗(yàn)課件要求:總計(jì)不低于30個(gè)獨(dú)立的實(shí)驗(yàn)課件,實(shí)驗(yàn)課程內(nèi)容總計(jì)不得低于40學(xué)時(shí)。要求包括使用Hadoop環(huán)境的搭建與核心組件的管理,部署,包括Spark應(yīng)用開發(fā)核心技術(shù)框架,SparkMlib,SparkLocal,SparkGraphX等。22大數(shù)據(jù)工程–數(shù)據(jù)存儲(chǔ)與管理技術(shù)1.實(shí)驗(yàn)?zāi)康囊螅簽閷W(xué)生提供數(shù)據(jù)存儲(chǔ)原理與管理技術(shù)的實(shí)驗(yàn)學(xué)習(xí),成功完成所有實(shí)驗(yàn)后,將掌握分布式數(shù)據(jù)存儲(chǔ),常用關(guān)系型數(shù)據(jù)存儲(chǔ)及管理技術(shù),可以獨(dú)立進(jìn)行數(shù)據(jù)存儲(chǔ)環(huán)境的的實(shí)施和維護(hù),并能夠能夠獨(dú)立開發(fā)基于數(shù)據(jù)管理的大數(shù)據(jù)應(yīng)用。2.實(shí)驗(yàn)內(nèi)容要求包括:《HDFS的文件管理》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:HDFS架構(gòu)原理與啟動(dòng)關(guān)閉操作;實(shí)驗(yàn)2:HDFS文件上傳與下載;實(shí)驗(yàn)3:HDFS文件讀??;實(shí)驗(yàn)4:HDFS文件創(chuàng)建與寫入;實(shí)驗(yàn)5:HDFS文件管理;實(shí)驗(yàn)6:HDFS文件權(quán)限管理;實(shí)驗(yàn)7:HDFS命令操作;實(shí)驗(yàn)8:HDFS文件壓縮與解壓縮;實(shí)驗(yàn)9:HDFSIO序列化與反序列化;實(shí)驗(yàn)10:HDFSAPI操作。《Hbase分布式數(shù)據(jù)庫》實(shí)驗(yàn)課程:實(shí)驗(yàn)1-HBase:WEBUI界面;實(shí)驗(yàn)2-HBaseShell與常用命令;實(shí)驗(yàn)3-HBase客戶端API;實(shí)驗(yàn)4-HBase數(shù)據(jù)庫:HBase表設(shè)計(jì)和操作;實(shí)驗(yàn)5-HBase表數(shù)據(jù)的更新與刪除;實(shí)驗(yàn)6-HBase掃描數(shù)據(jù);實(shí)驗(yàn)7-HBase編程:HBase過濾器的使用;實(shí)驗(yàn)8-HBase編程:HBase表的讀取與存儲(chǔ);實(shí)驗(yàn)9-HBase編程:HBase計(jì)數(shù)器;實(shí)驗(yàn)10-HBase編程:HBase協(xié)處理器;實(shí)驗(yàn)11-HBase安全;實(shí)驗(yàn)12-HBaseRowkey設(shè)計(jì);實(shí)驗(yàn)13-HBase調(diào)優(yōu)。《MySQL數(shù)據(jù)庫技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:MySQL的安裝,部署和升級(jí);實(shí)驗(yàn)2:MySQL的配置和管理;實(shí)驗(yàn)3:DDL的使用和開發(fā);實(shí)驗(yàn)4:DML的使用開發(fā);實(shí)驗(yàn)5:DCL的使用和開發(fā);實(shí)驗(yàn)6:MySQL數(shù)據(jù)庫的備份和導(dǎo)入;實(shí)驗(yàn)7:MySQL數(shù)據(jù)庫的遷移;實(shí)驗(yàn)8:MySQL數(shù)據(jù)庫主從集群的安裝部署;配套課件講義≥10個(gè)?!禢oSQL數(shù)據(jù)庫技術(shù)–基礎(chǔ)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:redis的安裝和使用;實(shí)驗(yàn)2:ApacheCassandra的安裝和使用?!禡ongoDB數(shù)據(jù)庫技術(shù)》實(shí)驗(yàn)課程:實(shí)驗(yàn)1:MongoDB的安裝和部署;實(shí)驗(yàn)2:MongoDB的基礎(chǔ)開發(fā)【CRUD和聚合操作】;實(shí)驗(yàn)3:MongoDB的基礎(chǔ)開發(fā)【Java應(yīng)用】;實(shí)驗(yàn)4:MongoDB索引;實(shí)驗(yàn)5:MongoDB聚合;實(shí)驗(yàn)6:Mongo性能優(yōu)化;實(shí)驗(yàn)7:MongoDB日志數(shù)據(jù)存儲(chǔ)與分析;實(shí)驗(yàn)8:MongoDBmapReduce案例分析。3.實(shí)驗(yàn)內(nèi)容課件要求:總計(jì)不低于48個(gè)獨(dú)立的實(shí)驗(yàn)課件,實(shí)驗(yàn)課程內(nèi)容總計(jì)不得低于48學(xué)時(shí)。要求包括使用MySQL,Hbase等數(shù)據(jù)存儲(chǔ)組件,完成系統(tǒng)的搭建與核心組件的管理,部署等。23云平臺(tái)的安裝部署與使用資源包應(yīng)包括但不限于下列的實(shí)驗(yàn)內(nèi)容:實(shí)驗(yàn)1-云平臺(tái)的安裝與部署;實(shí)驗(yàn)2-云平臺(tái)的云主機(jī)創(chuàng)建和管理;實(shí)驗(yàn)3-云平臺(tái)的虛擬機(jī)管理;實(shí)驗(yàn)4-云平臺(tái)的快照管理;實(shí)驗(yàn)5-云平臺(tái)的安全組配置;實(shí)驗(yàn)6-云平臺(tái)的性能管理與優(yōu)化。24云平臺(tái)的本地儲(chǔ)存管理資源包應(yīng)包括但不限于下列的實(shí)驗(yàn)內(nèi)容:實(shí)驗(yàn)1-本地存儲(chǔ)配置;實(shí)驗(yàn)2-本地存儲(chǔ)導(dǎo)入與導(dǎo)出;實(shí)驗(yàn)3-鏡像服務(wù)器的管理;實(shí)驗(yàn)4-SAN存儲(chǔ)的安裝;實(shí)驗(yàn)5-SAN存儲(chǔ)的管理與配置;實(shí)驗(yàn)6-本地存儲(chǔ)的性能優(yōu)化。25私有云的VPC技術(shù)實(shí)踐資源包應(yīng)包括但不限于下列的實(shí)驗(yàn)內(nèi)容:實(shí)驗(yàn)1-二層網(wǎng)絡(luò)的基礎(chǔ);實(shí)驗(yàn)2-VPC網(wǎng)絡(luò)創(chuàng)建和管理;實(shí)驗(yàn)3-VPC的路由器管理;實(shí)驗(yàn)4-路由協(xié)議資源管理。26云平臺(tái)的網(wǎng)絡(luò)管理

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

評(píng)論

0/150

提交評(píng)論