大數(shù)據(jù)平臺運維與數(shù)據(jù)建模實訓室

大數(shù)據(jù)平臺運維與數(shù)據(jù)建模實訓室序號項目內(nèi)容技術參數(shù)及配置標準數(shù)量1大數(shù)據(jù)平臺運維與數(shù)據(jù)建模實驗平臺（核心產(chǎn)品）1、總體技術要求：需擁有完全自主知識產(chǎn)權的軟件產(chǎn)品，系統(tǒng)需采用B/S架構，支持主流瀏覽器，F(xiàn)ireFox、Chrome、IE11等，并發(fā)數(shù)不少于50。2、統(tǒng)一管理要求：考慮到專業(yè)教學的穩(wěn)定性及對實驗數(shù)據(jù)安全管理的要求，要求與計算節(jié)點服務器保持兼容性。3、系統(tǒng)支持用戶在線制作實驗環(huán)境，滿足不同的教學場景需求。支持生成Docker容器，支持Linux操作系統(tǒng),并且支持單機和集群兩種模式,可以自定義每一個虛機或容器的物理配置。4、系統(tǒng)支持鏡像管理功能，系統(tǒng)內(nèi)置鏡像不少于200個,支持對鏡像自定義標簽，支持查詢和復用。5、系統(tǒng)支持對圖像分類、目標檢測、機器學習所需的數(shù)據(jù)集進行管理，支持數(shù)據(jù)集的導入功能。6、系統(tǒng)支持內(nèi)置錄屏功能，提供容器、Jupyter錄屏環(huán)境。支持對屏幕錄像和文檔素材進行管理，文檔素材支持word、ppt和excel格式。7、系統(tǒng)支持實驗報告模板管理，內(nèi)置文檔編輯器，支持在線編輯模板。8、系統(tǒng)支持課程管理功能，包含系統(tǒng)內(nèi)置課程和教師自建課程。可按照課程標簽快速篩選課程。支持對系統(tǒng)內(nèi)置課程復用，方便快速創(chuàng)建課程。9、系統(tǒng)支持查看課程詳情，包括上課時間、該課程累計上課次數(shù)、系統(tǒng)和自建標簽以及學習路徑和班級信息展示。支持編輯所在院系、所學專業(yè)、所在班級，支持自定義課程名稱、課程封面圖片。支持課程發(fā)布、學生申請、課程共享功能的一鍵開關。10、系統(tǒng)支持課程編輯，需包括課程介紹、課程大綱、課程目錄、實驗報告、提問記錄、分組記錄等模塊。支持內(nèi)置文檔編輯工具，支持本地上傳文檔。11、系統(tǒng)支持課程目錄編輯。支持對章節(jié)內(nèi)容的編輯，可以添加實驗，添加視頻、課件。支持選擇實驗運行系統(tǒng)；支持從系統(tǒng)導入或自主上傳實驗手冊、報告模板、視頻、課件等素材；支持手動排序功能。12、系統(tǒng)支持對班級成員進行分組，支持手動和隨機分組，可支持組長設置。13、系統(tǒng)支持學生查看每個實驗章節(jié)詳情，包括本節(jié)視頻、實驗環(huán)境描述等信息，支持查看實驗環(huán)境的節(jié)點數(shù)量、配置以及組網(wǎng)情況。支持查看節(jié)點IP地址。14、系統(tǒng)支持學生在線實驗，支持刪除實驗、保存實驗、臨時關閉、共享桌面、上傳文件、下載文件、全屏操作、剪切板等8項基本環(huán)境操作功能。學生實驗時在未完成當前實驗的情況下，不依賴于當前章節(jié)編輯順序，可隨意跳轉并完成實驗。支持一鍵重置實驗。支持小窗口播放教學視頻。15、系統(tǒng)支持學生筆記功能，學生可按章節(jié)記錄課堂筆記，并對自己的筆記進行管理，支持筆記導出。16、系統(tǒng)支持在線課堂功能，提供在線電子白板和在線討論功能。支持在線錄屏、簽到、隨機提問、實驗監(jiān)控等功能。支持在線同步共享實驗環(huán)境界面讓學生觀看與學習。17、在線課堂支持在線發(fā)起簽到功能，支持設置學生簽到時間，支持每個班級的簽到記錄情況查詢，支持手動補簽操作。支持以EXCL表格形式導出相關簽到數(shù)據(jù)。18、在線課堂支持互動電子白板功能，可支持多種批注工具（圖形、文字、手寫等），支持實時批注與多用戶實時批注功能。19、在線課堂支持教學資源播放功能，支持教學視頻，PPT教學資源的同步播放。支持上傳外部演示文件（PPT、Word、Excl等多種格式文件），支持分享外部視頻以供學生同步觀看。支持在線課程錄制，支持對錄制的視頻進行查看、下載、以及刪除操作。20、在線課堂支持在線學習的用戶設置上課狀態(tài)，包含離開、舉手、未決定、困惑、悲傷、高興、鼓掌、點贊、拍磚等，支持在線課堂中的主持和演示權限設置，可設置其他演示者與主持人權限。21、在線課堂支持課堂討論模塊，教師用戶擁有開放討論和清空討論權限，支持發(fā)送內(nèi)置互動表情。22、在線課堂支持在線隨機點名提問功能，支持對學生回答打分。23、在線課堂支持實驗監(jiān)控功能，支持查詢學生在線實驗情況，支持一鍵提醒學生錄屏，支持遠程協(xié)助功能，可對學生主機進行操作指導。24、系統(tǒng)支持教師創(chuàng)建教學工具：容器演示環(huán)境、Jupyter演示環(huán)境、圖像分類演示環(huán)境、目標檢測演示環(huán)境、機器學習演示環(huán)境。25、系統(tǒng)支持學員管理，支持查看班級成員、查看課程申請和添加重修學員，支持學員密碼重置。26、系統(tǒng)支持課堂管理功能。支持查看學生在線或離線情況、實驗報告提交情況，支持通過遠程協(xié)助進入學生正在試驗的環(huán)境；支持快照管理，可查看和刪除學生虛機快照。27、系統(tǒng)支持虛機管理，可查看和關閉學生虛機。提供平臺小助手模塊，可隨時管理虛機，支持設置平臺小助手的透明度。28、系統(tǒng)支持教師編輯不同課程章節(jié)的課堂備注信息，并支持批量刪除及導出。29、系統(tǒng)支持課件、視頻、手冊、圖片、軟件、數(shù)據(jù)及其他資源的上傳、下載、共享及刪除等文件管理功能。支持提供個人網(wǎng)盤功能。30、系統(tǒng)支持通過儀表盤展示Docker容器資源使用情況，包含CPU、內(nèi)存使用比。支持對教師和學生的虛機進行查詢、刪除等操作。31、系統(tǒng)支持用戶在保存實驗時一鍵生成快照，支持對所有快照進行查詢、管理、刪除等操作。32、系統(tǒng)支持任務調度功能，支持對正在運行的測試或訓練任務進行暫停、終止操作，支持對已完成的任務進行篩選、查看、刪除等操作。33、系統(tǒng)支持在線考試功能，支持自定義系統(tǒng)內(nèi)所有試題的難度系數(shù)和權重。支持對試題來源、所屬科目和試題題型等進行編輯和修改；支持單選題、多選題、判斷題、簡答題、填空題及實驗題等題型；考試題支持在線編輯添加和word文件導入添加兩種操作方式，系統(tǒng)內(nèi)置word試題模板；支持通過圖形顯示不同題型分配比例和數(shù)量統(tǒng)計。34、在線考試支持編輯添加實驗題，實驗題支持容器、Jupyter運行環(huán)境，支持單機、集群兩種環(huán)境類別，支持設置主、從節(jié)點的參數(shù)。35、在線考試支持自動組卷和手動組卷兩種方式添加試卷。通過對不同題型所屬的試題科目進行題目總數(shù)設定，支持自動計算總分數(shù)。完成快速自動組卷。系統(tǒng)支持將任意已發(fā)布的試卷自動設為模板，支持對模板試卷的復用功能。支持試卷以word格式批量導出。36、在線考試支持查看試卷滿分、最高分、最低分、平均分、及格率、已提交人數(shù)等考試信息。支持查看學生的考試時間、答題時長、成績、及格狀態(tài)等數(shù)據(jù)。支持以excel格式導出學生成績。支持考試分析功能，展示錯題率統(tǒng)計圖和成績排名圖。37、系統(tǒng)支持自定義學習路徑功能，支持對課程的學科分類、學科內(nèi)容及學科適用職業(yè)進行定位，支持對學習路徑新增分類、新增路徑小類、新增崗位。支持學習路徑的可視化分析，展示崗位能力達成圖、技術能力分布圖、學習路徑課程分布圖。支持通過課程、班級以及姓名篩選查看。38、系統(tǒng)支持教師查看班級的實驗報告分析，展示報告滿分、最高分、最低分、平均分和已提交人數(shù)等數(shù)據(jù)，展示整個班級成績排名圖和實驗分析圖。支持學生查看個人實驗報告分析，展示完成率、提交報告次數(shù)和報告成績分析圖。39、系統(tǒng)支持磁盤管理功能，支持自動或手動清理磁盤。40、系統(tǒng)支持組織管理、班級管理和用戶管理。支持對系統(tǒng)賬戶進行編輯、重置密碼、禁用和刪除操作。支持從回收站還原賬戶。41、系統(tǒng)支持在線用戶管理功能，支持查看系統(tǒng)當前在線用戶的會話編號、姓名、瀏覽器、操作系統(tǒng)、登錄時間、登錄IP、登錄地點等信息，支持對系統(tǒng)當前在線用戶進行強退及批量強退操作。42、系統(tǒng)支持登錄日志管理功能，支持查看登錄用戶的姓名、賬號、瀏覽器、操作系統(tǒng)、登錄IP、登錄地點、登錄狀態(tài)、錯誤信息、操作耗時、登錄時間的信息，支持批量刪除及導出操作。43、系統(tǒng)支持操作日志管理功能，支持查看用戶操作的姓名、操作模塊、錯誤信息、操作方法、請求參數(shù)、操作IP、操作時間、賬號、操作狀態(tài)、操作耗時、操作內(nèi)容、返回參數(shù)、操作地點等信息，支持刪除操作。44、系統(tǒng)支持安全管理功能，支持對當前數(shù)據(jù)庫進行備份，支持按時間段查詢所有備份的數(shù)據(jù)庫信息、支持備份的恢復與刪除。45、系統(tǒng)支持系統(tǒng)信息設置功能，支持自定義系統(tǒng)名稱、技術支持的名稱、系統(tǒng)說明、系統(tǒng)LOGO等信息。支持一鍵還原初始設置。46、系統(tǒng)支持添加、導入及批量刪除敏感詞，支持對已有敏感詞狀態(tài)進行開啟或關閉操作，支持對所選敏感詞進行編輯及刪除操作。47、系統(tǒng)支持通知管理功能，支持對系統(tǒng)通知進行查看、撤銷及刪除操作。1套2大數(shù)據(jù)平臺安裝與部署項目實戰(zhàn)資源包《大數(shù)據(jù)平臺安裝與部署》課程資源包1、課程目標：掌握Linux系統(tǒng)操作、虛擬化軟件、Hadoop平臺安裝部署、組件安裝配置、大數(shù)據(jù)平臺實施、監(jiān)控等。2、包含：教學大綱和教學進度表、講義PPT、實驗指導手冊（電子版，詳細操作步驟答案）、鏡像模板、實驗視頻等。3、實驗涵蓋解Hadoop平臺安裝配置、組件安裝與配置、大數(shù)據(jù)平臺實施方案編寫、大數(shù)據(jù)平臺監(jiān)控實現(xiàn)、大數(shù)據(jù)平臺運行與應用、大數(shù)據(jù)平臺維護等內(nèi)容，實驗數(shù)量不少于17個。實驗內(nèi)容如下：實驗1：虛擬化軟件使用實驗2：Linux操作系統(tǒng)安裝和使用實驗3：Hadoop平臺安裝實驗4：平臺的基礎環(huán)境配置實驗5：Hadoop文件參數(shù)配置實驗6：Hadoop集群運行實驗7：Hbase組件安裝配置實驗8：Hive組件安裝配置實驗9：Zookeeper組件安裝配置實驗10：Sqoop組件安裝配置實驗11：Flume組件安裝配置實驗12：大數(shù)據(jù)平臺監(jiān)控命令實驗13：大數(shù)據(jù)平臺監(jiān)控界面和報表實驗14：告警和日志信息監(jiān)控實驗15：大數(shù)據(jù)平臺及組件安裝部署實驗16：大數(shù)據(jù)平臺運行與應用實驗17：大數(shù)據(jù)平臺維護1套3大數(shù)據(jù)平臺部署與管理項目實戰(zhàn)資源包《大數(shù)據(jù)平臺部署與管理》課程資源包1、課程目標：掌握大數(shù)據(jù)平臺系統(tǒng)架構、大數(shù)據(jù)平臺高可用部署、大數(shù)據(jù)組件維護、大數(shù)據(jù)平臺優(yōu)化、大數(shù)據(jù)平臺診斷與處理等。2、包含：教學大綱和教學進度表、講義PPT、實驗指導手冊（電子版，詳細操作步驟答案）、鏡像模板、實驗視頻等。3、實驗涵蓋解HadoopHA集群配置、組件維護、組件配置優(yōu)化、組件負載均衡診斷與處理、集群節(jié)點故障診斷與處理、集群組件服務故障診斷與處理、運維項目案例等內(nèi)容，實驗數(shù)量不少于13個。實驗內(nèi)容如下：實驗1：HadoopHA集群配置實驗2：Hbase組件維護實驗3：Hive組件維護實驗4：Zookeeper組件維護實驗5：ETL組件維護實驗6：Spark組件維護實驗7：平臺系統(tǒng)優(yōu)化實驗8：HDFS配置優(yōu)化實驗9：MapReduce配置優(yōu)化實驗10：Spark配置優(yōu)化實驗11：Hadoop及生態(tài)圈組件負載均衡診斷與處理實驗12：集群組件服務故障診斷處理實驗13：大數(shù)據(jù)平臺項目綜合案例1套4智慧農(nóng)業(yè)項目實戰(zhàn)資源包1.提供典型實驗資源，含實驗指導手冊、實驗數(shù)據(jù)源、實驗過程中所需的分析軟件工具、實驗參考示例代碼和運行結果。2.項目匯總多個平臺農(nóng)產(chǎn)品銷售信息，推進農(nóng)產(chǎn)品經(jīng)濟的優(yōu)化。項目提供數(shù)據(jù)、提供《實驗手冊》和《系統(tǒng)安裝部署文檔》、提供項目源代碼及代碼注釋。3、實驗內(nèi)容包含：1）分析當天品類，品種，價格，省份的分布情況；2）分析各個省份各個市場各個品種各個品類最近5天的價格并且統(tǒng)計所選省份市場品種品類的當天的品種，均價，市場，時間信息；3）分析各個年份各個月份下各個品種的價格；4）對花卉鮮花批發(fā)交易市場下卡羅拉(新市場),冷美人,蜜桃雪山(香檳),戴安娜,大桃紅的價格進行預測。1套5智慧電商項目實戰(zhàn)資源包1.提供典型實驗資源，含實驗指導手冊、實驗數(shù)據(jù)源、實驗過程中所需的分析軟件工具、實驗參考示例代碼和運行結果。2.利用歷史拍賣數(shù)據(jù)，用機器學習的方法來訓練一個模型，以預測一項拍賣是否會成功，和最終成功交易的價格。3.項目提供數(shù)據(jù)、提供《實驗手冊》和《系統(tǒng)安裝部署文檔》、提供項目源代碼及代碼注釋。4、實驗內(nèi)容包含：1）拍賣失敗占比統(tǒng)計分析2）拍賣競價次數(shù)統(tǒng)計分析3）不同賣家的拍出商品成功率4）拍賣成功最密集國家統(tǒng)計分析5）拍賣賣家評級統(tǒng)計分析6）拍賣成功與否預測分析7）預測拍賣最終成交價格1套6數(shù)據(jù)分析與應用項目實戰(zhàn)資源包1.課程資源包含不少于7個教學視頻和7個實驗手冊等教學內(nèi)容，視頻總時長400分鐘以上。2.每個實驗手冊有對應的操作講解視頻3、實驗內(nèi)容如下：1）Numpy介紹與使用2）Pandas介紹與使用3）數(shù)據(jù)繪圖可視化4）數(shù)據(jù)預處理5）數(shù)據(jù)分類與預測6）數(shù)據(jù)聚類分析7）時序數(shù)據(jù)分析處理1套7數(shù)據(jù)可視化項目實戰(zhàn)資源包1.課程資源包含不少于14個教學視頻和14個實驗手冊等教學內(nèi)容，視頻總時長600分鐘以上。2.每個實驗手冊有對應的操作講解視頻。3、內(nèi)容包含：1）uperset安裝部署、2）Superset數(shù)據(jù)可視化、3）Zeppelin安裝部署與數(shù)據(jù)可視化、4）Anaconda可視化、5）Matplotlib可視化、6）k-NearestNeighbor可視化、7）LinearRegression可視化、8）SupportVectorMachine可視化、9）DecisionTree可視化、10）RandomForest可視化、11）模型優(yōu)化、Pandas可視化、12）數(shù)據(jù)降維可視化、13）ClusterAnalysis可視化1套8管理節(jié)點服務器（強制節(jié)能產(chǎn)品）2U機架式服務器CPU：5218(2.3GHz/16核)CPU*2塊內(nèi)存：32GBDDR4內(nèi)存模塊*8塊硬盤：9