大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學(xué)生技能考核標(biāo)準(zhǔn)

目錄

一、專業(yè)名稱及適用對象........................................................................1

1.專業(yè)名稱..............................................................................................................................1

2.適應(yīng)對象..............................................................................................................................1

二、考核目標(biāo)............................................................................................1

三、考核內(nèi)容............................................................................................1

模塊一Python程序設(shè)計(jì)........................................................................................................1

1.技能要求................................................................................................................................2

2.素養(yǎng)要求................................................................................................................................2

3.完成時間：............................................................................................................................2

模塊二Hadoop平臺部署及應(yīng)用...........................................................................................2

1.技能要求................................................................................................................................2

2.素養(yǎng)要求................................................................................................................................3

3.完成時間：............................................................................................................................3

模塊三數(shù)據(jù)采集.....................................................................................................................3

1.技能要求................................................................................................................................3

2.素養(yǎng)要求................................................................................................................................3

3.完成時間：............................................................................................................................3

模塊四數(shù)據(jù)可視化與分析.....................................................................................................4

1.技能要求................................................................................................................................4

2.素養(yǎng)要求................................................................................................................................4

3.完成時間：............................................................................................................................4

四、評價標(biāo)準(zhǔn)............................................................................................4

1.評分方式................................................................................................................................4

2.分值分配................................................................................................................................4

3.技能評價要點(diǎn)........................................................................................................................5

五、抽考方式............................................................................................6

六、附錄....................................................................................................6

（一）相關(guān)法律法規(guī)（摘錄）...............................................................................................6

（二）相關(guān)規(guī)范與標(biāo)準(zhǔn)（摘錄）...........................................................................................6

1

湖南商務(wù)職業(yè)技術(shù)學(xué)院學(xué)生專業(yè)技能考核

標(biāo)準(zhǔn)

一、專業(yè)名稱及適用對象

1.專業(yè)名稱

大數(shù)據(jù)技術(shù)與應(yīng)用（專業(yè)代碼：610215）。

2.適應(yīng)對象

高職大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)全日制在籍大三學(xué)生。

二、考核目標(biāo)

依據(jù)本專業(yè)人才培養(yǎng)方案，本專業(yè)技能考核通過設(shè)置Python程序設(shè)計(jì)、數(shù)據(jù)采集、數(shù)據(jù)

可視化與分析、Hadoop平臺部署及應(yīng)用等4個技能模塊，測試學(xué)生掌握計(jì)算機(jī)軟硬件基本理

論、大數(shù)據(jù)平臺搭建知識、大數(shù)據(jù)平臺運(yùn)維及測試知識、數(shù)據(jù)倉庫基礎(chǔ)知識、數(shù)據(jù)處理基

礎(chǔ)知識情況；測試學(xué)生具備大數(shù)據(jù)平臺搭建與運(yùn)維、數(shù)據(jù)采集、數(shù)據(jù)加工、數(shù)據(jù)分析、數(shù)據(jù)

可視化等專業(yè)實(shí)踐能力情況；測試學(xué)生具備認(rèn)知能力、合作能力、創(chuàng)新能力、職業(yè)能力等支

撐終身發(fā)展、適應(yīng)時代要求的關(guān)鍵能力情況，測試學(xué)生具有從事大數(shù)據(jù)相關(guān)崗位的職業(yè)素養(yǎng)

情況。促進(jìn)專業(yè)不斷完善教學(xué)基本條件，深化教育教學(xué)改革，強(qiáng)化實(shí)踐教學(xué)環(huán)節(jié)，增強(qiáng)學(xué)生

創(chuàng)新創(chuàng)業(yè)能力，促進(jìn)學(xué)生個性化發(fā)展，提升專業(yè)建設(shè)水平，提升課程教學(xué)的有效性，培養(yǎng)

適應(yīng)信息時代發(fā)展需要的，符合大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)設(shè)計(jì)、開發(fā)、操作、維護(hù)、營銷、服

務(wù)需要的復(fù)合型、創(chuàng)新型和高素質(zhì)技術(shù)技能人才。

在技能抽查考核過程中涉及到的課程有《Python程序設(shè)計(jì)》、《Hadoop實(shí)用技術(shù)》、《網(wǎng)絡(luò)

爬蟲技術(shù)》、《Spark大數(shù)據(jù)技術(shù)與應(yīng)用》、《大數(shù)據(jù)ETL技術(shù)》、《大數(shù)據(jù)系統(tǒng)維護(hù)與管理》、《數(shù)

據(jù)分析挖掘工具》、《數(shù)據(jù)可視化技術(shù)》等。

三、考核內(nèi)容

根據(jù)大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)培養(yǎng)目標(biāo)，針對其就面向的就業(yè)崗位和能力要求，由淺入深，

設(shè)計(jì)出4個模塊進(jìn)行考核，分別是python程序設(shè)計(jì)、Hadoop平臺部署及應(yīng)用、數(shù)據(jù)采集、數(shù)

據(jù)可視化與分析。

表1考核模塊與典型工作任務(wù)表

序號模塊名稱典型工作任務(wù)

1Python程序設(shè)計(jì)大數(shù)據(jù)平臺開發(fā)

2Hadoop平臺部署及應(yīng)用大數(shù)據(jù)運(yùn)維、大數(shù)據(jù)架構(gòu)設(shè)計(jì)

3數(shù)據(jù)采集大數(shù)據(jù)的采集

4數(shù)據(jù)可視化與分析數(shù)據(jù)可視化展示、數(shù)據(jù)分析

模塊一Python程序設(shè)計(jì)

“Python程序設(shè)計(jì)”是大數(shù)據(jù)從業(yè)人員必須具備的基本技能，主要用于大數(shù)據(jù)平臺的各

1

項(xiàng)開發(fā)。本模塊的主要考核內(nèi)容為：Python基礎(chǔ)入門、函數(shù)、面向?qū)ο缶幊?、?shí)用模塊等。

1.技能要求

（1）Python程序設(shè)計(jì)基本要求

①掌握Python中的常用操作符；

②掌握Python的固定語法；

③掌握列表、元組、字典和集合的概念和基本操作；

④掌握循環(huán)語句、終止語句、通過語句；

⑤熟練掌握組合語句的編寫和應(yīng)用；

⑥掌握多變量迭代和列表解析的用法。

（2）Python函數(shù)基本要求

①熟練掌握函數(shù)的調(diào)用和實(shí)現(xiàn)；

②熟練掌握函數(shù)嵌套和自定義函數(shù)；

③熟練掌握函數(shù)對數(shù)據(jù)進(jìn)行處理。

（3）Python面向?qū)ο缶幊袒疽?/p>

①掌握面向?qū)ο缶幊蹋?/p>

②熟練掌握類和對象的概念、迭代器的運(yùn)用；

③熟練掌握繼承的概念和運(yùn)用。

（4）文件讀寫基本要求

①熟練掌握文件的讀取與寫入；

②熟練掌握使用OS模塊進(jìn)行工作路徑、文件夾等管理的操作。

2.素養(yǎng)要求

①具有較強(qiáng)的分析問題的能力、發(fā)散思維和創(chuàng)新意識；

②具有良好的編程習(xí)慣、較強(qiáng)的邏輯思維能力及綜合運(yùn)用知識的能力；

③能夠完成真實(shí)業(yè)務(wù)邏輯向代碼轉(zhuǎn)換；

④能夠獨(dú)立解決技術(shù)問題；

⑤具備程序員的嚴(yán)謹(jǐn)認(rèn)真、規(guī)范的工作態(tài)度和正確的價值觀。

3.完成時間：

2小時。

模塊二Hadoop平臺部署及應(yīng)用

本模塊以Hadoop實(shí)用技術(shù)為主，主要培養(yǎng)學(xué)生的大數(shù)據(jù)運(yùn)維能力和大數(shù)據(jù)架構(gòu)設(shè)計(jì)能

力，主要考核內(nèi)容包含搭建Hadoop完全分布式集群，HDFS的原理和基礎(chǔ)操作，Hive基本應(yīng)用

等。

1.技能要求

（1）Hadoop環(huán)境搭建基本要求

①能夠配置和管理集群環(huán)境，完成相關(guān)設(shè)備的維護(hù)；

②能夠完成操作系統(tǒng)的安裝和配置；

③能夠完成大數(shù)據(jù)平臺的日常維護(hù)；

④能夠?qū)崿F(xiàn)配置Hadoop生態(tài)組件的配置。

2

（2）分布式文件系統(tǒng)的使用基本要求

①能根據(jù)業(yè)務(wù)需求，正確設(shè)計(jì)HDFS文件系統(tǒng);

②能使用HDFS文件系統(tǒng)完成項(xiàng)目任務(wù)。

（3）分布式數(shù)據(jù)庫基本要求

①能正確的根據(jù)需求完成常見分布式數(shù)據(jù)庫Hive的使用；

②能根據(jù)需求完成數(shù)據(jù)添加、查詢操作；

③具備編寫HQL語句的能力，能完成簡單的數(shù)據(jù)統(tǒng)計(jì)和分析；

④能夠向數(shù)據(jù)庫中提供高質(zhì)量的數(shù)據(jù)，完成數(shù)據(jù)預(yù)處理工作。

2.素養(yǎng)要求

①能夠獨(dú)立完成環(huán)境搭建；

②能夠獨(dú)立解決技術(shù)問題；

③能夠規(guī)范地操作命令；

④熟悉相關(guān)規(guī)范和標(biāo)準(zhǔn)，能識讀相關(guān)軟件技術(shù)文檔。

3.完成時間：

2小時

模塊三數(shù)據(jù)采集

本模塊主要培養(yǎng)學(xué)生的數(shù)據(jù)采集能力，考核項(xiàng)目為網(wǎng)絡(luò)爬蟲技術(shù)，主要考核內(nèi)容為：網(wǎng)

絡(luò)爬蟲基本原理、網(wǎng)頁爬蟲的基本方法、網(wǎng)頁的分析方法以及數(shù)據(jù)的儲存方法等。

1.技能要求

（1）網(wǎng)絡(luò)爬蟲技術(shù)概述基本要求

①掌握Python爬蟲的環(huán)境配置方法；

②熟悉HTTP請求方式與過程；

③熟悉常見HTTP狀態(tài)碼；

④熟悉Cookie。

（2）網(wǎng)頁爬蟲基本要求

①掌握使用urllib3庫、Requests庫實(shí)現(xiàn)HTTP請求的發(fā)送；

②掌握使用Chrome開發(fā)者工具、正則表達(dá)式、Xpath和BeautifulSoup等工具進(jìn)

行解析網(wǎng)頁；

③掌握使用JSON庫進(jìn)行數(shù)據(jù)存儲。

2.素養(yǎng)要求

①能夠完成真實(shí)業(yè)務(wù)邏輯向代碼轉(zhuǎn)換；

②能夠獨(dú)立解決技術(shù)問題；

③自學(xué)能力強(qiáng)，能夠快速準(zhǔn)確地查找參考資料；

④能夠按照規(guī)范編寫技術(shù)文檔；

⑤在進(jìn)行網(wǎng)絡(luò)爬蟲的過程中能注意內(nèi)容的合法性（不能非法爬取隱私信息等）、

規(guī)范性。

3.完成時間：

2小時

3

模塊四數(shù)據(jù)可視化與分析

本模塊主要培養(yǎng)學(xué)生對處理好的數(shù)據(jù)進(jìn)行可視化展示和分析的能力，考核內(nèi)容包含：餅

圖、柱狀圖等常用圖形可視化，圖像參數(shù)調(diào)整，趨勢分析可視化，相關(guān)分析可視化，多指標(biāo)

數(shù)據(jù)可視化，圖層疊加，圖像組合，圖像保存等，然后對已經(jīng)整理好的數(shù)據(jù)進(jìn)行分析和給出

有價值的意見或建議。

1.技能要求

（1）數(shù)據(jù)可視化技術(shù)基本要求

①掌握matplotlib、pyplot常用的繪圖參數(shù)的調(diào)節(jié)方法；

②掌握圖形組合、子圖繪制的方法；

③掌握繪制圖形的保存與展示方法；

④掌握常用餅圖、柱狀圖等圖的作用與繪制方法。

（2）分析結(jié)果可視化要求

①掌握多指標(biāo)數(shù)據(jù)可視化的方法；

②掌握趨勢分析可視化的方法；

③掌握相關(guān)分析可視化的方法。

（3）數(shù)據(jù)可視化分析基本要求

①掌握數(shù)理統(tǒng)計(jì)分析等分析方法，并能初步進(jìn)市場預(yù)測；

②掌握數(shù)據(jù)分析報告撰寫方法；

③掌握趨勢分析可視化的方法；

④能夠使用專業(yè)知識分析企業(yè)數(shù)據(jù)中展示出來的企業(yè)運(yùn)營問題；

⑤能夠應(yīng)用現(xiàn)代計(jì)算工具和軟件分析數(shù)據(jù)資料。

2.素養(yǎng)要求

①具備良好的自學(xué)能力，關(guān)注互聯(lián)網(wǎng)新知識、新技術(shù)，有一定創(chuàng)新意識；

②理解業(yè)務(wù)背景，能夠完成真實(shí)業(yè)務(wù)邏輯向代碼轉(zhuǎn)換；

③具有一定的視覺審美能力、創(chuàng)新設(shè)計(jì)理念；

④具有高度的敬業(yè)精神及工作激情，工作態(tài)度積極樂觀。

3.完成時間：

2小時

四、評價標(biāo)準(zhǔn)

1.評分方式

本專業(yè)技能考核采取過程考核與結(jié)果考核相結(jié)合，技能考核與職業(yè)素養(yǎng)考核相結(jié)合。根

據(jù)考生操作的規(guī)范性、熟練程度和用時量等因素評價過程成績；根據(jù)設(shè)計(jì)作品、運(yùn)行測試結(jié)

果和提交文檔質(zhì)量等因素評價結(jié)果成績。

2.分值分配

本專業(yè)技能考核滿分為100分，其中專業(yè)技能占85分，職業(yè)素養(yǎng)占15分。

4

3.技能評價要點(diǎn)

根據(jù)模塊中考核項(xiàng)目的不同，重點(diǎn)考核學(xué)生對該項(xiàng)目所必須掌握的技能和要求。雖然不

同考試題目的技能側(cè)重點(diǎn)有所不同，但完成任務(wù)的工作量和難易程度基本相同。各考核內(nèi)容

的技能評價要點(diǎn)內(nèi)容如表2所示：

表2大數(shù)據(jù)技術(shù)專業(yè)技能考核評價要點(diǎn)

序號考核內(nèi)容評價要點(diǎn)

答題文件夾命名規(guī)范

各文件的命名規(guī)范

1職業(yè)素養(yǎng)代碼規(guī)范扣

變量名命名規(guī)范

考場禮儀規(guī)范

Python常用數(shù)據(jù)類型使用正確，代碼正確運(yùn)行

Python數(shù)據(jù)結(jié)構(gòu)理解正確，操作正確

Python數(shù)據(jù)控制流操作正確，選擇正確，思路正確

2Python程序設(shè)計(jì)

自定義函數(shù)正確編寫，調(diào)用成功

面對對象概念理解正確，類編寫正確，實(shí)例化成功

文件寫入成功，讀取成功

Hadoop核心組合理解正確，選擇正確

虛擬機(jī)安裝配置正確

JDK安裝正確

Hadoop平臺部署Hadoop完全分布式集群環(huán)境搭建正確

3

及應(yīng)用Hadoop集群的基本信息調(diào)用正確

HDFS基本操作編寫正確，操作正確

Hadoop相關(guān)組件Hive等正確使用

Hadoop組件的應(yīng)用理解正確

使用urllib3庫、Requests庫發(fā)送HTTP請求成功，選擇的請求方

法正確

4數(shù)據(jù)采集使用BeautifulSoup分析網(wǎng)頁信息正確

使用正則表達(dá)式提取網(wǎng)頁信息正確

使用XPath提取網(wǎng)頁信息正確

指定圖表類型（餅圖、柱狀圖等）繪制正確

圖形組合合理，繪制子圖方法正確

趨勢分析選擇圖形合理

相關(guān)分析選擇圖形合理

按照要求進(jìn)行了基本處理，如添加文字、邊框制作等，內(nèi)容

準(zhǔn)確、設(shè)計(jì)美觀

數(shù)據(jù)可視化與分

5背景分析全面、具體、正確

析

數(shù)據(jù)分析目標(biāo)結(jié)合公司實(shí)際情況，清晰具體有針對性，要有

數(shù)據(jù)表示，有圖表說明

數(shù)據(jù)分析對象應(yīng)準(zhǔn)確、直觀、符合邏輯

數(shù)據(jù)分析選擇要有針對性，符合企業(yè)實(shí)際情況與需要

數(shù)據(jù)分析方案設(shè)計(jì)創(chuàng)意好，圖文結(jié)合、美觀、直觀，與客戶

群體、主營業(yè)務(wù)等相契合

5

五、抽考方式

技能考核為現(xiàn)場操作考核，成績評定采用過程考核與結(jié)果考核相結(jié)合。具體方式如下：

1.學(xué)生抽取：從高職大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)全日制在籍大三學(xué)生隨機(jī)抽取20%參加技

能抽查考試（最少20人）。學(xué)生按應(yīng)考人數(shù)1：1.1比例抽取。確定抽查專業(yè)后，由現(xiàn)

場考評組長或考評人員從教務(wù)處提供的抽查全名單中隨機(jī)抽取學(xué)生。

2.模塊抽簽：測試前，由現(xiàn)場考評組長或考評員根據(jù)專業(yè)技能抽查考試標(biāo)準(zhǔn)的模塊數(shù)

量確定不同模塊考生的數(shù)量，學(xué)生通過抽簽確定參考哪一個模塊。

3.試題抽簽：在學(xué)生參考模塊確定以后，由現(xiàn)場考評組長或考評員從考生對應(yīng)模塊的

已封存好的試題中抽取1道試題作為考生的測試題。

4.工位抽簽：參加測試的學(xué)生須要在測試前達(dá)到對應(yīng)的考場地點(diǎn)，考評員組織學(xué)生隨

機(jī)抽簽確定工位號，并登記備案。

六、附錄

（一）相關(guān)法律法規(guī)（摘錄）

1.中華人民共和國網(wǎng)絡(luò)安全法（中華人民共和國主席令第五十三號）

第二十一條國家實(shí)行網(wǎng)絡(luò)安全等級保護(hù)制度。網(wǎng)絡(luò)運(yùn)營者應(yīng)當(dāng)按照網(wǎng)絡(luò)安全等級保護(hù)

制度的要求，履行下列安全保護(hù)義務(wù)，保障網(wǎng)絡(luò)免受干擾、破壞或者未經(jīng)授權(quán)的訪問，防止

網(wǎng)絡(luò)數(shù)據(jù)泄露或者被竊取、篡改：

（一）制定內(nèi)部安全管理制度和操作規(guī)程，確定網(wǎng)絡(luò)安全負(fù)責(zé)人，落實(shí)網(wǎng)絡(luò)安全保護(hù)責(zé)

任；

（二）采取防范計(jì)算機(jī)病毒和網(wǎng)絡(luò)攻擊、網(wǎng)絡(luò)侵入等危害網(wǎng)絡(luò)安全行為的技術(shù)措施；

（三）采取監(jiān)測、記錄網(wǎng)絡(luò)運(yùn)行狀態(tài)、網(wǎng)絡(luò)安全事件的技術(shù)措施，并按照規(guī)定留存相關(guān)

的網(wǎng)絡(luò)日志不少于六個月；