2021年遼寧職業(yè)院校技能大賽高職組《大數(shù)據(jù)技術與應用》賽項 競賽規(guī)程

PAGEPAGEPAGE12021年遼寧省職業(yè)院校技能大賽高職組《大數(shù)據(jù)技術與應用》賽項競賽規(guī)程一、賽項名稱賽項編號：LNGZ2021-34賽項名稱：大數(shù)據(jù)技術與應用賽項組別：高職組賽項歸屬產(chǎn)業(yè)：電子信息類二、競賽目的通過本項目競賽，使高職學生能熟練大數(shù)據(jù)技術基礎、軟件開發(fā)相關技術、Hadoop及其生態(tài)組件部署與管理、數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)分析和數(shù)據(jù)可視化等大數(shù)據(jù)相關技術，促進大數(shù)據(jù)技術與應用專業(yè)建設與教學改革；推進高職學校與相關企業(yè)的合作，更好地實現(xiàn)工學結合的人才培養(yǎng)模式，為大數(shù)據(jù)行業(yè)培養(yǎng)高素質(zhì)的技能型人才。賽項圍繞大數(shù)據(jù)產(chǎn)業(yè)各個崗位的實際需求和要求進行設計，通過大賽搭建校企合作的平臺，深化產(chǎn)教融合，推進產(chǎn)教融合人才培養(yǎng)模式，提升大數(shù)據(jù)技術與應用專業(yè)及其他相關專業(yè)畢業(yè)生能力，推動院校和企業(yè)聯(lián)合培養(yǎng)大數(shù)據(jù)人才，加強學校教育與產(chǎn)業(yè)發(fā)展的有效銜接，促進職業(yè)院校信息類相關專業(yè)共同發(fā)展，為國家戰(zhàn)略規(guī)劃提供大數(shù)據(jù)領域的高素質(zhì)技能型人才。三、競賽內(nèi)容在規(guī)定時間內(nèi)完成Hadoop平臺及組件的部署管理、數(shù)據(jù)采集、數(shù)據(jù)清洗與分析、數(shù)據(jù)可視化、綜合分析等任務。具體內(nèi)容如下：序號考核環(huán)節(jié)考核知識點和技能點描述1Hadoop平臺及組件的部署管理Hadoop平臺安裝部署和基本配置考察Hadoop平臺及組件的部署能力，掌握常用的基本配置和命令，能夠部署和管理Hadoop高可用集群。Hadoop集群節(jié)點的動態(tài)增加與刪除Hadoop平臺相關組件部署與管理Hadoop平臺的高可用2數(shù)據(jù)采集使用開發(fā)者工具查看網(wǎng)頁源碼，分析網(wǎng)頁結構，明確數(shù)據(jù)采集對象考察學生多維度數(shù)據(jù)采集能力，包括對關系型數(shù)據(jù)庫、非關系型數(shù)據(jù)庫和網(wǎng)絡爬蟲技術的應用。構建數(shù)據(jù)采集請求，抓取網(wǎng)絡數(shù)據(jù)利用網(wǎng)絡爬蟲相關組件實現(xiàn)網(wǎng)絡數(shù)據(jù)爬取規(guī)則文件數(shù)據(jù)和關系型數(shù)據(jù)庫數(shù)據(jù)抓取以及數(shù)據(jù)同步非關系型數(shù)據(jù)庫數(shù)據(jù)抓取以及數(shù)據(jù)同步數(shù)據(jù)采集結果導出及數(shù)據(jù)庫推送3數(shù)據(jù)清洗與分析基于Hadoop平臺架構組件和多維度的數(shù)據(jù)采集，實現(xiàn)數(shù)據(jù)一致性檢查、無效值和缺省值的處理考察對分布式計算、分布式存儲系統(tǒng)、數(shù)據(jù)倉庫等綜合應用能力，使用Java、Python、Scala等開發(fā)語言，完成數(shù)據(jù)清洗、數(shù)據(jù)存儲、數(shù)據(jù)轉化、數(shù)據(jù)分析、數(shù)據(jù)預測及數(shù)據(jù)推送等一系列數(shù)據(jù)操作多表數(shù)據(jù)合并和離群值處理通過常見的數(shù)據(jù)分析算法，對數(shù)據(jù)進行標準化、離散化和多元化分析掌握數(shù)據(jù)倉庫導入、導出，利用數(shù)據(jù)倉庫相關命令或代碼實現(xiàn)數(shù)據(jù)多維度、多層次的分析對數(shù)據(jù)的查詢、整理和計算。進行編譯、打包、發(fā)布，執(zhí)行程序，完成數(shù)據(jù)處理、清洗。實現(xiàn)不同數(shù)據(jù)庫間的文件傳輸及轉換數(shù)據(jù)預測分析4數(shù)據(jù)可視化編寫后臺代碼實現(xiàn)數(shù)據(jù)庫訪問和數(shù)據(jù)整理通過常見的數(shù)據(jù)可視化方法，將數(shù)據(jù)分析結果以圖表的形式進行呈現(xiàn)，使用Python及Web前端等編程語言，實現(xiàn)數(shù)據(jù)源分析結果展現(xiàn)編寫Web前端代碼，對數(shù)據(jù)分析結果進行呈現(xiàn)5綜合分析通過知識技能，根據(jù)數(shù)據(jù)分析、預測及可視化結果進行分析，做出分析報告?？疾鞂W生對大數(shù)據(jù)技術與分析的綜合操作能力和業(yè)務分析能力四、競賽時間本賽項比賽時間為240分鐘。賽隊伍須按順序完成各項任務，但每項任務用時可自行掌握。在競賽前30分鐘，選手進行抽簽，確定技能競賽的工位號。競賽日程安排詳見表1。表1競賽日程安排表（以正式公布的比賽指南為準）日期時間內(nèi)容第一日8:00-14:00各參賽隊報到15:00-16:00選手熟悉賽場16:00-16:30領隊會、賽前說明第二日7:30-8:00領隊抽取場次簽及檢錄順序號8:00-8:10裁判長在監(jiān)督長監(jiān)督下，考試題目發(fā)布8:10-8:20賽場檢錄；競賽選手抽簽、確定競賽工位號8:20-8:30競賽選手進入賽位，檢查賽位設備；現(xiàn)場裁判發(fā)放題目、宣布競賽注意事項；8:30-12:30競賽13:00-15:30競賽成績評定，進行成績匯總15:30-17:00公布競賽成績,點評五、競賽試題本賽項不設理論考試，對操作技能進行綜合考核，競賽試題形式參考公開樣例試題，見本賽項規(guī)程的競賽內(nèi)容。六、競賽規(guī)則（一）參賽資格。參見2021年遼寧第十八屆職業(yè)院校技能大賽高職組第二批《大數(shù)據(jù)技術與應用》賽項比賽實施方案。（二）遵循準則。1.學生必須持本人身份證和參賽證參加比賽。2.參賽選手出場順序、位置由抽簽決定，不得擅自變更、調(diào)整。3.參賽選手提前15分鐘進入賽場，并按照指定位號參加比賽。遲到15分鐘者，取消比賽資格；比賽開始15分鐘后，選手方可離開賽場。4.選手在比賽過程中不得擅自離開賽場，如有特殊情況，需經(jīng)裁判同意。選手若需休息、飲水或去洗手間等，耗用時間計算在比賽時間內(nèi)。5.比賽結束時，參賽選手應立即停止操作，不得以任何理由拖延比賽時間。選手操作完成后，在《實際操作現(xiàn)場記錄表》上簽名確認，方可離開賽場。七、競賽環(huán)境（一）競賽環(huán)境安靜、整潔。須設立緊急疏散通道，醫(yī)療服務站。（二）比賽場地可容納20組隊同時比賽，且滿足賽項比賽所需的設備設施。（三）比賽場地不開放，不能現(xiàn)場觀摩參賽選手比賽，設置比賽現(xiàn)場的視頻直播供各隊領隊和指導教師觀看，保證公開、透明。（四）賽場有志愿服務人員，同時有治安人員維護比賽現(xiàn)場秩序與衛(wèi)生。八、技術規(guī)范《大數(shù)據(jù)技術與應用》賽項的技術規(guī)范將包括：相關專業(yè)的教育教學要求、行業(yè)、職業(yè)技術標準，以及根據(jù)高職目錄修訂后的大數(shù)據(jù)技術與應用相關專業(yè)人才培養(yǎng)標準和規(guī)范，適時地修訂本賽項遵循的技術規(guī)范。（一）基礎標準標準內(nèi)容GB/T11457-2006信息技術、軟件工程術語GB8566-88計算機軟件開發(fā)規(guī)范GB/T12991-2008信息技術數(shù)據(jù)庫語言SQL第1部分：框架GB/T21025-2007XML使用指南GB/T20009-2005信息安全技術數(shù)據(jù)庫管理系統(tǒng)安全評估準則

已發(fā)布GB/T20273-2006信息安全技術數(shù)據(jù)庫管理系統(tǒng)安全技術要求20100383-T-469信息技術安全技術信息安全管理體系實施指南（二）軟件開發(fā)標準標準內(nèi)容GB/T8566-2001信息技術軟件生存周期過程GB/T15853-1995軟件支持環(huán)境GB/T14079-1993軟件維護指南GB/T17544-1998信息技術軟件包質(zhì)量要求和測試九、技術平臺（一）競賽設備技術平臺軟硬件設備組成見表2、表3。表2《大數(shù)據(jù)技術與應用》賽項硬件設備清單序號設備名稱數(shù)量備注1服務器1支撐大數(shù)據(jù)競賽管理系統(tǒng)運行使用。內(nèi)嵌虛擬化資源管理控制端，作為虛擬化資源管理系統(tǒng)的計算資源、網(wǎng)絡資源和存儲資源的源節(jié)點。1、CPU模塊：2*2.3GHz2、內(nèi)存模塊：8*32GB3、硬盤模塊：6*600GBSAS10K4、網(wǎng)口：4端口千兆電接口網(wǎng)卡-360T-B25、1+1冗余電源2大數(shù)據(jù)競賽平臺（H3C-ADEkvm-DT）1系統(tǒng)基于kvm構建，可模擬大數(shù)據(jù)環(huán)境搭建、大數(shù)據(jù)采集、大數(shù)據(jù)預處理、大數(shù)據(jù)存儲及管理、大數(shù)據(jù)分析及挖掘、大數(shù)據(jù)展現(xiàn)和應用等貫穿大數(shù)據(jù)技術的相關知識點，提供大數(shù)據(jù)競賽管理系統(tǒng)所需的虛擬服務器，結構化、半結構化及非結構化數(shù)據(jù)的數(shù)據(jù)庫等基礎支撐環(huán)境；涵蓋分布式虛擬存儲技術，大數(shù)據(jù)獲取、存儲、組織、分析和決策操作的可視化技術。具體包括：Hadoop、HDFS、Hbase、Hive、MapReduce、Kafka、Spark、Storm、Mahout、MySQL、Echarts等，所涉及開發(fā)語言包括Java、Python、Scala、HTML、Javascript等。3PC機3競賽選手比賽使用。性能相當于i5處理器，8G以上內(nèi)存，1TB以上硬盤，顯示器要求1024*768以上。4交換機11.機架式交換機2.端口：≥24個10/100/1000Base-TX以太網(wǎng)端口；3.速度：10/100/1000Base；4.全千兆三層交換機，支持訪問控制。備注：實際賽場需要的服務器、PC機和交換機數(shù)量取決于參賽隊伍數(shù)量。軟件環(huán)境表3《大數(shù)據(jù)技術與應用》賽項軟件清單序號設備類型軟件類別軟件名稱、版本號1服務器集群大數(shù)據(jù)集群操作系統(tǒng)CentOS7.4大數(shù)據(jù)分析平臺組件Hadoop2.6.0Yarn2.6.0Zookeeper3.4.5Hive1.1.0Flume1.6.0Sqoop1.4kafka1.0Spark2.0數(shù)據(jù)庫MySQL5.72開發(fā)客戶端PC操作系統(tǒng)Windows1064位瀏覽器Chrome開發(fā)語言Python3.664bitJava8scala-2.11開發(fā)工具Pycharm2019（CommunityEdition）IDEA2019（CommunityEdition）數(shù)據(jù)采集組件RequestsScrapy數(shù)據(jù)可視化組件ECharts4.0.4FlaskJinja2Matplotlib輸入法拼音輸入法十、評分標準（一）制訂原則。大賽裁判工作按照公平、公正、公開的原則進行。以教育部頒布的職業(yè)學校相關專業(yè)教學指導方案和國家《大數(shù)據(jù)工程技術人員職業(yè)標準》規(guī)定的應知、應會的要求為評分原則，依據(jù)參賽選手整體表現(xiàn)綜合評定，全面評價參賽選手職業(yè)技能水平。（二）評分方法。1.裁判員選聘。按照職業(yè)院校技能大賽專家和裁判工作管理辦法相關制度建立2021年遼寧職業(yè)院校技能大賽賽項裁判庫。裁判長由大賽裁判委員會向大賽組委會推薦，由大賽組委會聘任。裁判長組建裁判組，執(zhí)行裁判長負責制。2.裁判員人數(shù)?？側藬?shù)為5人（其中裁判長1人，裁判員4人）。3.選手在完成任務之后，將任務完成結果拷貝至U盤中，由參賽選手隊長簽字確認（簽工位號）。評分采取分步得分、錯誤不傳遞、累計總分的計分方式。不計參賽選手的個人得分，只記錄團體得分。參賽隊提交比賽任務結束請求或者在比賽時間終止后，不得再進行任何操作。否則，視為比賽作弊，給參賽隊記警告一次。 在競賽過程中，選手如有不服從裁判判決、擾亂賽場秩序、舞弊等不文明行為，由裁判按照規(guī)定扣減相應分數(shù)并且給予警告，情節(jié)嚴重的取消競賽資格，競賽成績記0分，隊員退出比賽現(xiàn)場。4.成績審核方法。競賽結束后，由裁判長向裁判員核實競賽過程中有無異常。如無異常，成績單由裁判長簽字確認并封存直至公布成績時開啟。如有異常，在裁判長主持下，由專家組成員、裁判員、仲裁員和監(jiān)督員共同處理。5.成績公布方法。競賽成績經(jīng)復核無誤后，經(jīng)裁判長、監(jiān)督人員審核簽字后，以賽項組委會最終公布結果為準。競賽結束后，如參賽隊對比賽成績有異議，提出異議申訴或仲裁，可按照相關規(guī)定進行申訴和仲裁，按照仲裁結果公布競賽成績。評分標準表4《大數(shù)據(jù)技術與應用》賽項考核要點和評分標準任務考查點描述評分標準分值（分）Hadoop平臺及組件的部署管理（15分）組件、配置、管理按照Hadoop大數(shù)據(jù)平臺部署要求完成平臺安裝部署和基本配置，按要求完成平臺相關組件的部署與管理，以及集群節(jié)點的動態(tài)增刪和高可用部署。檢查平臺進程運行狀態(tài)，確定配置正確。主要評分點包括Linux系統(tǒng)基本操作、Hadoop平臺安裝、相關配置文件修改、平臺相關組件部署、集群節(jié)點的動態(tài)增刪、平臺高可用部署。15數(shù)據(jù)采集（20分）數(shù)據(jù)采集代碼編寫按照要求完成數(shù)據(jù)采集代碼的編寫，使得數(shù)據(jù)采集程序能夠正常運行，將采集到的數(shù)據(jù)保存在指定格式的路徑下。主要評分點包括數(shù)據(jù)采集請求構建、數(shù)據(jù)解析、數(shù)據(jù)存儲、數(shù)據(jù)文件操作。20數(shù)據(jù)清洗與分析（25分）數(shù)據(jù)清洗與分析代碼編寫完成對數(shù)據(jù)的查詢、整理和計算。進行編譯、打包、發(fā)布，并在服務器上執(zhí)行程序完成數(shù)據(jù)清洗工作，將清洗后的數(shù)據(jù)放置在指定路徑下。將清洗后的數(shù)據(jù)加載到數(shù)據(jù)倉庫后，根據(jù)項目需求使用命令或代碼，完成數(shù)據(jù)分析查詢，并將查詢結果導出為數(shù)據(jù)文件。主要評分點包括數(shù)據(jù)處理代碼編寫、數(shù)據(jù)文件解析、構建數(shù)據(jù)輸出格式、打包發(fā)布、數(shù)據(jù)清洗執(zhí)行。數(shù)據(jù)倉庫建庫、建表、查詢等處理。25數(shù)據(jù)可視化（20分）數(shù)據(jù)可視化代碼編寫通過編寫后臺數(shù)據(jù)訪問代碼完成數(shù)據(jù)可視化后臺開發(fā)，編寫前端Web界面實現(xiàn)數(shù)據(jù)分析結果可視化呈現(xiàn)。主要評分點包括可視化后臺代碼開發(fā)、可視化前端代碼開發(fā)、前端展示。20綜合分析（15分）文檔編寫根據(jù)項目要求，以數(shù)據(jù)可視化結果為依據(jù)，得出數(shù)據(jù)分析結論，生成分析報告并提交。主要評分點包括能夠按照賽項要求編寫結論，能夠按照要求提出正確的建議。15職業(yè)素養(yǎng)（5分）職業(yè)素養(yǎng)團隊分工明確合理、操作規(guī)范、文明競賽主要評分點包括：競賽團隊分工明確合理、操作規(guī)范、文明競賽。5十一、獎項設定參見2021年遼寧職業(yè)院校技能大賽高職組《大數(shù)據(jù)技術與應用》賽項比賽實施方案。十二、賽項安全管理（一）賽場組織與管理員應制定安保須知、安全隱患規(guī)避方法及突發(fā)事件預案，設立緊急疏散路線及通道等。確保比賽期間所有進入賽點車輛、人員需憑證入內(nèi)；嚴禁攜帶易燃易爆等危險品及比賽嚴令禁止的物品進入場地；場地設備設施均可安全使用。（二）參賽選手在參賽過程中，必須服從場內(nèi)裁判及工作人員的指揮，嚴格按照制作規(guī)程進行操作，正確使用器具及設備。（三）賽場設置警戒線，賽場24小時有人看管；比賽前一天起，賽場實行全方位封閉，除工作人員外，選手和指導老師等非工作人員不準進場。賽場設置聯(lián)網(wǎng)的監(jiān)控體系，可以對賽場進行24小時監(jiān)控。（四）裁判員在比賽前，宣讀安全注意事項，當現(xiàn)場出現(xiàn)突發(fā)事件時，應及時給予處置。（五）比賽期間發(fā)生意外事故，發(fā)現(xiàn)者應第一時間報告賽項執(zhí)委會，同時采取措施避免事態(tài)擴大。賽項執(zhí)委會應立即啟動預案予以解決并報告賽區(qū)執(zhí)委會。賽項出現(xiàn)重大安全問題可以停賽，是否停賽由賽區(qū)執(zhí)委會決定。事后，賽區(qū)執(zhí)委會應向大賽執(zhí)委會報告詳細情況。（六）因參賽隊伍原因造成重大安全事故的，取消其獲獎資格。（七）參賽隊伍有發(fā)生重大安全事故隱患，經(jīng)賽場工作人員提示、警告無效的，可取消其繼續(xù)比賽的資格。十三、申訴與仲裁1.申訴。（1）參賽隊對不符合競賽規(guī)定的設備、工具、軟件，有失公正的評判，以及對工作人員的違規(guī)行為等，均可提出申訴。（2）申訴應在競賽結束后2小時內(nèi)提出，超過時效將不予受理。申訴時，應按照規(guī)定的程序由參賽隊領隊向所在賽項裁判遞交書面申訴報告。報告應對申訴事件的現(xiàn)象、發(fā)生的時間、涉及到的人員、申訴依據(jù)與理由等進行充分、實事求是的敘述。事實依據(jù)不充分、僅憑主觀臆斷的申訴將不予受理。申訴報告須有申訴的參賽選手、領隊簽名。（3）賽項裁判長收到申訴報告后，應根據(jù)申訴事由組織裁判團隊進行審查，2小時內(nèi)書面通知申訴方，告知申訴處理結果。（4）申訴人不得無故拒不接受處理結果，不允許采取過激行為刁難、攻擊工作人員，否則視為放棄申訴。申訴人不滿意賽項裁判長的處理結果的，可向大賽仲裁組提出書面申請復議，復議申請須有參賽單位蓋章。2.仲裁。（1）大賽仲裁組負責受理大賽中出現(xiàn)的申訴復議并進行仲裁，以保證競賽順利進行和競賽結果公平、公正。（2）仲裁組的裁決為最終裁決，參賽隊不得因申訴或?qū)χ俨锰幚硪庖姴环Ｖ贡荣惢蜃淌?，否則按棄權處理。十四、競賽觀摩（一）觀摩對象。比賽期間將設學生技能直播區(qū)，邀請來自全區(qū)相關行業(yè)職業(yè)教育院校代表、優(yōu)秀教育工作者、專家學者、大型企業(yè)領導者、業(yè)界精英、專業(yè)學生等觀摩比賽。（二）觀摩方法及紀律要求。參加觀摩的代表須遵守大賽紀律，按照大賽組委會的組織有序觀摩。比賽期間，保持觀摩室安靜。凡觀摩人員均不得進入賽場內(nèi)部進行拍照、交流、觀看。十五、競賽須知（一）參賽隊須知。1.參賽隊名稱統(tǒng)一使用規(guī)定的院校全稱+隊數(shù)（如：遼寧職業(yè)技術學院1隊），本賽項為團體賽，不接受跨校組隊報名。2.參賽隊選手在報名獲得確認后，原則上不再更換，如籌備過程中，選手因故不能參賽，所在市教育主管部門需出具書面說明并按相關參賽選手資格補充人員并接受審核。競賽開始后，參賽隊不得更換參賽選手，若有參賽隊員缺席，則視為自動放棄競賽團體名次排名。3.參賽隊對大賽組委會以后發(fā)布的所有文件都要仔細閱讀，確切了解大賽時間安排、評判細節(jié)等，以保證順利參加大賽。4.參賽隊按照大賽賽程安排，憑大賽組委會頒發(fā)的參賽證和有效身份證件參加競賽及相關活動。5.參賽隊將通過抽簽決定比賽場地和比賽順序。6.對于本規(guī)則沒有規(guī)定的行為，裁判組有權做出裁決。在有爭議的情況下，仲裁工作組的裁決是最終裁決。7.本競賽項目的解釋權歸大賽組委會。（二）指導教師須知。1.做好賽前抽簽工作，確認比賽出場順序，協(xié)助大賽承辦方組織好本單位比賽選手的各項賽事相關事宜。2.做好本單位比賽選手的業(yè)務輔導、心理疏導和思想引導工作，對參賽選手及比賽過程報以平和、包容的心態(tài)，共同維護競賽秩序。3.自覺遵守競賽規(guī)則，尊重和支持裁判工作，不隨意進入比賽現(xiàn)場及其他禁止入內(nèi)的區(qū)域，確保比賽進程的公平、公正、順暢、高效。4.當本隊參賽選手對比賽進程中出現(xiàn)異常或疑問，應及時了解情況，客觀做出判斷，并做好選手的安撫工作，經(jīng)內(nèi)部進行協(xié)商，認為有必要時可在規(guī)定時限內(nèi)向賽項仲裁工作組反映情況或提出書面仲裁申請。（三）參賽選手須知。1.參賽選手報到后，憑身份證領取參賽證。參賽證為選手參賽的憑據(jù)。參賽選手一經(jīng)確認，中途不得任意更換，否則以作弊論處，比賽成績?nèi)∠?.參賽選手應持參賽有效證件，按競賽順序、項目場次和競賽時間，提前30分鐘到各考核項目指定地點接受檢錄、抽簽決定競賽工位號、機位號等。3.檢錄后的選手，應在工作人員的引進下，提前15分鐘到達競賽現(xiàn)場，從競賽計時開始，比賽開始15分鐘后，選手未到即取消該項目的參賽資格。4.參賽選手進入賽場，應佩戴參賽證，做到衣著整潔，符合安全生產(chǎn)及競賽要求。5.比賽需連續(xù)進行，比賽一旦計時開始不能無故終止比賽。比賽過程中，參賽選手必須嚴格遵守競賽紀律，并接受裁判員的監(jiān)督和警示。若比賽過程中出現(xiàn)設備問題，由裁判長視具體情況做出裁決，并現(xiàn)場記錄予以加時。6.參賽選手應認真閱讀各項目競賽操作須知，自覺遵守賽場紀律，按競賽規(guī)則、項目與賽場要求進行競賽，不得攜帶任何書面或電子資料、U盤、手機等電子或通訊設備進入賽場，不得有任何舞弊行為，否則視情節(jié)輕重執(zhí)行賽場紀律。7.競賽期間，競賽選手應服從裁判評判，若對裁判評分產(chǎn)生異議，不得與裁判爭執(zhí)、頂撞，但可于項目比賽結束后兩小時內(nèi)由領隊以書面形式向賽項裁判長提出書面仲裁申請。由賽項裁判長組織團隊調(diào)查核實并于接到仲裁書面申請兩小時內(nèi)給與回復。8.參加技能操作競賽的選手如提前完成作業(yè)，選手應在指定的區(qū)域等待，經(jīng)裁判同意方可離開賽場。9.競賽過程中如因競賽設備或檢測儀器發(fā)生故障，應及時報告裁判，不得私自處理，否則取消本場次比賽資格。十六、本競賽項目的最終解釋權歸大賽組委會。2021年4月21日賽項裁判長簽字：

大數(shù)據(jù)技術與應用賽項競賽試題（樣卷）近年來隨著IT產(chǎn)業(yè)的加速發(fā)展，全國各地對IT類的人才需求也越來越多“ABC公司”為了明確今后IT產(chǎn)業(yè)人才培養(yǎng)方向，在多地進行IT公司崗位情況調(diào)研分析。你所在的小組將承擔模擬調(diào)研分析的任務，通過在招聘網(wǎng)站進行招聘信息的爬取，獲取到公司名稱、工作地點、崗位名稱、招聘要求、招聘人數(shù)等信息，并通過對數(shù)據(jù)的清洗和分析，得出各地域招聘人數(shù)，“大數(shù)據(jù)”相關職位招聘數(shù)量，以繪制雷達圖展示各地平均薪資情況。為完成該項任務，你所在的小組計劃選用在業(yè)界廣泛應用的“Python和JAVA”語言，作為整個項目的基礎語言，并綜合利用requests模塊、MapReduce、MySQL、Flask開源框架、Jinja2模板引擎和ECharts組件提高開發(fā)效率并實現(xiàn)項目要求，由于本次為模擬任務，總數(shù)據(jù)量不會過大，項目組計劃使用分布式節(jié)點Hadoop模式，本次項目環(huán)境搭建采用服務器集群方式，配置了小規(guī)模的技術演示環(huán)境，通過在招聘網(wǎng)站上爬取到的相關信息，使用requests模塊、Hive、Python、JAVA等手段對數(shù)據(jù)進行爬取、清洗、整理、計算、表達、分析，力求實現(xiàn)對IT人才就業(yè)信息擁有更清晰的掌握。請按照下面步驟完成本次技術展示任務，并提交技術報告。任務一：Hadoop相關組件安裝部署（15分）當前環(huán)境中已安裝Hadoop運行環(huán)境和MySQL數(shù)據(jù)庫，相關安裝信息如下表所示，請在此環(huán)境基礎上按照相關操作步驟安裝Hive組件。將指定路徑下的Hive安裝包解壓并更名；設置Hive環(huán)境變量；編輯Hive相關配置文件；初始化