智慧校園大數(shù)據(jù)平臺建設(shè)和運營整體解決方案

智慧校園大數(shù)據(jù)云平臺建設(shè)和運營整體解決方案智慧校園大數(shù)據(jù)平臺建設(shè)和運營一體化整體解決方案V6.01智慧校園大數(shù)據(jù)云平臺建設(shè)方案目錄TOC\o"1-6"\h\z\u第1章 建設(shè)思路和建設(shè)目標(biāo) 智慧校園大數(shù)據(jù)總體規(guī)劃2015年是中國的智慧校園大數(shù)據(jù)元年，政府、企業(yè)、學(xué)校、研究者、管理者、教師、社會公眾等都開始關(guān)注智慧校園大數(shù)據(jù)，相關(guān)政策文件、研究機構(gòu)、學(xué)術(shù)活動、市場產(chǎn)品等開始紛紛出現(xiàn)。然而，我國的智慧校園大數(shù)據(jù)研究與實踐領(lǐng)域整體還處于起步探索階段，是在“摸著石頭過河”，涉及一系列關(guān)鍵問題亟待解決（如教育數(shù)據(jù)的自然采集、教育數(shù)據(jù)的安全管理與隱私保護(hù)、教育數(shù)據(jù)的無縫流轉(zhuǎn)與開放共享、教育數(shù)據(jù)的深度挖掘以及學(xué)習(xí)分析等）。其中，教育數(shù)據(jù)的全面、自然、動態(tài)、持續(xù)采集是構(gòu)建智慧校園大數(shù)據(jù)的基礎(chǔ)性和先導(dǎo)性工作，這就需要厘清一些基本問題：教育數(shù)據(jù)的產(chǎn)生源頭在哪里？哪些數(shù)據(jù)需要采集？有哪些常用的數(shù)據(jù)采集技術(shù)？采集時需要注意什么？大數(shù)據(jù)發(fā)展分析智慧校園大數(shù)據(jù)建設(shè)背景戰(zhàn)略機遇培養(yǎng)大數(shù)據(jù)人才、利用智慧校園大數(shù)據(jù)深化智慧校園管理促進(jìn)智慧校園改革發(fā)展、使用大數(shù)據(jù)平臺提高智慧校園科研水平和效率，既是智慧校園面臨的重要任務(wù)，也是智慧校園發(fā)展的戰(zhàn)略機遇。大數(shù)據(jù)正在逐漸成為社會基礎(chǔ)設(shè)施，成為每一家組織機構(gòu)的標(biāo)配?！按髷?shù)據(jù)”之“大”，更多的意義在于：人類可以“分析和利用”的數(shù)據(jù)在大量增加，通過這些數(shù)據(jù)的交換、整合和分析，人類可以發(fā)現(xiàn)新的知識，創(chuàng)造新的價值，并讓很多常態(tài)化的認(rèn)知、判斷、思維定式、產(chǎn)品形態(tài)、服務(wù)模式，形成全新的面貌和演進(jìn)方向。

大數(shù)據(jù)已經(jīng)引起國際社會的高度重視，世界各國都在加快推進(jìn)大數(shù)據(jù)戰(zhàn)略布局。大數(shù)據(jù)產(chǎn)業(yè)已上升至國家戰(zhàn)略高度，正日益滲透到經(jīng)濟發(fā)展和社會生活的方方面面。2015年9月5日，國務(wù)院發(fā)布《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》，文件指出“數(shù)據(jù)已經(jīng)成為國家基礎(chǔ)性戰(zhàn)略資源”，并在啟動的十大工程之一“公共服務(wù)大數(shù)據(jù)工程”中明確提出要建設(shè)教育文化大數(shù)據(jù)。

智慧校園大數(shù)據(jù)已經(jīng)上升到國家戰(zhàn)略層面，引起社會各界的廣泛關(guān)注和高度重視。智慧校園大數(shù)據(jù)將首先破解傳統(tǒng)教育面臨的六大難題（發(fā)展不均衡難題、方式單調(diào)化難題、信息隱形化難題、決策粗放化難題、擇校感性化難題、就業(yè)盲目化難題），助推教育的全方位變革與創(chuàng)新發(fā)展。

確立智慧校園大數(shù)據(jù)在我國教育事業(yè)發(fā)展與改革中的戰(zhàn)略地位已是國家教育現(xiàn)代化建設(shè)的必然要求。智慧校園大數(shù)據(jù)是重要的國家戰(zhàn)略資產(chǎn)、教育領(lǐng)域綜合改革的科學(xué)力量與發(fā)展智慧校園的基石。

人類社會已經(jīng)迎來“大數(shù)據(jù)時代”。培養(yǎng)大數(shù)據(jù)人才、利用智慧校園大數(shù)據(jù)深化智慧校園管理促進(jìn)智慧校園改革發(fā)展、使用大數(shù)據(jù)平臺提高智慧校園科研水平和效率，既是智慧校園面臨的重要任務(wù)，也是智慧校園發(fā)展的戰(zhàn)略機遇。大數(shù)據(jù)產(chǎn)業(yè)政策支持目前政策對大數(shù)據(jù)的支持力度正不斷提升，大數(shù)據(jù)已上升至國家戰(zhàn)略。自去年3月“大數(shù)據(jù)”首次出現(xiàn)在《政府工作報告》中以來，國務(wù)院常務(wù)會議一年內(nèi)6次提及大數(shù)據(jù)運用。在6月17日的國務(wù)院常務(wù)會議上，總理李克強再次強調(diào)大數(shù)據(jù)運用的重要性。7月1日，國務(wù)院辦公廳印發(fā)了《關(guān)于運用大數(shù)據(jù)加強對市場主體服務(wù)和監(jiān)管的若干意見》。9月5日電經(jīng)李克強總理簽批，國務(wù)院日前印發(fā)《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》，系統(tǒng)部署大數(shù)據(jù)發(fā)展工作。其中，也提到了智慧校園大數(shù)據(jù)系統(tǒng)的建設(shè)。2015年12月21日，《中國基礎(chǔ)智慧校園大數(shù)據(jù)發(fā)展白皮書》首次研討會在京召開，對全國智慧校園大數(shù)據(jù)的建設(shè)給予探索和指導(dǎo)參考意義。智慧校園大數(shù)據(jù)的來源教育是一個超復(fù)雜的系統(tǒng)，涉及教學(xué)、管理、教研、服務(wù)等諸多業(yè)務(wù)。與金融系統(tǒng)具有清晰、規(guī)范、一致化的業(yè)務(wù)流程所不同的是，不同地區(qū)、不同學(xué)校的教育業(yè)務(wù)雖然具有一定的共性，但差異性也很突出，而業(yè)務(wù)的差異性直接導(dǎo)致教育數(shù)據(jù)來源更加多元、數(shù)據(jù)采集更加復(fù)雜。智慧校園大數(shù)據(jù)產(chǎn)生于各種教育實踐活動，既包括校園環(huán)境下的教學(xué)活動、管理活動、科研活動以及校園生活，也包括家庭、社區(qū)、博物館、圖書館等非正式環(huán)境下的學(xué)習(xí)活動；既包括線上的教育教學(xué)活動，也包括線下的教育教學(xué)活動。智慧校園大數(shù)據(jù)的核心數(shù)據(jù)源頭是“人”和“物”——“人”包括學(xué)生、教師、管理者和家長，“物”包括信息系統(tǒng)校園網(wǎng)站、服務(wù)器、多媒體設(shè)備等各種教育裝備。依據(jù)來源和范圍的不同，可以將智慧校園大數(shù)據(jù)分為個體智慧校園大數(shù)據(jù)、課程智慧校園大數(shù)據(jù)、班級智慧校園大數(shù)據(jù)、學(xué)校智慧校園大數(shù)據(jù)、區(qū)域智慧校園大數(shù)據(jù)、國家智慧校園大數(shù)據(jù)等六種，它們從下向上、從小到大逐級匯聚：個體智慧校園大數(shù)據(jù)包括教育部2012年正式發(fā)布的《教育管理信息化系列行業(yè)標(biāo)準(zhǔn)（教技[2012]3號）》中規(guī)定采集的教職工與學(xué)生的基礎(chǔ)信息、用戶各種行為數(shù)據(jù)（如學(xué)生隨時隨地的學(xué)習(xí)行為記錄、管理人員的各種操作行為記錄、教師的教學(xué)行為記錄等）以及用戶狀態(tài)描述數(shù)據(jù)（如學(xué)習(xí)興趣、動機、健康狀況等）。課程智慧校園大數(shù)據(jù)是指圍繞課程教學(xué)而產(chǎn)生的相關(guān)教育數(shù)據(jù)，包括課程基本信息、課程成員、課程資源、課程作業(yè)、師生交互行為、課程考核等數(shù)據(jù)，其中課程成員數(shù)據(jù)來自個體層，用于描述與學(xué)生課程學(xué)習(xí)相關(guān)的個人信息。班級智慧校園大數(shù)據(jù)是指以班級為單位采集的各種教育數(shù)據(jù)，包括班級每位學(xué)生的作業(yè)數(shù)據(jù)、考試數(shù)據(jù)、各門課程學(xué)習(xí)數(shù)據(jù)、課堂實錄數(shù)據(jù)、班級管理數(shù)據(jù)等。學(xué)校智慧校園大數(shù)據(jù)主要包括標(biāo)準(zhǔn)規(guī)定的各種學(xué)校管理數(shù)據(jù)（如概況、學(xué)生管理、辦公管理、科研管理、財務(wù)管理等）、課堂教學(xué)數(shù)據(jù)、教務(wù)數(shù)據(jù)、校園安全數(shù)據(jù)、設(shè)備使用與維護(hù)數(shù)據(jù)、教室實驗室等使用數(shù)據(jù)、學(xué)校能耗數(shù)據(jù)以及校園生活數(shù)據(jù)。區(qū)域智慧校園大數(shù)據(jù)主要來自學(xué)校以及社會培訓(xùn)與在線教育機構(gòu)，包括國家標(biāo)準(zhǔn)規(guī)定的教育行政管理數(shù)據(jù)、區(qū)域教育云平臺產(chǎn)生的各種行為與結(jié)果數(shù)據(jù)、區(qū)域教研等所需的各種教育資源、各種區(qū)域?qū)用骈_展的教學(xué)教研與學(xué)生競賽活動數(shù)據(jù)以及各種社會培訓(xùn)與在線教育活動數(shù)據(jù)。國家智慧校園大數(shù)據(jù)主要匯聚了來自各區(qū)域產(chǎn)生的各種教育數(shù)據(jù)，側(cè)重教育管理類數(shù)據(jù)。智慧校園大數(shù)據(jù)采集技術(shù)圖譜教育數(shù)據(jù)的采集需要綜合應(yīng)用多種技術(shù)，每種技術(shù)采集的數(shù)據(jù)范圍和重點都有所不同。圖2展示了教育數(shù)據(jù)采集的技術(shù)體系，共包括4大類、13種常見數(shù)據(jù)采集技術(shù)。智慧校園大數(shù)據(jù)建設(shè)面臨問題大數(shù)據(jù)是智慧校園行業(yè)躍遷的新變量，但目前也面臨著諸多挑戰(zhàn)：產(chǎn)品同質(zhì)化嚴(yán)重主要以考量測評類產(chǎn)品為主，重點聚焦于如何“提分”；盲目跟風(fēng)現(xiàn)象嚴(yán)重，產(chǎn)品同質(zhì)化且差異不大。分析端是整體短板目前的產(chǎn)品多集中在關(guān)系維系端和數(shù)據(jù)存儲端，缺乏深度數(shù)據(jù)分析；教育行業(yè)數(shù)據(jù)半結(jié)構(gòu)化、非結(jié)構(gòu)化突出，在分析端技術(shù)整體不成熟。缺乏統(tǒng)一的行業(yè)標(biāo)準(zhǔn)行業(yè)正在重走教育信息化早期發(fā)展階段的“老路”，盲目混亂發(fā)展；專門針對智慧校園大數(shù)據(jù)的標(biāo)準(zhǔn)制定工作還未正式啟動。大數(shù)據(jù)價值尚未體現(xiàn)整個行業(yè)缺乏有影響的大數(shù)據(jù)實踐案例，普遍對價值認(rèn)可不足；缺乏有影響案例的情況下，大數(shù)據(jù)定價缺乏依據(jù)和標(biāo)準(zhǔn)。數(shù)據(jù)模型的科學(xué)性不足教育業(yè)務(wù)具有異常的復(fù)雜性和獨特性，目前大多數(shù)產(chǎn)品僅靠IT思路構(gòu)建教育數(shù)據(jù)庫，在數(shù)據(jù)源選擇和指標(biāo)、權(quán)重設(shè)計方面往往脫離實際。數(shù)據(jù)的權(quán)利制度未明確教育數(shù)據(jù)的歸屬權(quán)、開放范圍、開放方式、隱私保護(hù)等還無清晰界定；在提供教育數(shù)據(jù)產(chǎn)品與服務(wù)中，往往存在極大的政策風(fēng)險。數(shù)據(jù)規(guī)模日益龐大數(shù)據(jù)來源多元化，共享數(shù)據(jù)庫涵蓋系統(tǒng)多，智慧校園生源不斷擴張，信息不斷積累，致使數(shù)據(jù)庫中的信息不斷增加，進(jìn)而為數(shù)據(jù)挖掘、管理和分析帶來了困難。缺乏穩(wěn)定高效的大數(shù)據(jù)環(huán)境智慧校園不同學(xué)科與專業(yè)采用的大數(shù)據(jù)環(huán)境大多依賴現(xiàn)有的IT環(huán)境，導(dǎo)致大數(shù)據(jù)運行的基礎(chǔ)軟硬件環(huán)境比較混亂且極其不穩(wěn)定，缺乏有效的運維管理，嚴(yán)重影響教學(xué)和科研工作的正常進(jìn)行。數(shù)據(jù)利用不充分校園的信息仍然停留在收集和累積階段，盡管移動終端系統(tǒng)的不斷發(fā)展為信息采集帶來了極大的便利，但采集后的數(shù)據(jù)僅僅停留在查詢階段，并沒有對數(shù)據(jù)進(jìn)行整合、分析和梳理，使得這些信息仍未被管理者采用，作為決策依據(jù)的信息則少之又少。數(shù)據(jù)驅(qū)動帶來的科研新挑戰(zhàn)數(shù)據(jù)劇增由量變引起質(zhì)變，使科研人員的思維和行為模式在傳統(tǒng)的學(xué)科研究領(lǐng)域發(fā)生轉(zhuǎn)變。如何借助大數(shù)據(jù)相關(guān)技術(shù)以及資源，找到本學(xué)科研究成果的新視角，已經(jīng)成為當(dāng)前智慧校園研究的重要課題。智慧校園大數(shù)據(jù)云平臺建設(shè)原則數(shù)據(jù)采集是建設(shè)智慧校園大數(shù)據(jù)的基礎(chǔ)性、先導(dǎo)性工作。隨著很多新型技術(shù)（如眼動追蹤技術(shù)、語音交互技術(shù)、體感技術(shù)等）的逐步成熟，將有越來越多的數(shù)據(jù)采集技術(shù)應(yīng)用到教育領(lǐng)域，推動智慧校園大數(shù)據(jù)更加實時、連續(xù)、便捷的采集。為了保證高質(zhì)量教育數(shù)據(jù)的可持續(xù)性采集，教育數(shù)據(jù)采集在實踐過程中需要注意如下事項：要提前規(guī)劃設(shè)計智慧校園大數(shù)據(jù)的建設(shè)與應(yīng)用是一項系統(tǒng)工程，需要進(jìn)行頂層設(shè)計，以便有目的、有序地采集高質(zhì)量教育數(shù)據(jù)。規(guī)劃設(shè)計的內(nèi)容包括：數(shù)據(jù)采集的范圍、使用的數(shù)據(jù)采集技術(shù)、數(shù)據(jù)采集環(huán)境的部署、數(shù)據(jù)采集質(zhì)量的保障措施、采集數(shù)據(jù)的應(yīng)用目的和場景、數(shù)據(jù)的存儲方案、數(shù)據(jù)的更新機制、數(shù)據(jù)的交換標(biāo)準(zhǔn)等。不同層級的教育數(shù)據(jù)采集應(yīng)當(dāng)有不同的側(cè)重點——國家智慧校園大數(shù)據(jù)和區(qū)域智慧校園大數(shù)據(jù)應(yīng)以管理類數(shù)據(jù)采集為主，同時注重與社會、醫(yī)療、交通等領(lǐng)域大數(shù)據(jù)的關(guān)聯(lián)交叉分析與挖掘，重點服務(wù)教育政策的制定以及區(qū)域教育的均衡發(fā)展；學(xué)校、班級、課程大數(shù)據(jù)應(yīng)以教與學(xué)活動數(shù)據(jù)采集為主，重點服務(wù)教學(xué)質(zhì)量的提升；個體大數(shù)據(jù)應(yīng)以學(xué)習(xí)者個體的行為數(shù)據(jù)、狀態(tài)數(shù)據(jù)、情境數(shù)據(jù)等采集為主，重點服務(wù)學(xué)習(xí)者的個性化學(xué)習(xí)診斷和發(fā)展。要有清晰的邊界大數(shù)據(jù)雖然具有混雜性、來源多樣性等特征，數(shù)據(jù)的存儲成本也越來越低，但并非要囊括一切數(shù)據(jù)，沒有價值的數(shù)據(jù)是不值得收集和分析的。智慧校園大數(shù)據(jù)同樣如此，其采集應(yīng)當(dāng)有清晰的邊界，而非盲目采集任何教育活動數(shù)據(jù)。究竟要采集哪些數(shù)據(jù)，取決于數(shù)據(jù)的應(yīng)用目的。舉個例子，為了檢測評估學(xué)生的學(xué)習(xí)進(jìn)展，就需要對課程瀏覽、作業(yè)練習(xí)、交流互動、提問答疑等數(shù)據(jù)進(jìn)行實時采集和分析，而不必采集學(xué)生的飲食、運動等數(shù)據(jù)。當(dāng)然，我們并不否認(rèn)飲食、運動等數(shù)據(jù)在診斷學(xué)生體質(zhì)狀況方面的價值。這里所提的“數(shù)據(jù)邊界”是相對于具體的應(yīng)用目的而言的，任何數(shù)據(jù)分析模型的構(gòu)建都需要依賴特定的數(shù)據(jù)集合，唯有如此才能保證分析模型的有效性和分析結(jié)果的應(yīng)用價值。要保持連續(xù)性和規(guī)范性很多時候，僅憑某個學(xué)生的一次作業(yè)成績并不能說明什么問題，但如果將一個班級每位學(xué)生歷次的作業(yè)成績甚至作業(yè)的過程數(shù)據(jù)都全部采集到，便可以客觀評估學(xué)生的整體學(xué)習(xí)效果、發(fā)現(xiàn)學(xué)習(xí)盲點、診斷教學(xué)難點，開展針對性教學(xué)和個別化輔導(dǎo)，這時的作業(yè)數(shù)據(jù)便具有了“大”價值。智慧校園大數(shù)據(jù)的采集應(yīng)秉持“持續(xù)創(chuàng)造價值，規(guī)范提升價值”的理念。教育數(shù)據(jù)的采集一方面應(yīng)當(dāng)保持連續(xù)性，即根據(jù)前期規(guī)劃設(shè)計，定期、連續(xù)、有規(guī)律地采集各種教育數(shù)據(jù)，通過長時間累計從小數(shù)據(jù)生成大數(shù)據(jù)；另一方面，為了保證后期數(shù)據(jù)的融通互換和一致化處理，教育數(shù)據(jù)的采集應(yīng)遵循特定的技術(shù)標(biāo)準(zhǔn)和規(guī)范。目前，全國信息技術(shù)標(biāo)準(zhǔn)化技術(shù)委員會教育技術(shù)分技術(shù)委員會已在教育信息化標(biāo)準(zhǔn)研制方面做了大量的工作，有些技術(shù)標(biāo)準(zhǔn)已經(jīng)成為國標(biāo)，各應(yīng)用系統(tǒng)的研發(fā)應(yīng)當(dāng)遵循教育管理信息化標(biāo)準(zhǔn)、教育資源建設(shè)標(biāo)準(zhǔn)等。此外，國際上一些通用標(biāo)準(zhǔn)也值得借鑒，如IMS-QTI（問題與測試交互）標(biāo)準(zhǔn)、xAPI（學(xué)習(xí)體驗記錄）規(guī)范等。采集粒度要盡可能小數(shù)據(jù)粒度是指數(shù)據(jù)的細(xì)化和綜合程度。一般來說，細(xì)化程度越高，粒度越??；細(xì)化程度越低，粒度越大。數(shù)據(jù)采集應(yīng)處于一個合適的粒度級別，粒度的級別既不能太高也不能太低。這是因為，低的粒度級別能提供詳盡的數(shù)據(jù)，但要占用較多的存儲空間、需要較長的查詢時間；高的粒度級別能快速方便地進(jìn)行查詢，但不能提供過細(xì)的數(shù)據(jù)。就智慧校園大數(shù)據(jù)采集而言，在保證數(shù)據(jù)有效性的基礎(chǔ)上，數(shù)據(jù)粒度應(yīng)盡可能細(xì)，以便從中挖掘更多的潛在價值。傳統(tǒng)的教育數(shù)據(jù)以分?jǐn)?shù)為核心，一份作業(yè)、一張試卷最后采集到的僅僅是一個表征成績的數(shù)字符號，即采集的數(shù)據(jù)粒度比較大。如果基于在線學(xué)習(xí)平臺或點陣數(shù)碼筆技術(shù)能夠采集到每個學(xué)生的答題過程，如做題的順序、每道題的停留時間、答案修改次數(shù)等更細(xì)化的過程記錄數(shù)據(jù)，便能更加精準(zhǔn)地判斷學(xué)生在哪些知識點存有疑惑和答錯的具體原因（馬虎大意還是未掌握知識）。因此，可以說“小顆粒匯聚大數(shù)據(jù)，大數(shù)據(jù)蘊藏大價值”。智慧校園大數(shù)據(jù)數(shù)據(jù)源分析數(shù)據(jù)涉及面窄主要是數(shù)字化校園系統(tǒng)產(chǎn)生數(shù)據(jù)數(shù)據(jù)的維度少，業(yè)務(wù)來源不足有效數(shù)據(jù)量少數(shù)據(jù)量百GB到幾TB，數(shù)據(jù)量少以結(jié)構(gòu)化數(shù)據(jù)為主，達(dá)不到大數(shù)據(jù)要求數(shù)據(jù)接口不完善部份數(shù)據(jù)源有錯誤，數(shù)據(jù)不一致業(yè)務(wù)接口與數(shù)據(jù)結(jié)構(gòu)不規(guī)范智慧校園大數(shù)據(jù)服務(wù)用戶分析智慧校園類似一個小社會，用戶群體較多，各部門都存在大數(shù)據(jù)需求，而關(guān)注的內(nèi)容會有較大的區(qū)別。比如校領(lǐng)導(dǎo)關(guān)注全?；A(chǔ)數(shù)據(jù)和總體情況，用于戰(zhàn)略決策與發(fā)展評估。管理部門關(guān)注學(xué)生的生活、消費和心理狀態(tài)。教學(xué)部門關(guān)注學(xué)生成績情況、教師教學(xué)質(zhì)量和學(xué)生滿意度等。因此，這些特點決定了高教大數(shù)據(jù)的應(yīng)用模塊和類型會比較豐富。智慧校園大數(shù)據(jù)建設(shè)責(zé)任制問題智慧校園的特點是數(shù)量據(jù)并不算大，幾萬人規(guī)模的數(shù)據(jù)比起我們之前參與的電信幾百萬人的規(guī)模來說不算大，但數(shù)據(jù)源豐富，而且重視數(shù)據(jù)關(guān)聯(lián)分析。現(xiàn)階段有些智慧校園的大數(shù)據(jù)是由某些學(xué)院自已在搞，沒有從全校的層面來進(jìn)行統(tǒng)一部署，數(shù)據(jù)處于割裂的狀態(tài)，大數(shù)據(jù)價值不明顯。智慧校園大數(shù)據(jù)在很多學(xué)校屬于一把手工程，需要由學(xué)校高層領(lǐng)導(dǎo)牽頭，協(xié)調(diào)和部門的數(shù)據(jù)，并進(jìn)行統(tǒng)一的頂層設(shè)計和全校規(guī)劃，由具體的單位比如網(wǎng)絡(luò)中心來落地建設(shè)。校領(lǐng)導(dǎo)決策更加科學(xué)。教師教學(xué)更加便捷教學(xué)水平提升學(xué)生隨時隨地個性化學(xué)習(xí)。家長及時掌握子女在校情況。校園環(huán)境更加綠色、環(huán)保、安全信息化覆蓋范圍和服務(wù)水平有效提升教學(xué)管理與服務(wù)管理更加簡單高效服務(wù)水平不斷提升社會更多優(yōu)質(zhì)教育資源和科研成果開放共享建設(shè)目標(biāo)實現(xiàn)數(shù)據(jù)的共享和交換將學(xué)校各應(yīng)用系統(tǒng)的數(shù)據(jù)進(jìn)行集成和整合，使來源各異、種類不一的各類數(shù)據(jù)可以相互使用，豐富數(shù)據(jù)的來源，打破系統(tǒng)間的信息孤島，實現(xiàn)數(shù)據(jù)的共享和應(yīng)用。大數(shù)據(jù)的采集和存儲研制數(shù)據(jù)適配接口，對接校內(nèi)各應(yīng)用系統(tǒng)獲取各類異構(gòu)數(shù)據(jù)，并采用大數(shù)據(jù)主流的框架和系統(tǒng)對數(shù)據(jù)進(jìn)行統(tǒng)一存儲，為數(shù)據(jù)的挖掘和分析打好基礎(chǔ)。大數(shù)據(jù)分析與決策采用數(shù)據(jù)挖掘、數(shù)理統(tǒng)計等相關(guān)技術(shù)，構(gòu)建大數(shù)據(jù)分析框架，提取數(shù)據(jù)中隱含的、未知的、極具潛在應(yīng)用價值的信息和規(guī)律，為學(xué)校的教務(wù)管理、科研管理、學(xué)生管理、后勤管理等各項工作提供決策和指導(dǎo)。智慧校園大數(shù)據(jù)平臺建設(shè)意義智慧校園作為高科技人才以及創(chuàng)新技術(shù)的搖籃，承載著科研攻關(guān)和人才培養(yǎng)的雙重使命。在新的科技浪潮中，智慧校園應(yīng)瞄準(zhǔn)時代最前沿，將教學(xué)科研創(chuàng)新、專業(yè)人才培養(yǎng)與大數(shù)據(jù)緊密融合在一起，在更高起點上推動學(xué)校在大數(shù)據(jù)教學(xué)、科研以及創(chuàng)新方面再上新臺階。實現(xiàn)個性化學(xué)習(xí)集成教育數(shù)據(jù)挖掘與學(xué)習(xí)分析技術(shù)，持續(xù)采集學(xué)習(xí)行為數(shù)據(jù)，智能分析，推送適合的學(xué)習(xí)資源并進(jìn)行個性化學(xué)習(xí)建議。實現(xiàn)教育評價體系重構(gòu)采集教與學(xué)的全過程數(shù)據(jù)，全面客觀記錄學(xué)生成長軌跡，引導(dǎo)學(xué)生培養(yǎng)模式和教育質(zhì)量管理方式科學(xué)健康發(fā)展。實現(xiàn)科學(xué)研究范式轉(zhuǎn)型解決科研經(jīng)費等科研管理難題，提供便捷的技術(shù)支撐與人性化服務(wù)，提高研究的效率和結(jié)果的可信度。開啟“大數(shù)據(jù)創(chuàng)客”新模式完成創(chuàng)新應(yīng)用及發(fā)布，完善智慧校園信息化建設(shè)，提升智慧校園實力，加速創(chuàng)客成果轉(zhuǎn)化，推動創(chuàng)意實現(xiàn)產(chǎn)業(yè)化，打造具有影響力的“創(chuàng)客校園”。實現(xiàn)教學(xué)模式改革教學(xué)數(shù)據(jù)分析與預(yù)測，改變教學(xué)模式，實現(xiàn)個性化教育，調(diào)整教學(xué)方案，優(yōu)化教學(xué)方法，提高教學(xué)質(zhì)量。實現(xiàn)科學(xué)化教育管理注重相關(guān)關(guān)系識別，強調(diào)因果關(guān)系的確定，發(fā)現(xiàn)隱藏的、有用的信息，做好教育管理和決策工作的數(shù)據(jù)支持。智慧校園大數(shù)據(jù)需求分析政府部門政府部門依據(jù)統(tǒng)計報表制定各種指標(biāo)，指導(dǎo)教育發(fā)展工作，而利用大數(shù)據(jù)技術(shù)采集、挖掘、分析這類數(shù)據(jù)能夠更好地量化教育現(xiàn)狀，并用作制定教育資源分配建議、教育管理政策。資源分配分析某市、某省甚至全國生師比現(xiàn)狀與教學(xué)效果的關(guān)聯(lián)性，得出最佳生師比或指導(dǎo)性生師比，以此指導(dǎo)各地教師調(diào)動的相應(yīng)政策；分析學(xué)校農(nóng)村學(xué)生寄宿生比例，指導(dǎo)新校選址、舊校裁撤等事宜；對某智慧校園教室、實驗室的空置率或利用率做大數(shù)據(jù)分析，并依據(jù)分析結(jié)果權(quán)衡場地資源的再分配，將屬于某班級/年級/院系空置率高（利用率低）的場地調(diào)撥給其他場地使用緊張的班級/年級/院系。教育管理在學(xué)生綜合評價中，可先從學(xué)生體質(zhì)健康達(dá)標(biāo)率入手，配合專用傳感器，獲取學(xué)生體質(zhì)相關(guān)數(shù)據(jù)，運用大數(shù)據(jù)技術(shù)分析學(xué)生體質(zhì)與學(xué)生鍛煉時間、強度等內(nèi)容的相關(guān)性模型，并依此提出教學(xué)建議；通過對專任教師培訓(xùn)次數(shù)（人次/百人）指標(biāo)的分析，探討教師繼續(xù)培訓(xùn)與教學(xué)質(zhì)量的相關(guān)性；分析進(jìn)城務(wù)工人員隨遷子女的入學(xué)比例與該地經(jīng)濟發(fā)展、政策變動、人均收入增長等因素的相關(guān)性，得出與教學(xué)管理方案（新建學(xué)校、教師調(diào)動等）關(guān)聯(lián)的模型，指導(dǎo)教育部門制定合理的教學(xué)管理方案。教師教學(xué)資源精準(zhǔn)投放教學(xué)資源精準(zhǔn)投放，即準(zhǔn)確搜尋所需教案、教學(xué)課件、教學(xué)視頻或問題學(xué)生應(yīng)對方法等，在搜尋過程中還可參考課程大數(shù)據(jù)標(biāo)簽進(jìn)行篩選，找到合適的教學(xué)資源。教師教學(xué)評價通過教師行為大數(shù)據(jù)分析（包括課程設(shè)計類型、教學(xué)思維回路圖等），通過橫向縱向大數(shù)據(jù)比較，找到教師自身教學(xué)過程的問題所在，進(jìn)行針對性訓(xùn)練和輔導(dǎo)，最終得到教師教學(xué)評價。云題庫建設(shè)建立云題庫，并在年級、學(xué)科分類的基礎(chǔ)上，運用大數(shù)據(jù)進(jìn)行題目類型、知識點類型、難易程度、解題思路類型劃分，并貼上題目標(biāo)簽。教師可根據(jù)課程標(biāo)簽進(jìn)行智能組卷，或結(jié)合學(xué)生學(xué)習(xí)數(shù)據(jù)分析布置個性化作業(yè)。教師綜合評估在多次教學(xué)反饋，學(xué)生學(xué)習(xí)反饋的基礎(chǔ)上，形成教師綜合評估報告，對教師教學(xué)類型、教學(xué)優(yōu)勢、教學(xué)缺陷、學(xué)生類型匹配等做出全方位評價。學(xué)生通過學(xué)生行為大數(shù)據(jù)分析，洞悉學(xué)生學(xué)習(xí)思維的問題所在，進(jìn)行針對性訓(xùn)練提高。在學(xué)生弱項分析的基礎(chǔ)上，結(jié)合行為數(shù)據(jù)分析，提出針對性具體性的學(xué)習(xí)建議甚至學(xué)習(xí)方案。對學(xué)生學(xué)習(xí)歷程進(jìn)行記錄，根據(jù)學(xué)習(xí)進(jìn)度精準(zhǔn)推送所需教學(xué)資源。對目標(biāo)明確的學(xué)習(xí)（如資格考試），執(zhí)行大目標(biāo)分解成小目標(biāo)的學(xué)習(xí)計劃，分析用戶日常時間安排判斷學(xué)習(xí)計劃的可行性或提出學(xué)習(xí)時間安排建議。分析用戶學(xué)習(xí)進(jìn)度及特點，給出預(yù)測分?jǐn)?shù)和學(xué)習(xí)提升建議。教學(xué)管理分析學(xué)生學(xué)習(xí)風(fēng)格、能力模型、群體學(xué)習(xí)特點，對學(xué)生教學(xué)管理制度（如教學(xué)作息時刻表、教學(xué)設(shè)施建設(shè)等）給出指導(dǎo)意見；對學(xué)生教學(xué)管理制度（如教學(xué)作息時刻表、教學(xué)設(shè)施建設(shè)等）給出指導(dǎo)意見，對教師調(diào)配、教師教學(xué)能力提升做出具體要求；搜集學(xué)生行為數(shù)據(jù)（學(xué)生學(xué)習(xí)特點、時間安排等），通過大數(shù)據(jù)多維對比，找到問題學(xué)生（包括學(xué)習(xí)習(xí)慣問題、心理健康問題），及時做出針對性輔導(dǎo)。教育技術(shù)服務(wù)商平臺技術(shù)服務(wù)商平臺技術(shù)服務(wù)商的大數(shù)據(jù)技術(shù)用武之處應(yīng)用需求甚多。對于平臺技術(shù)服務(wù)商而言，最大的難點在于平臺頂層設(shè)計，即準(zhǔn)確把握用戶需求和平臺前景規(guī)劃。大數(shù)據(jù)技術(shù)雖不能直接擊中用戶需求，但能快速精準(zhǔn)地把握市場現(xiàn)狀，并給出趨勢預(yù)測分析。從這個角度上看，大數(shù)據(jù)技術(shù)對用戶需求的把握比傳統(tǒng)的問卷調(diào)查或?qū)嵉卣{(diào)研更具參考性和實用性。因此，大數(shù)據(jù)技術(shù)對平臺技術(shù)服務(wù)商的平臺建設(shè)極具指導(dǎo)意義。語音識別技術(shù)服務(wù)商語音識別技術(shù)服務(wù)商大數(shù)據(jù)前景廣闊，語音識別是一個熱點領(lǐng)域，除了教育應(yīng)用，還涉及眾多領(lǐng)域。語音識別的關(guān)鍵技術(shù)指標(biāo)是識別準(zhǔn)確率和識別速度，而這兩項指標(biāo)都能通過大數(shù)據(jù)技術(shù)進(jìn)行優(yōu)化。在建立龐大的語音和詞匯數(shù)據(jù)庫的基礎(chǔ)上，運用大數(shù)據(jù)技術(shù)匹配用戶說話內(nèi)容與語音庫，并根據(jù)詞匯數(shù)據(jù)庫理解用戶表達(dá)的意思。目前英語語音識別系統(tǒng)已經(jīng)在使用過程中逐步完善，但漢語語音識別由于漢語的復(fù)雜性，存在技術(shù)瓶頸，產(chǎn)品開發(fā)亟待突破。目前國內(nèi)教育領(lǐng)域語音識別技術(shù)龍頭企業(yè)為科大訊飛，所有省份的口語評測采用的都是科大訊飛的引擎。物聯(lián)網(wǎng)技術(shù)服務(wù)商物聯(lián)網(wǎng)技術(shù)服務(wù)商大數(shù)據(jù)應(yīng)用前景廣闊。物聯(lián)網(wǎng)技術(shù)和大數(shù)據(jù)技術(shù)是一對密不可分的兄弟，物聯(lián)網(wǎng)采集的數(shù)據(jù)需要大數(shù)據(jù)技術(shù)做分析，而大數(shù)據(jù)技術(shù)的開展需要物聯(lián)網(wǎng)技術(shù)進(jìn)行數(shù)據(jù)采集。教育平臺服務(wù)商平臺服務(wù)商是未來教育線上產(chǎn)業(yè)鏈建設(shè)的重點，而教育行業(yè)未來發(fā)展趨勢將是結(jié)合新型信息技術(shù)實現(xiàn)線上線下深度融合，因此大數(shù)據(jù)技術(shù)在平臺服務(wù)商的應(yīng)用被教育行業(yè)業(yè)內(nèi)人士廣泛看好。教育資源平臺教育資源云存儲，優(yōu)質(zhì)教育資源共享；教育資源標(biāo)簽化，方便教師和學(xué)生查找；資源精準(zhǔn)推送。教育管理平臺學(xué)生學(xué)習(xí)進(jìn)度管理、學(xué)習(xí)情況管理、學(xué)情分析；教師布置作業(yè)、批閱試卷、上傳課程資料等；師生雙方的教學(xué)評估。O2O平臺師生雙方精準(zhǔn)匹配；提高匹配效率。學(xué)習(xí)交流平臺用戶畫像；交流伙伴匹配。用戶用戶即學(xué)生和家長，家長是教育行業(yè)的主要付費者，前面介紹了學(xué)生需求，因此這里只關(guān)注家長端的大數(shù)據(jù)應(yīng)用。教育行業(yè)面向家長的業(yè)務(wù)主要在家校互動方面開展，可運用大數(shù)據(jù)技術(shù)在教育內(nèi)容信息化的基礎(chǔ)上將信息同步到家長端，家長反饋也可進(jìn)行大數(shù)據(jù)聚類分析。教育行業(yè)面向家長的業(yè)務(wù)主要在家?；臃矫骈_展，大數(shù)據(jù)技術(shù)可結(jié)合位置數(shù)據(jù)，在學(xué)生到校或到家時將抵達(dá)信息實時推送到家長端，變相解決教育行業(yè)安全問題。采集過程要符合倫理道德數(shù)據(jù)隱私與安全一直是大數(shù)據(jù)發(fā)展的障礙之一。教育數(shù)據(jù)的采集源頭來自廣大學(xué)生、教師、家長以及學(xué)校，數(shù)據(jù)繁雜多樣，其中成績、排名、家庭背景等諸多信息涉及個人隱私。目前，國內(nèi)在教育數(shù)據(jù)隱私保護(hù)方面的法律法規(guī)還不健全，學(xué)校、教育機構(gòu)等學(xué)生數(shù)據(jù)的保護(hù)意識亟待加強。由于監(jiān)管不到位，教育行業(yè)中不乏一些為了商業(yè)利益而私售師生以及家長信息的不良企業(yè)。不管出于研究、管理還是商業(yè)目的，任何教育數(shù)據(jù)在采集之前，都應(yīng)當(dāng)遵循教育數(shù)據(jù)采集倫理道德規(guī)范（建議相關(guān)部門盡快編制），數(shù)據(jù)產(chǎn)生主體也應(yīng)當(dāng)享有一定的知情權(quán)和選擇權(quán)。數(shù)據(jù)采集的初衷和最終目的應(yīng)該本著“服務(wù)教育發(fā)展、服務(wù)師生成長”的智慧校園大數(shù)據(jù)應(yīng)用場景分析政府部門生師比場景舉例運用大數(shù)據(jù)技術(shù)分析山西省小學(xué)生師比后發(fā)現(xiàn)，全省小學(xué)生師比為13.12，其中生師比為12.60-13.40的學(xué)校教學(xué)質(zhì)量普遍比其他學(xué)校更高，因此可以制定山西省指導(dǎo)性小學(xué)生師比為13.00.大數(shù)據(jù)還發(fā)現(xiàn)山西省南部生師比普遍高于13.00，北部生師比普遍低于13.00，因此山西省廳可制定小學(xué)教師資源向南部傾斜的政策。農(nóng)村學(xué)生寄宿生比例場景舉例黑龍江省農(nóng)村學(xué)生寄宿生比例為32%，但教育資源浪費現(xiàn)象太嚴(yán)重，需考慮通過并校、撤校的方式將教育資源集中起來。甲村和乙村是鄰村，通過大數(shù)據(jù)分析發(fā)現(xiàn)甲村寄宿生比例為20%，乙村寄宿生比例為50%，因此在考慮將甲村和乙村的學(xué)校合并時，由于乙村寄宿生比例較高，因此可撤掉乙村學(xué)校，鼓勵原乙村學(xué)校學(xué)生全部轉(zhuǎn)為寄宿生，有利于解決農(nóng)村學(xué)生裁并校后的住宿、就餐和上下學(xué)問題。教室、實驗室的空置率/利用率場景舉例結(jié)合物聯(lián)網(wǎng)，運用大數(shù)據(jù)技術(shù)分析后發(fā)現(xiàn)復(fù)旦大學(xué)新聞學(xué)院共計160個教研室的時間利用率/空間利用率僅有40%，而外語學(xué)院100個教研室使用率高達(dá)80%，場地非常緊張。因此，綜合考慮，復(fù)旦大學(xué)可將新聞學(xué)院的部分教研室劃分或借給外語學(xué)院使用，提高學(xué)校整體場地使用率，實現(xiàn)資源的再分配。學(xué)生體質(zhì)健康達(dá)標(biāo)率場景舉例分析河南省教育部門采集的學(xué)生體質(zhì)健康達(dá)標(biāo)率后發(fā)現(xiàn)，初中學(xué)生體質(zhì)健康達(dá)標(biāo)率平均為60%。而對比體質(zhì)健康達(dá)標(biāo)率在80%以上的學(xué)校和達(dá)標(biāo)率在60%以下的學(xué)校發(fā)現(xiàn)，同樣是一周兩節(jié)體育課的課表安排，大多達(dá)標(biāo)率高的學(xué)校安排的是足球、籃球、羽毛球等運動量較大的體育項目，而達(dá)標(biāo)率低的學(xué)校由于場地限制、經(jīng)費限制等諸多因素，只能進(jìn)行乒乓球、接力跑步、廣播體操等體育項目。因此，來年可以據(jù)此向教育管理部門提出教育經(jīng)費專項申請或變動體育課程項目安排，提高學(xué)生體質(zhì)健康達(dá)標(biāo)率。改革教學(xué)標(biāo)準(zhǔn)場景舉例某二線城市小學(xué)二年級的教學(xué)標(biāo)準(zhǔn)中，制定者認(rèn)為“run”這個詞要達(dá)到語用標(biāo)準(zhǔn)，但根據(jù)實際收集到的數(shù)據(jù)是能夠達(dá)到這個標(biāo)準(zhǔn)的學(xué)生不到20%，那么下一年，就可以做到這個詞的標(biāo)準(zhǔn)只需要達(dá)到認(rèn)知就可以了。教育機構(gòu)教師場景舉例教學(xué)資源精準(zhǔn)投放：廣西省某山村小學(xué)教師即將教到《少年閏土》，由于自身教學(xué)課件水平不高，希望找到一份適合廣西省使用的教學(xué)課件，便于當(dāng)?shù)貙W(xué)生理解。登錄某教育資源平臺后，通過“廣西”、“少年閏土”、“課件”、“圖片豐富”等關(guān)鍵詞搜索所需課件，再通過查看每個課件的課程標(biāo)簽快速找到所需資源。幾次以后，平臺通過大數(shù)據(jù)技術(shù)畫出了這位教師的教學(xué)畫像，并根據(jù)她的搜索間隔時間和六年級教學(xué)進(jìn)度安排表預(yù)測她以后需要的教學(xué)內(nèi)容，參照她以往選擇課件的課程標(biāo)簽精準(zhǔn)推送這位教師可能需要的教學(xué)資源，該教師登錄平臺后可立即收到平臺的推送信息，做出選擇。長此以往，隨著該教師行為數(shù)據(jù)的增加，可以做到教師無需登錄平臺直接通過郵箱（或其他方式）收取平臺通過大數(shù)據(jù)篩選后向她發(fā)送的教育資源。云題庫智能組卷：廣西省某教師即將要出一份期中考試考卷，希望在線上找到一些可供參考的題目。登錄某教育資源平臺云題庫系統(tǒng)后，先選擇六年級上學(xué)期數(shù)學(xué)題庫，再選擇上學(xué)期前三章內(nèi)容，就能看到一些期中考試試卷可供選擇。該教師選擇了一份標(biāo)簽為“適中”的試卷后，點擊選擇題部分即可進(jìn)入選擇題題庫根據(jù)考察知識點標(biāo)簽選擇所需更換的題目，再依次挑選填空題、判斷題、計算題、應(yīng)用題等各類題型進(jìn)行同樣的操作。在選擇過程中教師能清晰地看到已挑選題目的知識點標(biāo)簽數(shù)統(tǒng)計、難易題分?jǐn)?shù)統(tǒng)計，根據(jù)統(tǒng)計情況進(jìn)行適當(dāng)?shù)恼{(diào)整，最后選擇部分題目更改數(shù)字后，即能生成一份合適的期中考試試卷。學(xué)生場景舉例對小明進(jìn)行行為數(shù)據(jù)跟蹤，大數(shù)據(jù)分析后發(fā)現(xiàn)小明在英語課平均認(rèn)真聽講時間僅有30min/45min，英語選擇題錯誤率最高（30%），且以語法題為最（50%）。對小明做題過程進(jìn)行數(shù)據(jù)收集分析后認(rèn)為小明屬于思維緩慢、思路明確型學(xué)生，因此綜合來看，小明應(yīng)加強做題速度，且加強語法學(xué)習(xí)，另外還可給出選擇題做題技巧。某學(xué)生因計算失誤平均造成數(shù)學(xué)扣分10分，而同年級學(xué)生平均因計算失誤的扣分為18分，分析認(rèn)為該學(xué)生的計算弱勢并不明顯，可將學(xué)習(xí)精力先放在其他弱勢項上，平時對計算稍加注意即可。小紅想報名三個月后的雅思考試，目標(biāo)為6.5分，已通過英語六級考試500分。結(jié)合物聯(lián)網(wǎng)采集數(shù)據(jù)和通話數(shù)據(jù)，運用大數(shù)據(jù)技術(shù)分析后認(rèn)為小紅每日可學(xué)習(xí)時間僅有4小時，即使再縮減其他事務(wù)，最多只能學(xué)習(xí)6小時，且分布于中午和晚上。根據(jù)大數(shù)據(jù)對雅思考生的觀察，六級500分相當(dāng)于雅思5.5分，同水平考生平均花費3個月每天8小時進(jìn)行學(xué)習(xí)，最后雅思考試6.5分通過率為80%。因此不建議小紅參加3個月后的考試，建議小紅將學(xué)習(xí)時間延長到4個月，考試通過率較高。教學(xué)管理場景舉例大數(shù)據(jù)發(fā)現(xiàn)李老師和趙老師同為物理老師，班級平均分均為77分。李老師教導(dǎo)風(fēng)格屬于“全民提升型”，擅長講解基礎(chǔ)知識和難度適中的題型，全班物理成績在80-85分的人數(shù)占70%；而趙老師教導(dǎo)風(fēng)格屬于“優(yōu)升劣降”型，擅長講解提升型知識和難題偏題怪題，全班物理成績在90分以上人數(shù)和60分以下人數(shù)基本相等，且優(yōu)生和差生之和占全班人數(shù)的55%?；谶@種情況，可考慮讓李老師帶差生班，趙老師帶優(yōu)生班，發(fā)揮二人的教學(xué)特長。結(jié)合物聯(lián)網(wǎng)數(shù)據(jù)和家長反饋情況，發(fā)現(xiàn)廣東省某初中班級學(xué)生完成課后作業(yè)時間平均為2小時，低于1小時的學(xué)生占20%，高于3小時的學(xué)生占10%。在低于1小時的學(xué)生中，差生占40%，可將此情況告知教師和家長，督促學(xué)生認(rèn)真完成作業(yè)。在高于3小時的學(xué)生中，優(yōu)生占70%，可基于3小時完成的作業(yè)量的不同重點關(guān)注做題效率較低的優(yōu)生，由老師進(jìn)行針對性輔導(dǎo)，找到低效原因，提高做題速度。另外還可結(jié)合物聯(lián)網(wǎng)數(shù)據(jù)，對女生結(jié)伴上廁所的現(xiàn)象做統(tǒng)計，找到半年以來始終單獨上廁所的女生，重點關(guān)注這類群體的心理健康，提前排查學(xué)生心理問題。教育服務(wù)商技術(shù)服務(wù)商場景舉例平臺技術(shù)服務(wù)商通過整合各處外部數(shù)據(jù)（百度搜索數(shù)據(jù)、教育機構(gòu)學(xué)生數(shù)據(jù)、課程數(shù)據(jù)等），運用大數(shù)據(jù)技術(shù)分析后發(fā)現(xiàn)，用戶最感興趣的領(lǐng)域為語言培訓(xùn)（35%），語言培訓(xùn)中市場痛點為口語練習(xí)（60%），因此平臺應(yīng)主攻口語評測，結(jié)合用戶希望在口語練習(xí)中實現(xiàn)的功能或效果（重要度排名）。此外，根據(jù)用戶感興趣領(lǐng)域排名和市場分析，制定平臺功能實現(xiàn)步驟，做好頂層設(shè)計。語音識別技術(shù)服務(wù)商在建立語音數(shù)據(jù)庫的過程中，利用大數(shù)據(jù)技術(shù)進(jìn)行分類，將發(fā)音相似、意思相近的單詞、句子進(jìn)行歸類，在聽到用戶的語音后，迅速將聲波轉(zhuǎn)化為模擬信號，再轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù)，快速在語音數(shù)據(jù)庫中找到對應(yīng)單詞/句子，實現(xiàn)語音識別功能。平臺服務(wù)商場景舉例教育資源平臺在全省甚至全國教育資源平臺頂層設(shè)計的基礎(chǔ)上，搭建湖南省長沙市教育資源共享平臺，整合長沙市所有電子教學(xué)資源，并利用云存儲技術(shù)上傳到云端。師生即可通過互聯(lián)網(wǎng)便捷地查看云端教學(xué)資源，打破以往各縣各校的信息孤島，實現(xiàn)資源共享。某校在電子教學(xué)資源上傳時需要填寫每份資源的基本信息，包括年級、學(xué)科等，上傳成功后后臺通過采集用戶使用反饋，為各個教學(xué)資源貼上標(biāo)簽，如“適合優(yōu)生”“不易理解”“中英文字幕”等，便于用戶篩選合適的教學(xué)資源。教育資源精準(zhǔn)推送可參考前文應(yīng)用場景教育機構(gòu)中關(guān)于教師的第一個場景。O2O平臺吳女士希望為自己初二的女兒找到一位周末補習(xí)物理的教師，學(xué)生基礎(chǔ)薄弱，希望先補習(xí)光、聲部分。吳女士向O2O平臺提交女兒學(xué)習(xí)需求后，后臺結(jié)合地圖出行數(shù)據(jù)后利用大數(shù)據(jù)技術(shù)迅速鎖定了一位周六上午空閑的物理老師，該教師擅長補缺，具有7年教齡，且距離吳女士家里路程為步行30分鐘。將這個匹配結(jié)果告知教師、家長雙方后，兩方都對這個結(jié)果非常滿意，課程試講后提升效果也不錯。學(xué)習(xí)交流平臺整合全國智慧校園的bbs平臺，連接k12階段的學(xué)生和大學(xué)在校生，通過平臺交流的方式幫助學(xué)生在上大學(xué)前形成對未來所選專業(yè)的一個基本認(rèn)識。隨著平臺覆蓋范圍以及提問問題的增長，可以利用大數(shù)據(jù)技術(shù)進(jìn)行有效整理分析，規(guī)劃出清晰的指導(dǎo)路線，比如針對一個對任何專業(yè)都不了解的學(xué)生，可以設(shè)計系統(tǒng)提問判斷環(huán)節(jié)，引導(dǎo)學(xué)生選擇一個專業(yè)方向繼續(xù)深入了解。用戶用戶即學(xué)生和家長，由于家長是教育行業(yè)的主要付費者，因此我們分學(xué)生和家長兩類應(yīng)用場景做分析。家長雖不是教育行業(yè)的直接受眾，但其擔(dān)任付費者、監(jiān)護(hù)者的身份，可以構(gòu)建出不少大數(shù)據(jù)應(yīng)用場景，如學(xué)校和學(xué)生家里教育內(nèi)容同步管理分析、學(xué)生安全定位系統(tǒng)分析等。以保障學(xué)生安全為目的的實時了解學(xué)生動態(tài)系統(tǒng)，結(jié)合LBS技術(shù)，記錄分析學(xué)生日常學(xué)習(xí)期間行動路徑，實現(xiàn)分析異常狀況及時推送到家長、學(xué)校端，解決教育行業(yè)安全問題。整合后的學(xué)生動態(tài)數(shù)據(jù)除了最直接的學(xué)生安全服務(wù)外，結(jié)合其他影響指標(biāo)可以生成新的大數(shù)據(jù)應(yīng)用場景（比如分析學(xué)生去圖書館、體育場次數(shù)停留時長等數(shù)據(jù)）。此外，家長和學(xué)生所處的社會環(huán)境不同，關(guān)注的話題自然也不同，如何讓家長關(guān)注學(xué)生每天成長所處的環(huán)境更好的和學(xué)生交流，而不是只停留在考試排名這樣的話題上，對學(xué)生成長也很重要。利用大數(shù)據(jù)挖掘?qū)W生關(guān)注的話題，推送給家長，并給出相應(yīng)的建議。比如：最近出了一款新的卡通人物書包在小學(xué)生中很受歡迎，家長在接受類似信息后可以買孩子的生日禮物；某學(xué)校組織了中學(xué)生足球聯(lián)賽，家長可以關(guān)心一下孩子在運動方面的成果。如果可以收集到每天，甚至每個班級的話題，這對于構(gòu)建學(xué)生學(xué)習(xí)分析平臺也具有重要參考意義。以構(gòu)建基礎(chǔ)硬件層為底層支撐，利用云計算、大數(shù)據(jù)的數(shù)據(jù)集成、數(shù)據(jù)安全、服務(wù)器集群、數(shù)據(jù)計算與挖掘分析等技術(shù)，遵循“18”（1個中心平臺8大技術(shù)標(biāo)準(zhǔn)）大數(shù)據(jù)標(biāo)準(zhǔn)體系，通過HIVE和HBASE構(gòu)建大數(shù)據(jù)數(shù)據(jù)中心。在此基礎(chǔ)上，公司自主研發(fā)了“國子數(shù)據(jù)魔方”業(yè)務(wù)開發(fā)平臺，通過業(yè)務(wù)開發(fā)平臺進(jìn)行應(yīng)用開發(fā)、應(yīng)用發(fā)布、服務(wù)注冊的信息化管理，并可以將應(yīng)用以可視化界面展示給用戶，為領(lǐng)導(dǎo)決策提供數(shù)據(jù)依據(jù)。智慧校園大數(shù)據(jù)架構(gòu)基礎(chǔ)硬件層基礎(chǔ)硬件層是由一組低廉的PC或服務(wù)器組合構(gòu)建而成?；A(chǔ)硬件層主要承載著數(shù)據(jù)的存儲、運算、容錯、調(diào)度和通信等任務(wù)，對基礎(chǔ)應(yīng)用層下達(dá)的指令進(jìn)行執(zhí)行和反饋。數(shù)據(jù)集成大數(shù)據(jù)特征表現(xiàn)在實時、交互、海量等方面，并且以半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)為主，價值密度低，為了更好地“讓數(shù)據(jù)說話”，并充分發(fā)揮大數(shù)據(jù)價值效應(yīng)，應(yīng)堅持“能采盡采”的原則，數(shù)據(jù)源的涵蓋范圍要盡量大。數(shù)據(jù)計算與分析挖掘大數(shù)據(jù)平臺涵蓋了大數(shù)據(jù)場景下常用的計算場景，包含離線計算、實時計算、流式計算、數(shù)據(jù)挖掘與機器學(xué)習(xí)等?？梢愿菀?、更方便地構(gòu)建全生命周期的數(shù)據(jù)湖，使數(shù)據(jù)的加工、處理、創(chuàng)新過程更加豐富，從而實現(xiàn)數(shù)據(jù)的更大價值。數(shù)據(jù)安全大數(shù)據(jù)平臺通過一系列的認(rèn)證授權(quán)和資源隔離機制，實現(xiàn)數(shù)據(jù)資源的安全性、可維護(hù)性、可用性、可信性。提供統(tǒng)一認(rèn)證服務(wù)負(fù)責(zé)對使用者的身份進(jìn)行驗證；提供統(tǒng)一授權(quán)服務(wù)負(fù)責(zé)對用戶的資源訪問權(quán)限進(jìn)行控制；提供統(tǒng)一資源調(diào)度負(fù)責(zé)對用戶使用的底層資源進(jìn)行隔離。服務(wù)器集群服務(wù)器集群是將很多服務(wù)器集中起來一起進(jìn)行同一種服務(wù)，集群可以獲得更高的計算速度，也可以用作備份，任何一個服務(wù)器損壞整個系統(tǒng)都能正常運行。群集化操作可以減少單點故障數(shù)量，實現(xiàn)群集化資源的高可用性。大數(shù)據(jù)技術(shù)標(biāo)準(zhǔn)一個中心平臺：大數(shù)據(jù)業(yè)務(wù)開發(fā)平臺。8大技術(shù)標(biāo)準(zhǔn)：基礎(chǔ)標(biāo)準(zhǔn)、數(shù)據(jù)表示標(biāo)準(zhǔn)、數(shù)據(jù)處理標(biāo)準(zhǔn)、數(shù)據(jù)存儲標(biāo)準(zhǔn)、數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)、數(shù)據(jù)安全和隱私標(biāo)準(zhǔn)、行業(yè)大數(shù)據(jù)標(biāo)準(zhǔn)、大數(shù)據(jù)產(chǎn)品測試標(biāo)準(zhǔn)。大數(shù)據(jù)數(shù)據(jù)中心通過對各種類型的結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)信息的采集、預(yù)處理、分析處理以及存儲等相關(guān)操作，構(gòu)建統(tǒng)一、規(guī)范、全面的大數(shù)據(jù)數(shù)據(jù)中心，為相關(guān)工作提供數(shù)據(jù)支持。大數(shù)據(jù)業(yè)務(wù)開發(fā)平臺以Hadoop為核心，融合優(yōu)秀技術(shù)，提供開放的數(shù)據(jù)和業(yè)務(wù)開發(fā)平臺，進(jìn)行應(yīng)用開發(fā)、應(yīng)用發(fā)布、應(yīng)用注冊及應(yīng)用服務(wù)的信息化流程管理，從而提升了大數(shù)據(jù)應(yīng)用體驗，有利于發(fā)揮創(chuàng)新精神，創(chuàng)造無限價值。大數(shù)據(jù)業(yè)務(wù)可視化分析大數(shù)據(jù)業(yè)務(wù)可視化分析能夠?qū)㈦[藏于海量數(shù)據(jù)中的信息和知識挖掘出來，為用戶提供可視化的操作分析界面；為用戶的相關(guān)活動提供數(shù)據(jù)依據(jù)，從而提高工作效率。智慧校園大數(shù)據(jù)平臺標(biāo)準(zhǔn)體系大數(shù)據(jù)信息標(biāo)準(zhǔn)為數(shù)據(jù)收集、數(shù)據(jù)處理、數(shù)據(jù)存儲、數(shù)據(jù)分析與挖掘提供指導(dǎo)和參照標(biāo)準(zhǔn)，加快建立智慧校園信息采集、存儲、公開、共享、使用、質(zhì)量保障和安全管理等技術(shù)標(biāo)準(zhǔn)，引導(dǎo)建立信息共享交換的標(biāo)準(zhǔn)規(guī)范，促進(jìn)信息資源開發(fā)利用，實現(xiàn)大數(shù)據(jù)匯聚整合，為大數(shù)據(jù)、云計算提供強有力的基礎(chǔ)支撐。抓好大數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)，推進(jìn)國家大數(shù)據(jù)戰(zhàn)略實施，應(yīng)對三方面需求：面向智慧校園教育的需要，研制開放、共享大數(shù)據(jù)標(biāo)準(zhǔn)；助力智慧校園教育創(chuàng)新發(fā)展，制訂典型領(lǐng)域相關(guān)標(biāo)準(zhǔn)；保障資源安全、保護(hù)個人隱私，研制安全標(biāo)準(zhǔn)等，以數(shù)據(jù)為基本元素進(jìn)行數(shù)據(jù)安全管理，規(guī)范數(shù)據(jù)的共享、使用和管理的整個流程，解決跨平臺的數(shù)據(jù)交互、數(shù)據(jù)開放共享等難題。公司對我國現(xiàn)有標(biāo)準(zhǔn)、在研標(biāo)準(zhǔn)和將提出的標(biāo)準(zhǔn)計劃進(jìn)行梳理，依據(jù)大數(shù)據(jù)技術(shù)體系，從基礎(chǔ)、技術(shù)、產(chǎn)品、應(yīng)用等不同角度進(jìn)行分析，形成了大數(shù)據(jù)標(biāo)準(zhǔn)體系框架，按照"18"的理念進(jìn)行設(shè)計，即以"國子數(shù)據(jù)魔方"業(yè)務(wù)開發(fā)平臺為支撐，構(gòu)建基礎(chǔ)標(biāo)準(zhǔn)、數(shù)據(jù)表示標(biāo)準(zhǔn)、數(shù)據(jù)處理標(biāo)準(zhǔn)、數(shù)據(jù)存儲標(biāo)準(zhǔn)、大數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)、大數(shù)據(jù)安全和隱私標(biāo)準(zhǔn)、行業(yè)大數(shù)據(jù)應(yīng)用標(biāo)準(zhǔn)和大數(shù)據(jù)產(chǎn)品測試八大技術(shù)標(biāo)準(zhǔn)。通過平臺和技術(shù)標(biāo)準(zhǔn)的建設(shè)，整合和引導(dǎo)資源、激活科技要素、推動自主創(chuàng)新與開放創(chuàng)新，促進(jìn)大數(shù)據(jù)健康發(fā)展；加速技術(shù)積累、科技進(jìn)步、創(chuàng)新成果推廣，加速大數(shù)據(jù)在智慧校園的廣泛應(yīng)用，促進(jìn)智慧校園全面、協(xié)調(diào)、可持續(xù)發(fā)展；解決數(shù)據(jù)共享難、數(shù)據(jù)格式不統(tǒng)一、數(shù)據(jù)標(biāo)準(zhǔn)不規(guī)范、數(shù)據(jù)重復(fù)建設(shè)等難題?；A(chǔ)標(biāo)準(zhǔn)大數(shù)據(jù)術(shù)語、大數(shù)據(jù)參考架構(gòu)、大數(shù)據(jù)平臺架構(gòu)標(biāo)準(zhǔn)，能夠更加切合實際的對相關(guān)操作進(jìn)行描述，形成統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)，進(jìn)而為數(shù)據(jù)庫提供基礎(chǔ)支撐和服務(wù)。數(shù)據(jù)表示標(biāo)準(zhǔn)數(shù)據(jù)編碼規(guī)范、元數(shù)據(jù)規(guī)范、非結(jié)構(gòu)化數(shù)據(jù)、數(shù)據(jù)集統(tǒng)一描述規(guī)范等，確保數(shù)據(jù)信息的交互共享，進(jìn)而消除信息孤島。數(shù)據(jù)處理標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量評價標(biāo)準(zhǔn)、數(shù)據(jù)采集標(biāo)準(zhǔn)、數(shù)據(jù)組織標(biāo)準(zhǔn)等大數(shù)據(jù)處理階段相關(guān)的標(biāo)準(zhǔn)規(guī)范，消除變量自身變異和數(shù)值大小的影響，為大數(shù)據(jù)應(yīng)用打下良好的基礎(chǔ)。數(shù)據(jù)存儲標(biāo)準(zhǔn)非關(guān)系型數(shù)據(jù)庫規(guī)范、非結(jié)構(gòu)化數(shù)據(jù)管理系統(tǒng)規(guī)范等大數(shù)據(jù)背景下的新型存儲系統(tǒng)相關(guān)規(guī)范，有助于數(shù)據(jù)進(jìn)行交互式傳輸和管理，提高存儲量、存儲速度，進(jìn)而為大數(shù)據(jù)快速挖掘、提取、分析提供基礎(chǔ)。大數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)提供大數(shù)據(jù)實時分析服務(wù)、可視化服務(wù)等一系列大數(shù)據(jù)服務(wù)的標(biāo)準(zhǔn)化描述和接入，提升數(shù)據(jù)之間的關(guān)聯(lián)性，降低數(shù)據(jù)分析的復(fù)雜度，大幅度提高分析的準(zhǔn)確性。大數(shù)據(jù)安全和隱私標(biāo)準(zhǔn)大數(shù)據(jù)對外服務(wù)時，制定數(shù)據(jù)存儲安全、數(shù)據(jù)傳輸安全、數(shù)據(jù)分析挖掘安全等方面的標(biāo)準(zhǔn)，為安全面臨的內(nèi)部管理和外部攻擊提供可靠的數(shù)據(jù)存儲、安全的挖掘分析、嚴(yán)格的運營監(jiān)管。行業(yè)大數(shù)據(jù)應(yīng)用標(biāo)準(zhǔn)相關(guān)領(lǐng)域大數(shù)據(jù)應(yīng)用、領(lǐng)域大數(shù)據(jù)的分類和編碼等方面的標(biāo)準(zhǔn)，能夠更準(zhǔn)確地規(guī)范各行業(yè)的數(shù)據(jù)標(biāo)準(zhǔn)，并推出與行業(yè)相匹配的產(chǎn)品。大數(shù)據(jù)產(chǎn)品測試標(biāo)準(zhǔn)大數(shù)據(jù)產(chǎn)品的測試場景、測試指標(biāo)、測試工具等。大數(shù)據(jù)產(chǎn)品測試標(biāo)準(zhǔn)的建立能夠公平、客觀地評測大數(shù)據(jù)產(chǎn)品的功能和性能，對人們選擇合適的大數(shù)據(jù)產(chǎn)品具有重要的參考價值。智慧校園大數(shù)據(jù)業(yè)務(wù)開發(fā)平臺為提供眾多便捷易用的開發(fā)框架和服務(wù)引擎，使用戶可以迅速地掌握、認(rèn)知以及使用平臺上開放的數(shù)據(jù)，針對不同的應(yīng)用場景選擇合適的服務(wù)引擎進(jìn)行二次開發(fā)，公司自主研發(fā)“國子數(shù)據(jù)魔方”業(yè)務(wù)開發(fā)平臺，在提供開放數(shù)據(jù)的同時，也允許用戶通過該平臺進(jìn)行大數(shù)據(jù)應(yīng)用的開發(fā)，為用戶提供一體化應(yīng)用開發(fā)、測試、部署、運行、管理、監(jiān)控等托管環(huán)境，使應(yīng)用開發(fā)人員無需關(guān)心應(yīng)用的底層硬件和基礎(chǔ)設(shè)施建設(shè)，從而提高工作效率。智慧校園大數(shù)據(jù)業(yè)務(wù)開發(fā)平臺架構(gòu)圖大數(shù)據(jù)數(shù)據(jù)中心大數(shù)據(jù)數(shù)據(jù)中心不是簡單的硬件設(shè)備集成，也不僅僅是數(shù)據(jù)存儲的中心，而是數(shù)據(jù)流通和應(yīng)用服務(wù)的中心。它具備十分豐富的信息資源、安全可靠的機房設(shè)施、高水平的網(wǎng)絡(luò)管理和十分完備的增值服務(wù)，數(shù)據(jù)中心是智慧校園信息化建設(shè)的基礎(chǔ)性項目之一。數(shù)據(jù)中心通過統(tǒng)一的數(shù)據(jù)格式實現(xiàn)應(yīng)用系統(tǒng)之間的數(shù)據(jù)交換和共享。智慧校園數(shù)據(jù)中心具有以下建設(shè)意義：1.收集、存儲各類數(shù)據(jù)的同時有效地將數(shù)據(jù)管理起來，打破“信息孤島”的存在，為智慧校園各個應(yīng)用系統(tǒng)提供統(tǒng)一的數(shù)據(jù)服務(wù)，保證數(shù)據(jù)的一致性。2.為學(xué)校部門和各位領(lǐng)導(dǎo)提供實時數(shù)據(jù)。各部門之間可以很方便地查看其他部門的公開數(shù)據(jù)；領(lǐng)導(dǎo)可以統(tǒng)籌查看全校所有部門的業(yè)務(wù)數(shù)據(jù)，能夠直觀地了解學(xué)校的情況。3.便于后期的應(yīng)用系統(tǒng)開發(fā)，將應(yīng)用與數(shù)據(jù)分離開來，降低應(yīng)用系統(tǒng)擴展開發(fā)的難度，為全面整合智慧校園應(yīng)用系統(tǒng)打下堅實的基礎(chǔ)。大數(shù)據(jù)業(yè)務(wù)平臺層大數(shù)據(jù)業(yè)務(wù)平臺由組件、大數(shù)據(jù)處理引擎、APP、BI引擎構(gòu)建而成。大數(shù)據(jù)業(yè)務(wù)平臺是基于PAAS思想構(gòu)建，并遵循SAAS標(biāo)準(zhǔn)。組件組件是大數(shù)據(jù)業(yè)務(wù)平臺的最基本元素，在大數(shù)據(jù)業(yè)務(wù)平臺中內(nèi)建組件接口標(biāo)準(zhǔn)，所有的組件都遵循該標(biāo)準(zhǔn)。在標(biāo)準(zhǔn)中定義組件的輸入、私有項和輸出。在業(yè)務(wù)開發(fā)過程中，通過圖形化界面對一個或多個組件進(jìn)行創(chuàng)建、編輯和關(guān)聯(lián)，從而組合成一個數(shù)據(jù)處理服務(wù)對外發(fā)布。大數(shù)據(jù)處理引擎大數(shù)據(jù)處理引擎是整個業(yè)務(wù)平臺的執(zhí)行中樞，通過對發(fā)布服務(wù)中的關(guān)聯(lián)組件進(jìn)行解析、調(diào)度、執(zhí)行、迭代、合并等操作實現(xiàn)整個服務(wù)的平穩(wěn)運行。APPAPP是由一個或多個發(fā)布的數(shù)據(jù)處理服務(wù)組合而成的輕應(yīng)用。用戶通過圖形化界面編輯APP展現(xiàn)的數(shù)據(jù)和圖表形式。BI引擎BI引擎對構(gòu)建的APP的數(shù)據(jù)綁定服務(wù)和圖表形式進(jìn)行解析和展現(xiàn)。智慧校園大數(shù)據(jù)平臺建設(shè)關(guān)鍵技術(shù)大數(shù)據(jù)平臺的構(gòu)建借鑒了開源系統(tǒng)的先進(jìn)理念，采用了Hadoop開源系統(tǒng)，充分利用HDFS的可靠性，MapReduce的引入大大加強了平臺在數(shù)據(jù)分析方面的彈性，使平臺在可擴展性、可靠性、易用性和性能方面都有良好的表現(xiàn)。Hadoop技術(shù)Hadoop框架是一個開源的大規(guī)模數(shù)據(jù)處理平臺和工具，主要來源于Google公司提出的MapReduce編程框架，GFS文件系統(tǒng)以及BigTable存儲系統(tǒng)等技術(shù)。Hadoop具有龐大的家族體系，本平臺的構(gòu)建主要涉及到Hadoop框架的分布式文件系統(tǒng)HDFS和MapReduce模型。分布式文件系統(tǒng)作為Hadoop框架的底層，主要負(fù)責(zé)分析數(shù)據(jù)的分布式存儲和管理，MapReduce模型主要是負(fù)責(zé)對大規(guī)模數(shù)據(jù)集進(jìn)行計算處理。Hadoop釆用HDFS文件系統(tǒng)子框架來實現(xiàn)其所具有的存儲能力，用MapReduce編程模型框架來實現(xiàn)其計算能力，二者的巧妙結(jié)合使得Hadoop擁有高效的存儲和計算能力。HDFS技術(shù)HDFS分布式文件系統(tǒng)是對大規(guī)模數(shù)據(jù)實現(xiàn)分布式存儲和管理的有效工具，也是分布式計算的存儲基礎(chǔ)，具有很高的容錯性和擴展性，并且對數(shù)據(jù)讀寫提供了的高吞吐率。HDFS實現(xiàn)了數(shù)據(jù)的分布式存儲，使得應(yīng)用程序能夠更加靈活地訪問大規(guī)模的數(shù)據(jù)集，同時也為后續(xù)對大規(guī)模數(shù)據(jù)的分析提供了數(shù)據(jù)平臺。HDFS分布式文件系統(tǒng)釆用的是典型的主/從結(jié)構(gòu)，這種結(jié)構(gòu)極大的簡化了系統(tǒng)的架構(gòu)，使得系統(tǒng)更加簡潔，方便系統(tǒng)的管理。Hadoop的分布式文件系統(tǒng)HDFS主要由主控制器和數(shù)據(jù)節(jié)點組成，主控制器管理名字空間和數(shù)據(jù)節(jié)點，同時管理數(shù)據(jù)塊到數(shù)據(jù)節(jié)點DataNode的映射等。文件系統(tǒng)中的DataNode作為數(shù)據(jù)節(jié)點，主要存儲實際的數(shù)據(jù)，主要負(fù)責(zé)所在的物理結(jié)點上的存儲管理，執(zhí)行主控制器下達(dá)的命令。數(shù)據(jù)節(jié)點能夠及時接收客戶發(fā)送的讀寫請求，并針對這些請求完成相應(yīng)的操作。從分布式文件系統(tǒng)的結(jié)構(gòu)內(nèi)部來看，數(shù)據(jù)文件被存儲分割成多個數(shù)據(jù)塊存儲在每個數(shù)據(jù)節(jié)點上，每個數(shù)據(jù)節(jié)點存儲著來自多個文件的數(shù)據(jù)塊，同時每個數(shù)據(jù)節(jié)點上也會存儲這些數(shù)據(jù)塊的多份副本，保證后續(xù)數(shù)據(jù)操作的準(zhǔn)確性。MapReduce技術(shù)MapReduce技術(shù)基于分布式文件系統(tǒng)，通過編寫相應(yīng)的處理過程能夠?qū)崿F(xiàn)對大規(guī)模數(shù)據(jù)集進(jìn)行并行計算和處理，通過對不同分析模塊編寫相關(guān)的MapReduce處理函數(shù)能夠?qū)崿F(xiàn)對大規(guī)模數(shù)據(jù)的精確分析，同時能夠控制各個節(jié)點之間完成高效的任務(wù)調(diào)度。MapReduce通過將操作分發(fā)給網(wǎng)絡(luò)上的各個節(jié)點，每個節(jié)點會周期性的返回它所完成的工作和最新的狀態(tài)，從而實現(xiàn)對大規(guī)模數(shù)據(jù)集的操作，這種處理方式保證了操作的可靠性。MapReduce技術(shù)處理的方式是,首先將一個具體的任務(wù)分解成為若干個很小的任務(wù)，然后將分解后的任務(wù)分配到各個分節(jié)點，通過主節(jié)點來對分節(jié)點的任務(wù)進(jìn)行管理和調(diào)度，然后得到分節(jié)點處理后的結(jié)果，再將結(jié)果整合，得到最終結(jié)果，通過多個節(jié)點之間的相互合作和調(diào)度，從而實現(xiàn)對大規(guī)模數(shù)據(jù)集的計算和處理?？偟恼f來,MapReduce就是基于“分而治之”的思想實現(xiàn)“任務(wù)的分解與結(jié)果的匯總”。智慧校園大數(shù)據(jù)平臺建設(shè)效果構(gòu)建高院校大數(shù)據(jù)分析平臺是以智慧校園戰(zhàn)略發(fā)展規(guī)劃為藍(lán)本，以智慧校園信息化建設(shè)綱要為依據(jù)而進(jìn)行的創(chuàng)新性探索。以大數(shù)據(jù)建設(shè)頂層設(shè)計為基礎(chǔ)，收集整合智慧校園教育各方面所產(chǎn)生數(shù)據(jù)，從數(shù)據(jù)中提取出有價值的信息和模型，推動智慧校園教育的全面創(chuàng)新。開展大數(shù)據(jù)頂層設(shè)計，以大數(shù)據(jù)應(yīng)用全面推進(jìn)學(xué)校發(fā)展大數(shù)據(jù)將成為推進(jìn)學(xué)校發(fā)展的新動力，通過開展大數(shù)據(jù)頂層設(shè)計，對大數(shù)據(jù)獲取、收集、整理、利用進(jìn)行全面規(guī)劃，從應(yīng)用需求出發(fā)，明確建設(shè)目的和路徑，明確什么要做，什么不要做，什么應(yīng)該先做，什么應(yīng)該后做，用什么模式做，做到什么程度，達(dá)到什么效果，以指導(dǎo)學(xué)校未來3-5年的大數(shù)據(jù)建設(shè)。快速推進(jìn)教學(xué)和管理工作的信息化，建立豐富的數(shù)據(jù)來源用大數(shù)據(jù)方法全面分析現(xiàn)有教學(xué)和管理工作，新建或升級信息系統(tǒng)，對教學(xué)和管理實現(xiàn)全過程記錄，建立豐富的數(shù)據(jù)收集渠道。如通過對現(xiàn)有遠(yuǎn)程教育系統(tǒng)進(jìn)行全面升級，跳出遠(yuǎn)程教育的概念，實現(xiàn)對教學(xué)過程的全面支持，詳細(xì)記錄每個學(xué)生的學(xué)習(xí)行為數(shù)據(jù)，包括課程學(xué)習(xí)數(shù)據(jù)、視頻觀看數(shù)據(jù)、資料查閱數(shù)據(jù)、作業(yè)完成數(shù)據(jù)、互動交流數(shù)據(jù)、成績數(shù)據(jù)等，將數(shù)據(jù)細(xì)分到每個行為細(xì)節(jié)，以提供超越傳統(tǒng)系統(tǒng)的數(shù)據(jù)精細(xì)度，客觀地反映出學(xué)習(xí)的實際狀況。通過建立物聯(lián)網(wǎng)應(yīng)用，實現(xiàn)對物品、人員、安全等各方面管理的強大支撐，提升管理質(zhì)量的同時積累大量管理數(shù)據(jù)和行為數(shù)據(jù)。基于個性化服務(wù)需求，建立大數(shù)據(jù)分析模型提供優(yōu)秀的個性化服務(wù)是教育和管理的重要目標(biāo)之一，大數(shù)據(jù)應(yīng)用則是提供規(guī)模個性化服務(wù)的必要條件，而大數(shù)據(jù)分析模型的質(zhì)量決定了數(shù)據(jù)的價值。一個平時被忽略的數(shù)據(jù)在好的模型中，會產(chǎn)生難以想象的作用。我們可以通過對學(xué)習(xí)行為數(shù)據(jù)的分析，了解學(xué)生的學(xué)習(xí)興趣和學(xué)習(xí)效果，研究哪些學(xué)習(xí)方式是最容易被接受的，哪些課程的設(shè)計是最受歡迎的，或具體到某個作業(yè)問題回答的正確率以及橫向和縱向的比較，并深層次的展現(xiàn)出其中的原因。這些數(shù)據(jù)被提供給教師，將對教學(xué)創(chuàng)新提供最為直接的支撐。通過對一卡通行為數(shù)據(jù)的分析，可以了解學(xué)生的日常行為規(guī)律和消費規(guī)律，了解學(xué)生行為與學(xué)習(xí)成績、學(xué)校效果之間的關(guān)聯(lián)關(guān)系，提供學(xué)生管理創(chuàng)新的依據(jù)。綜合應(yīng)用大數(shù)據(jù)成果，推動學(xué)校全面創(chuàng)新通過大數(shù)據(jù)的綜合應(yīng)用，可以建立對各項教育和管理工作的分析和判斷，應(yīng)用到實際工作中，從各個方面推動學(xué)校全面創(chuàng)新。通過對教學(xué)過程、學(xué)習(xí)行為、學(xué)習(xí)成績、教學(xué)滿意度、教師需求量、專業(yè)師資質(zhì)量、專業(yè)成熟度、行動軌跡等綜合分析，建立教師畫像、學(xué)生畫像、專業(yè)畫像，直觀了解優(yōu)勢和不足，預(yù)測發(fā)展?fàn)顩r。通過對學(xué)生人數(shù)、宿舍分配、教室使用、能源消耗、網(wǎng)絡(luò)消耗、食堂消費、圖書館利用等進(jìn)行綜合分析，建立各資源利用率指數(shù)，實現(xiàn)數(shù)據(jù)可視化，引導(dǎo)管理工作的精細(xì)化和管理的扁平化。通過對一卡通、圖書借閱、專業(yè)分布、課程分布、成績、學(xué)習(xí)行為等進(jìn)行聚類分析，發(fā)現(xiàn)具有某些特征的特殊群體及其獨有的行為方式，并利用相關(guān)性數(shù)據(jù)進(jìn)行挖掘，從中發(fā)現(xiàn)規(guī)律。通過對教學(xué)數(shù)據(jù)、教學(xué)效果、考勤記錄、個人數(shù)據(jù)、管理數(shù)據(jù)進(jìn)行綜合分析，建立科學(xué)的、真實客觀的教師績效評價體系，改變傳統(tǒng)人為評價的主觀性，讓大數(shù)據(jù)選出真正優(yōu)秀的教師。智慧校園大數(shù)據(jù)常見業(yè)務(wù)系統(tǒng)以下是智慧校園常見的業(yè)務(wù)系統(tǒng)。這是某個智慧校園業(yè)務(wù)系統(tǒng)的數(shù)據(jù)流情況，我們可以發(fā)現(xiàn)業(yè)務(wù)系統(tǒng)和數(shù)據(jù)中心并未完全數(shù)據(jù)交互共享，因此我們在規(guī)劃建設(shè)智慧校園大數(shù)據(jù)時需要協(xié)調(diào)各個職能部門的資源確認(rèn)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)接口。同時由于各個業(yè)務(wù)系統(tǒng)之間數(shù)據(jù)不統(tǒng)一，我們在采集數(shù)據(jù)過程中還需進(jìn)行數(shù)據(jù)轉(zhuǎn)換，轉(zhuǎn)換成我們所需的數(shù)據(jù)格式，這些都帶來大量的工作量。學(xué)校業(yè)務(wù)系統(tǒng)的數(shù)據(jù)類型和屬性很多，有數(shù)百種。我們進(jìn)行數(shù)據(jù)的歸納和整理后也涉及40多種數(shù)據(jù)。比如：正方教務(wù)系統(tǒng)主要包括學(xué)生基本信息（籍貫、生源地等）、學(xué)業(yè)信息（已完成學(xué)分、未完成學(xué)分）、課程信息（學(xué)生已修課程、學(xué)期課程表等）、成績信息等。智慧校園大數(shù)據(jù)服務(wù)用戶類型智慧校園中對大數(shù)據(jù)有具體需求的部門，以及對大數(shù)據(jù)應(yīng)用的具體需求內(nèi)容，在智慧校園大數(shù)據(jù)建設(shè)中需要相關(guān)的對應(yīng)分析。校領(lǐng)導(dǎo)1、師生整體情況2、學(xué)校輿情3、科研水平4、資產(chǎn)情況院領(lǐng)導(dǎo)1、學(xué)院各專業(yè)各班級的集體/個人行為畫像2、學(xué)院教師的課程和科研情況校工會1、評判貧困生、獎助學(xué)金結(jié)果的合理性，識別冒領(lǐng)人員2、教職工的勞資情況設(shè)備處1、現(xiàn)有資產(chǎn)現(xiàn)狀2、資產(chǎn)發(fā)展趨勢3、各品牌資產(chǎn)的故障率4、各單位資產(chǎn)采購規(guī)劃圖書館1、圖書館藏現(xiàn)狀2、圖書借閱現(xiàn)狀3、趨勢分析4、圖書采購規(guī)劃校醫(yī)院1、藥品收支率2、學(xué)校健康檔案3、傳染病預(yù)防和治療4、分析藥品副作用老師1、班級成績2、班級/個人行為畫像3、圖書借閱，推送書籍4、科研情況學(xué)生1、成績和能力情況2、就業(yè)市場和招聘指導(dǎo)3、圖書借閱4、消費、網(wǎng)絡(luò)企業(yè)根據(jù)學(xué)生行為畫像情況和企業(yè)崗位要求匹配度，推薦學(xué)生到企業(yè)實習(xí)或就業(yè)。智慧校園大數(shù)據(jù)平臺能夠為高教提供一體化的大數(shù)據(jù)產(chǎn)品與服務(wù)，實現(xiàn)端到端落地。在數(shù)據(jù)源方面，智慧校園大數(shù)據(jù)平臺可以實現(xiàn)對學(xué)校業(yè)務(wù)系統(tǒng)、一卡通系統(tǒng)、上網(wǎng)行為系統(tǒng)、各硬件設(shè)備、校內(nèi)校外各大網(wǎng)站論壇等的數(shù)據(jù)源獲得，對于數(shù)據(jù)接口不標(biāo)準(zhǔn)或者不開發(fā)的場合也能進(jìn)行針對性的辦法。數(shù)據(jù)采集方面可以使用智慧校園大數(shù)據(jù)平臺ETL采集工具箱和通用的采集技術(shù)為學(xué)校提供采集服務(wù)，并且根據(jù)學(xué)校業(yè)務(wù)情況和大數(shù)據(jù)需求進(jìn)行針性對性數(shù)據(jù)清洗與建模工作，并為學(xué)校制定完善的數(shù)據(jù)規(guī)范標(biāo)準(zhǔn)體系。同時還能整合各類分步式數(shù)數(shù)據(jù)庫、sql數(shù)據(jù)庫、oralce數(shù)據(jù)庫等，建設(shè)學(xué)校統(tǒng)一的數(shù)據(jù)倉庫，并提供統(tǒng)一的接口給各類大數(shù)據(jù)應(yīng)用服務(wù)。智慧校園大數(shù)據(jù)平臺還會為客戶提供一套大數(shù)據(jù)的管理平臺，用于對各個環(huán)節(jié)的有效監(jiān)控與管理，包括數(shù)據(jù)狀態(tài)、數(shù)據(jù)質(zhì)量和準(zhǔn)確性等，便于學(xué)校日常的運維與管理。大數(shù)據(jù)業(yè)務(wù)應(yīng)用基于Hadoop生態(tài)集群，將數(shù)字化校園相關(guān)的人、財、物、網(wǎng)絡(luò)等結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，利用HDFS、Mapreduce進(jìn)行分布式文件存儲及計算，采用關(guān)聯(lián)規(guī)則分析、聚類分析、相關(guān)分析等分析方法，以各種可視化圖形的方式，將結(jié)果展示給用戶，為領(lǐng)導(dǎo)決策提供數(shù)據(jù)支撐。大數(shù)據(jù)業(yè)務(wù)應(yīng)用包括教學(xué)創(chuàng)新的應(yīng)用、科研創(chuàng)新的應(yīng)用、管理創(chuàng)新的應(yīng)用以及其他方面的創(chuàng)新應(yīng)用。大數(shù)據(jù)教學(xué)創(chuàng)新應(yīng)用教學(xué)質(zhì)量評估對學(xué)生給予教師的評價、學(xué)生活躍程度、學(xué)生成績和教師授課情況等數(shù)據(jù)進(jìn)行分析研究，幫助教師更好地進(jìn)行教學(xué)活動。上網(wǎng)行為對各年級同學(xué)上線次數(shù)、上網(wǎng)時間段、總流量以及在線課程的歡迎程度等數(shù)據(jù)進(jìn)行分析研究，引導(dǎo)學(xué)生合理運用網(wǎng)絡(luò)資源，樹立健康的上網(wǎng)理念。學(xué)生成績分析對學(xué)生成績以及排名等數(shù)據(jù)進(jìn)行分析研究，更加清晰地了解學(xué)生成績的整體分布狀況以及學(xué)生的學(xué)習(xí)狀況。

大數(shù)據(jù)科研創(chuàng)新應(yīng)用科研成果對科研成果的獲獎比例、科研成果的學(xué)科背景和科研成果的論文級別等數(shù)據(jù)進(jìn)行分析研究，清晰統(tǒng)計科研獲獎情況?？蒲许椖繉蒲许椖康呢?fù)責(zé)人年齡、學(xué)歷、以及院系等智慧校園科研項目信息進(jìn)行分析研究，更全面地了解學(xué)?？蒲许椖壳闆r?？蒲薪?jīng)費對科研經(jīng)費的投入、科研論著的發(fā)表數(shù)量以及各學(xué)院經(jīng)費的投入和支出等數(shù)據(jù)進(jìn)行分析研究，直觀地了解科研經(jīng)費、科研成果以及科研獎勵等方面的信息。

大數(shù)據(jù)管理創(chuàng)新應(yīng)用招生分析對學(xué)生的生源地以及招生的學(xué)生類型等數(shù)據(jù)進(jìn)行分析研究，發(fā)現(xiàn)哪幾個地區(qū)的考生是歷年招生的主力軍，進(jìn)而為學(xué)校做到有重點、有突出、有成果的招生指導(dǎo)。就業(yè)分析對學(xué)生就業(yè)的地區(qū)分布、就業(yè)行業(yè)以及就業(yè)專業(yè)排名等數(shù)據(jù)進(jìn)行分析研究，為智慧校園決策者提供指導(dǎo)或數(shù)據(jù)支持，改進(jìn)現(xiàn)有的教育模式，提高對畢業(yè)生就業(yè)指導(dǎo)的實效性。住宿分析對學(xué)生住宿過程產(chǎn)生的數(shù)據(jù)進(jìn)行分析研究，幫助學(xué)校相關(guān)管理人員更加合理地分配宿舍資源，更加科學(xué)地進(jìn)行宿舍管理。資產(chǎn)數(shù)據(jù)統(tǒng)計分析對資產(chǎn)的數(shù)量、資產(chǎn)的分類以及資產(chǎn)的年增長率等數(shù)據(jù)進(jìn)行分析研究，為各類資產(chǎn)的購置和合理分配提供了決策支持，便于校領(lǐng)導(dǎo)從全局上把握資產(chǎn)信息，加強成本核算，對固定資產(chǎn)進(jìn)行系統(tǒng)的規(guī)劃、建設(shè)和管理。

大數(shù)據(jù)創(chuàng)新應(yīng)用學(xué)生軌跡分析對學(xué)生各學(xué)年的成績、餐廳消費、購物、進(jìn)出圖書館的次數(shù)、借閱圖書以及吃早餐的次數(shù)等數(shù)據(jù)進(jìn)行分析研究，利用這些數(shù)據(jù)，不僅能預(yù)測出學(xué)生的學(xué)習(xí)狀況，而且學(xué)校還可以依此引導(dǎo)他們更好地規(guī)劃各自的學(xué)業(yè)和就業(yè)方向。

學(xué)生畫像對學(xué)生在校生活和學(xué)習(xí)狀況等數(shù)據(jù)進(jìn)行分析研究，掌握學(xué)生的目標(biāo)動向，無論是學(xué)習(xí)還是參與社會活動，都能夠有的放矢地幫助學(xué)生做進(jìn)一步規(guī)劃。智慧校園大數(shù)據(jù)建設(shè)模塊學(xué)校概況模塊智慧校園大數(shù)據(jù)平臺的“學(xué)校概況”模塊，主要給學(xué)校和院系領(lǐng)導(dǎo)使用，能夠從宏觀、全局把控學(xué)校教學(xué)、管理、科研、資產(chǎn)等各個方面的整體情況，可以預(yù)測學(xué)校的發(fā)展趨勢并且給出決策建議。比如在消費方面，校領(lǐng)導(dǎo)可以看到近一個月的消費金額和地點的情況，也可以看到昨日全校消費綜合、平均消費人次和平均消費額，可以看出學(xué)校整體消費水平的發(fā)展趨勢；或者通過關(guān)聯(lián)分析，知道哪些省份的學(xué)生成績最好，哪些學(xué)院的學(xué)生自律性最強等。全校一卡通消費情況學(xué)生生源分布地圖教師職稱統(tǒng)計圖各學(xué)院學(xué)歷分布圖全校學(xué)歷分布情況全校成績統(tǒng)計圖全校/各院學(xué)生綜合分析各院逃課率占比全校上網(wǎng)信息學(xué)校輿情情況各省成績分布圖綜合預(yù)警平臺我的大學(xué)模塊學(xué)校最大的用戶群體是學(xué)生，在微信層面開發(fā)了“我的大學(xué)”這個功能模塊，為每個學(xué)生提供了一個平臺，從成績、圖書、消費、網(wǎng)絡(luò)、就業(yè)多維度展現(xiàn)學(xué)生的大學(xué)情況，可以讓學(xué)生、老師和家長全面角度審視和了解自己。比如我的成績，學(xué)生可以知道自己的成績情況、歷史走勢、在學(xué)校的分步與排名等內(nèi)容；我的課程統(tǒng)計了學(xué)生課程名稱、授課老師、課程介紹及關(guān)鍵知識點；我的讀書記錄了圖書明細(xì)、圖書內(nèi)容簡要介紹、借閱記錄等資料。我們還可以根據(jù)學(xué)校的需求，將學(xué)生的近況推送給家長，便于家長及時掌握孩子的情況。學(xué)生成績詳情分析學(xué)生圖書借閱分析學(xué)生詳細(xì)當(dāng)前借閱信息學(xué)生課程表我的消費學(xué)生可以詳細(xì)知道自己的消費金額、消費內(nèi)容、消費時間、個人消費比例和排序等。比如某學(xué)生可以知道每天分別在什么時間、在什么地方各自花了多少錢，以及消費報表與數(shù)據(jù)分析，可規(guī)范學(xué)生的消費。在學(xué)校層面，學(xué)校也可以通過消費信息的數(shù)據(jù)，來評判學(xué)生是否是真正的貧困生，在助學(xué)貸款或者學(xué)校助學(xué)金放發(fā)時起到客觀的參考作用。我的網(wǎng)絡(luò)學(xué)生可以了解自己的上網(wǎng)時長、個人上網(wǎng)網(wǎng)站頻率比例和排序。該數(shù)據(jù)也可以同步給學(xué)校老師比如某個學(xué)生長期在晚上深夜有上網(wǎng)行為，或者在正常上課期間大量的上網(wǎng)，平臺會有預(yù)警信息推送給該生；同時老師可以提前進(jìn)行進(jìn)行相關(guān)的疏導(dǎo)與教育。行為畫像模塊通過對學(xué)生課程、生活等數(shù)據(jù)挖掘分析，我們可以得知學(xué)生成績、消費、借閱各個方面的得分。我們也借鑒了QQ形象標(biāo)簽這功能，為學(xué)生貼上學(xué)渣、學(xué)霸、上網(wǎng)達(dá)人等標(biāo)簽。輔導(dǎo)員也根據(jù)學(xué)生的特點標(biāo)簽，為每個學(xué)生情況進(jìn)行指引教育工作。為整個學(xué)生大學(xué)四年的所有學(xué)習(xí)、生活、上網(wǎng)、消費等所有數(shù)據(jù)，通過大學(xué)生涯的跟蹤和分析，為對每個學(xué)生勾畫個人形象。這些數(shù)據(jù)還可在畢業(yè)時形成客觀真實的行為畫像報告和評價。學(xué)生應(yīng)聘面試的時候可打印本報告，向面試官展現(xiàn)自己大學(xué)四年的整體情況，也便于企業(yè)了解每位學(xué)生挑選適合崗位的人才；另外也讓學(xué)生更全面地知道自身優(yōu)勢，選擇對自己有利的企業(yè)和崗位。同時，我們可以根據(jù)每個學(xué)生的報告，結(jié)合企業(yè)招聘要求，向企業(yè)、學(xué)生推送人才、招聘信息。綜合預(yù)警模塊根據(jù)前面提到的學(xué)校概況、我的大學(xué)、行為畫像三大功能模塊，我們可以實時了解各學(xué)生在學(xué)校的行為和學(xué)校的發(fā)展現(xiàn)狀，在出現(xiàn)特殊情況時及時報警，提升學(xué)校管理的及時性與風(fēng)險預(yù)判定位的能力。比如學(xué)生在某一天突然在食堂出現(xiàn)了5000以上大額消費，或者低頻率的小額消費。（事實上部分學(xué)校的一卡通系統(tǒng)默認(rèn)設(shè)置每天限額，一般不會出現(xiàn)一天在飯?zhí)盟⒖?000元的）前者意味著要么被盜刷，要么學(xué)生過份鋪張浪沸。此時平臺可以及時報警，通過微信、郵件等方式推送給該學(xué)生的輔導(dǎo)員。后者則證明該學(xué)生有可能生活困難，也可及時報警通知輔導(dǎo)員關(guān)心該生的生活情況，必要時可申請生活資助。本平臺可以采集到學(xué)生網(wǎng)絡(luò)、消費、圖書借閱等信息，通過對這些數(shù)據(jù)關(guān)聯(lián)分析，我們可以實現(xiàn)學(xué)生的失聯(lián)預(yù)警，避免意外發(fā)生；學(xué)生上網(wǎng)沉迷預(yù)警，及時向?qū)W生進(jìn)行輔導(dǎo)教育，避免學(xué)生誤入歧途；圖書借閱預(yù)警，避免因圖書過期產(chǎn)生費用。輿情分析模塊通過爬蟲軟件和其它的采集系統(tǒng)，對校內(nèi)的論壇、校外的知名網(wǎng)站進(jìn)行關(guān)鍵字信息收集與輿論分析，可按照關(guān)鍵詞的緊急程度劃分緊急、重要、一般三個等級，根據(jù)學(xué)校的需求按照時間影響程度不同采取不同的推送措施。比如在校外知名論壇上，突然出現(xiàn)了對本學(xué)校大量的負(fù)面輿論，很有可能有人惡意造謠，對學(xué)校會帶來很不好的影響。因此可第一時間報告給學(xué)校管理員，及時進(jìn)行的輿論導(dǎo)向工作與解釋工作，并追蹤惡意造謠的人員。對校內(nèi)的監(jiān)控中，比如出現(xiàn)了如自殺、重度抑郁等高危和敏感詞時，也可及時發(fā)展并通知管理員進(jìn)行核實與安撫工作。通過對學(xué)校內(nèi)部的論壇、社會上的常用互聯(lián)網(wǎng)平臺的監(jiān)控，實時了解學(xué)校輿論的關(guān)注熱點詞，以及社會上對學(xué)校的輿論動態(tài)，并實時反饋給學(xué)校管理者和校領(lǐng)導(dǎo)，使學(xué)校做出及時的輿論導(dǎo)向工作。招生就業(yè)模塊我們利用大數(shù)據(jù)分析可以得到每個專業(yè)發(fā)展情況，比如國家及區(qū)域的產(chǎn)業(yè)政策，歷史畢業(yè)生就業(yè)分步，崗位、對口率、薪酬等，以及清晰當(dāng)前企業(yè)人才需求情況，動態(tài)調(diào)整課程體系和教學(xué)內(nèi)容。在學(xué)校層面，可以利用大數(shù)據(jù)分析了國內(nèi)外等標(biāo)桿院校相同專業(yè)的情況，包括招生就業(yè)、師資、實訓(xùn)、校企合作等，找出自身的優(yōu)勢和不足，形成一種合理專業(yè)的評價量化指標(biāo)體系。在學(xué)生層面，可以知道本專業(yè)的就業(yè)前景、就業(yè)方向，可以更好地規(guī)劃大學(xué)的課程和專業(yè)技能的鍛煉；平臺可推送招聘信息（前面有提及）在輔導(dǎo)員層面，可以根據(jù)本專業(yè)就業(yè)情況、本專業(yè)學(xué)生畫像和每個學(xué)生的個人畫像，開展更符合專業(yè)情況、學(xué)生總體需求的專業(yè)指導(dǎo)課程，也可以根據(jù)每個學(xué)生的實際情況提供個性化的就業(yè)輔導(dǎo)。通過對就業(yè)情況的深度挖掘，我們還可以學(xué)生專業(yè)歷史上多年的畢業(yè)生在社會上的年齡分布、學(xué)歷分布、薪資分布、地域流向等信息，可以更好為校企合作、學(xué)生應(yīng)聘、就業(yè)輔導(dǎo)等提供服務(wù)。數(shù)據(jù)安全模塊智慧校園大數(shù)據(jù)安全分析平臺，針對智慧校園內(nèi)部信息化設(shè)備數(shù)據(jù)進(jìn)行采集和存儲（如網(wǎng)絡(luò)設(shè)備、安全設(shè)備、主機、應(yīng)用系統(tǒng)），獲取到網(wǎng)絡(luò)日志、身份認(rèn)證信息、人事等信息數(shù)據(jù)，使用大數(shù)據(jù)與機器學(xué)習(xí)等技術(shù)進(jìn)行安全分析，可以根據(jù)時間維度展現(xiàn)網(wǎng)絡(luò)安全的全局動態(tài)，顯示安全報警計數(shù)和內(nèi)容，從而發(fā)現(xiàn)隱藏的威脅，快速定位故障區(qū)域和故障設(shè)備，主動應(yīng)對安全風(fēng)險。通過儀表盤，可以排查非法外聯(lián)、介入移動介質(zhì)、病毒木馬、操作系統(tǒng)漏洞等風(fēng)險（包括虛擬化環(huán)境下的風(fēng)險），并且可以根據(jù)按照部門、安全事件類型、設(shè)備、人員等視角提供安全分析報告，從而得知安全風(fēng)險最高的部門和設(shè)備及相應(yīng)的風(fēng)險類型，管理分析后可快速定位故障原因并優(yōu)化網(wǎng)絡(luò)，減少安全風(fēng)險。智慧校園大數(shù)據(jù)云平臺及應(yīng)用系統(tǒng)技術(shù)云平臺技術(shù)介紹過去幾十年里，數(shù)據(jù)中心技術(shù)發(fā)生了天翻地覆的變化，2000年前后的互聯(lián)網(wǎng)發(fā)展推動了數(shù)據(jù)中心從大型機時代轉(zhuǎn)向獨立服務(wù)器和集中存儲架構(gòu)。相比之下，獨立服務(wù)器帶來了比大型機更加靈活的系統(tǒng)的環(huán)境；可以通過網(wǎng)絡(luò)訪問讓也降低了運維的復(fù)雜性。業(yè)務(wù)部門需要盈利，數(shù)據(jù)是關(guān)鍵因素。依賴于其靈活的容量調(diào)配和高可用設(shè)計，集中存儲實現(xiàn)了可共享的、更大的存儲資源池，并且可以提供數(shù)據(jù)的保護(hù)能力。池化讓存儲資源得到更充分的利用，RAID及基于存儲的容災(zāi)復(fù)制技術(shù)使得數(shù)據(jù)得到充分保護(hù)，避免因為服務(wù)器宕機、管理員誤操作等引起數(shù)據(jù)丟失。但是獨立服務(wù)器和共享存儲架構(gòu)也存在很多問題，獨立服務(wù)器帶來的是豎井式的架構(gòu)設(shè)計，相應(yīng)的服務(wù)器資源利用效率不平均，總體來說利用率非常低下（平均5-10%）。另外服務(wù)器也經(jīng)常成為單點故障。集中存儲的系統(tǒng)復(fù)雜性也需要額外的管理工具和技術(shù)團(tuán)隊來運維，專用的存儲系統(tǒng)也讓用戶很容易被鎖定。虛擬化技術(shù)的出現(xiàn)使得多種工作負(fù)載和操作系統(tǒng)以虛擬機VM）的形式運行在單一物理機上，大大增加了物理服務(wù)器的資源利用率。隨著Vmware等廠商的推動，X86虛擬化方案的功能日漸豐富，率也大幅提高。借助諸多高級功能，比如在線遷移、高可用和動態(tài)資源負(fù)載均衡等，用戶真正獲得了虛擬機的高可用能力，并且可以動態(tài)遷移和管理工作負(fù)載。集中存儲雖然通過合并路徑等操作來提高效率，但大規(guī)模虛擬化集群中虛擬機的快速增長卻會帶來下面的問題：虛擬機快速增長導(dǎo)致更多的存儲，代理更加復(fù)雜的管理；多個虛擬機征用帶來的資源沖突；存儲的控制器架構(gòu)帶來的性能瓶頸；做為一種日益普通的存儲介質(zhì)，固態(tài)硬盤的出現(xiàn)在一定程度上解決了集中存儲的問題。放在集中存儲中的固態(tài)硬盤使得無需借助更多的陣列就可以提供更高的IO性能和更低的相應(yīng)延遲。但來自集中存儲控制器和網(wǎng)絡(luò)的瓶頸依然存儲，應(yīng)用的豎井架構(gòu)和復(fù)雜的存儲管理依然存儲。在計算、網(wǎng)絡(luò)和存儲三層架構(gòu)的傳統(tǒng)數(shù)據(jù)中心中，隨著服務(wù)器CPU處理能力的日益提升，網(wǎng)絡(luò)日益成為瓶頸。傳統(tǒng)的4/8/16GBFC網(wǎng)絡(luò)帶寬只能對應(yīng)1到9塊固態(tài)硬盤的I/O處理能力。另外，電商、大數(shù)據(jù)等諸多應(yīng)用對實時系統(tǒng)要求日益提高，相應(yīng)延遲成為一個影響客戶體驗的問題。一個典型的網(wǎng)絡(luò)響應(yīng)時間為0.5毫秒，而本地內(nèi)存訪問的延遲不到1/100。很多基于服務(wù)器的緩存技術(shù)出現(xiàn)，正式為了緩解網(wǎng)絡(luò)延遲問題。云計算和互聯(lián)網(wǎng)的蓬勃發(fā)展，帶來用戶對不可預(yù)見的IT資源需求。互聯(lián)網(wǎng)架構(gòu)就是面向業(yè)務(wù)快速增長的敏捷IT需求而設(shè)計，是一種面向基礎(chǔ)架構(gòu)和計算資源的全新計算架構(gòu)方式，可以實現(xiàn)互聯(lián)網(wǎng)規(guī)模的彈性架構(gòu)能力。但是數(shù)據(jù)中心不會走向Google、阿里這樣的大規(guī)模，而且有其他在高可用等方面的特定需求。目前很多流行的融合架構(gòu)、軟件定義的智能化、分布式系統(tǒng)、基于API的自動化等概念，正是在互聯(lián)網(wǎng)架構(gòu)下衍生出來的企業(yè)級IT技術(shù)趨勢。相對于傳統(tǒng)的計算、網(wǎng)絡(luò)和存儲的三層數(shù)據(jù)中心架構(gòu)，融合架構(gòu)可以將多個組件組合在一個單元中，提供計算、網(wǎng)絡(luò)和存儲服務(wù)，并且可以獨立擴展，這樣消除傳統(tǒng)計算和存儲的豎井架構(gòu)。當(dāng)然，很多環(huán)境下客戶也需要存儲和計算分開維護(hù)，融合架構(gòu)要提供這樣的靈活性，并且能利用到本地I/O處理帶來的快速響應(yīng)。軟件定義是指運行在通用的商品化硬件之上，通過軟件來實現(xiàn)核心的邏輯，把關(guān)鍵處理邏輯從專用硬件中剝離。軟件定義可以降低對硬件的依賴，提升系統(tǒng)的敏捷性和健壯性，具備如下特征：底層負(fù)責(zé)提供服務(wù)，采用X86等通用硬件；控制平面和數(shù)據(jù)平面分離，并對底層資源進(jìn)行抽象；可以通過可編程的接口實現(xiàn)高度的自動化；分布式、可線性擴展的系統(tǒng)，是指從之前的單一集中模式處理業(yè)務(wù)，轉(zhuǎn)向集群內(nèi)所有節(jié)點分布式處理業(yè)務(wù)，并且可以在需要橫向擴展時隨時擴展系統(tǒng)的性能和容量。傳統(tǒng)架構(gòu)設(shè)計的前提是假定硬件可靠，至少在某種程度上是可靠的，正如服務(wù)器、存儲等某個單點上是5個9高可用一樣。但分布式系統(tǒng)的假定是硬件終究是會出問題，關(guān)鍵點是如何在一個簡單的、以業(yè)務(wù)不中斷的方式來處理故障。分布式系統(tǒng)的設(shè)計是為了調(diào)整和修復(fù)故障，并且能做到自恢復(fù)。任何一個故障出現(xiàn)，系統(tǒng)會通知管理員，而修復(fù)都可以按照管理員之前設(shè)定的流程自動化的去修復(fù)。這樣就解決了單點故障，消除了系統(tǒng)中的瓶頸。靈活的線性擴展使得系統(tǒng)的計算、網(wǎng)絡(luò)和存儲容量可隨時靈活擴展，客戶可以從小規(guī)模開始，在任何規(guī)模都能獲得一致性的性能和容量增長?？偨Y(jié)以上數(shù)據(jù)中心的技術(shù)變遷，虛擬化技術(shù)的出現(xiàn)解決了計算資源的利用率的問題，但存儲的負(fù)載和復(fù)雜性依然存在，同時網(wǎng)絡(luò)層面的開銷和延遲也降低了客戶體驗。固態(tài)硬盤、服務(wù)器本地緩存等技術(shù)的出現(xiàn)和完善，使得分布式系統(tǒng)成為可能，軟件定義降低了對專有硬件的依賴，通過軟件的方式來實現(xiàn)分布式系統(tǒng)的自恢復(fù)和管理，互聯(lián)網(wǎng)架構(gòu)在企業(yè)級數(shù)據(jù)中心中成為可能。公共云技術(shù)云技術(shù)（Cloudtechnology）基于云計算商業(yè)模式應(yīng)用的網(wǎng)絡(luò)技術(shù)、信息技術(shù)、整合技術(shù)、管理平臺技術(shù)、應(yīng)用技術(shù)等的總稱，可以組成資源池，按需所用，靈活便利。云計算技術(shù)將變成重要支撐。技術(shù)網(wǎng)絡(luò)系統(tǒng)的后臺服務(wù)需要大量的計算、存儲資源，如視頻網(wǎng)站、圖片類網(wǎng)站和更多的門戶網(wǎng)站。伴隨著物聯(lián)網(wǎng)行業(yè)的高度發(fā)展和應(yīng)用，將來每個物品都有可能存在自己的識別標(biāo)志，都需要傳輸?shù)胶笈_系統(tǒng)進(jìn)行邏輯處理，不同程度級別的數(shù)據(jù)將會分開處理，各類行業(yè)數(shù)據(jù)皆需要強大的系統(tǒng)后盾支撐，只能通過云計算來實現(xiàn)。公有云通常指第三方提供商為用戶提供的能夠使用的云，公有云一般可通過Internet使用，可能是免費或成本低廉的。這種云有許多實例，可在當(dāng)今整個開放的公有網(wǎng)絡(luò)中提供服務(wù)。外部用戶通過互聯(lián)網(wǎng)訪問服務(wù)，并不擁有云計算資源。其意義在于能夠以低廉的價格，提供有吸引力的服務(wù)給最終用戶，創(chuàng)造新的業(yè)務(wù)價值，公有云作為一個支撐平臺，還能夠整合上游的服務(wù)（如增值業(yè)務(wù)，廣告）提供者和下游最終用戶，打造新的價值鏈和生態(tài)系統(tǒng)。雖然每個公有云的提供商都對外宣稱，其服務(wù)在各方面都是非常安全，特別是對數(shù)據(jù)的管理。但是對教育行業(yè)而言，特別是區(qū)域級教育系統(tǒng)而言，和業(yè)務(wù)有關(guān)的數(shù)據(jù)是生命線，是不能受到任何形式的威脅。所以短期而言，區(qū)域級教育用戶不會將其核心業(yè)務(wù)應(yīng)用放到公有云上運行。區(qū)域教育云技術(shù)區(qū)域云或者私有云是為一個客戶單獨使用而構(gòu)建的，因而提供對數(shù)據(jù)、安全性和服務(wù)質(zhì)量的最有效控制。用戶方擁有基礎(chǔ)設(shè)施，并可以控制在此基礎(chǔ)設(shè)施上部署應(yīng)用程序的方式。私有云可部署在云數(shù)據(jù)中心的防火墻內(nèi)，也可以將它們部署在一個安全的主機托管場所。私有云可由用戶自己的IT機構(gòu)，也可由云提供商進(jìn)行構(gòu)建。在此托管式專用模式中，云計算提供商可以安裝、配置和運營基礎(chǔ)設(shè)施，以支持一個企業(yè)級數(shù)據(jù)中心內(nèi)的專用云。此模式賦予用戶對于云資源使用情況的極高水平的控制能力，同時帶來建立并運作該環(huán)境所需的專門知識。私有云在安全方面是非常有優(yōu)勢的，因為它一般都構(gòu)筑在用戶防火墻后。私有云是大用戶或者個人自己擁有的云服務(wù)器，并且服務(wù)器不對外開放，僅供自己內(nèi)部使用，這從某種意義上來說降低了泄密的風(fēng)險，比公有云更安全。虛擬化技術(shù)虛擬化是指計算機元件在虛擬的基礎(chǔ)上而不是真實的基礎(chǔ)上運行。虛擬化技術(shù)可以擴大硬件的容量，簡化軟件的重新配置過程。CPU的虛擬化技術(shù)可以單CPU模擬多CPU并行，允許一個平臺同時運行多個操作系統(tǒng)，并且應(yīng)用程序都可以在相互獨立的空間內(nèi)運行而互不影響，從而顯著提高計算機的工作效率。虛擬化的主要目的是對IT基礎(chǔ)設(shè)施進(jìn)行簡化。它可以簡化對資源以及對資源管理的訪問。虛擬化的優(yōu)勢1.整合服務(wù)器，提高資源利用率通過整合服務(wù)器將共用的基礎(chǔ)架構(gòu)資源聚合到池中，打破原有的“一臺服務(wù)器一個應(yīng)用程序”模式。2.降低成本，節(jié)能減排，構(gòu)建綠色I(xiàn)T由于服務(wù)器及相關(guān)IT硬件更少，因此減少了占地空間，也減少了電力和散熱需求。管理工具更加出色，可幫助提高服務(wù)器/管理員比率，因此所需人員數(shù)量也將隨之減少。3.資源池化，提升IT靈活性4.統(tǒng)一管理，提升系統(tǒng)管理效率5.完善業(yè)務(wù)的連續(xù)性保障虛擬化實現(xiàn)軟件方案客戶操作系統(tǒng)很多情況下是通過虛擬機監(jiān)視器（VirtualMachineMonitor，VMM）來與硬件進(jìn)行通信，由VMM來決定其對系統(tǒng)上所有虛擬機的訪問。在純軟件虛擬化解決方案中，VMM在軟件套件中的位置是傳統(tǒng)意義上操作系統(tǒng)所處的位置，而操作系統(tǒng)的位置是傳統(tǒng)意義上應(yīng)用程序所處的位置。這一額外的通信層需要進(jìn)行二進(jìn)制轉(zhuǎn)換，以通過提供到物理資源的接口，模擬硬件環(huán)境。這種轉(zhuǎn)換必然會增加系統(tǒng)的復(fù)雜性。硬件方案CPU的虛擬化技術(shù)是一種硬件方案，支持虛擬技術(shù)的CPU帶有特別優(yōu)化過的指令集來控制虛擬過程，通過這些指令集，VMM會很容易提高性能，相比軟件的虛擬實現(xiàn)方式會很大