《大數(shù)據(jù)存儲技術(shù)與應(yīng)用》 課件 項目一-任務(wù)三 走進大數(shù)據(jù)存儲應(yīng)用

《大數(shù)據(jù)存儲技術(shù)與應(yīng)用》大數(shù)據(jù)存儲技術(shù)與應(yīng)用項目一走進大數(shù)據(jù)存儲任務(wù)三走進大數(shù)據(jù)存儲應(yīng)用大數(shù)據(jù)存儲架構(gòu)？嵌入式存儲架構(gòu)，應(yīng)用場景？云存儲架構(gòu)？非結(jié)構(gòu)化存儲架構(gòu)？回顧5G時代的到來，各種數(shù)據(jù)呈幾何級增加，數(shù)據(jù)已然成為一種非常寶貴的戰(zhàn)略資源備受關(guān)注。大數(shù)據(jù)已經(jīng)應(yīng)用到各個領(lǐng)域。任務(wù)引入大數(shù)據(jù)在電力領(lǐng)域的具體應(yīng)用?大數(shù)據(jù)在農(nóng)業(yè)領(lǐng)域具體的應(yīng)用?大數(shù)據(jù)在醫(yī)療領(lǐng)域具體的應(yīng)用?大數(shù)據(jù)在教育領(lǐng)域的具體應(yīng)用?任務(wù)引入-大數(shù)據(jù)應(yīng)用任務(wù)描述:本節(jié)任務(wù)以醫(yī)療和電力系統(tǒng)為案例，闡述了大數(shù)據(jù)存儲技術(shù)在行業(yè)領(lǐng)域的具體應(yīng)用。任務(wù)教學(xué)目標(biāo)：了解大數(shù)據(jù)存儲技術(shù)在醫(yī)療系統(tǒng)中的應(yīng)用了解大數(shù)據(jù)存儲技術(shù)在電力系統(tǒng)中的應(yīng)用理解大數(shù)據(jù)存儲架構(gòu)、存儲技術(shù)的具體應(yīng)用。任務(wù)概要教學(xué)內(nèi)容大數(shù)據(jù)存儲技術(shù)應(yīng)用智能大數(shù)據(jù)處理平臺醫(yī)療大數(shù)據(jù)融合平臺智慧國土大數(shù)據(jù)融合平臺能源電力大數(shù)據(jù)融合平臺一二三四五大數(shù)據(jù)存儲技術(shù)應(yīng)用知識點一大數(shù)據(jù)存儲技術(shù)應(yīng)用9如今，大數(shù)據(jù)技術(shù)已廣泛應(yīng)用于工業(yè)、能源、醫(yī)療、金融、電信、交通等行業(yè)，如何整合數(shù)據(jù)、利用數(shù)據(jù)創(chuàng)造價值是大數(shù)據(jù)存儲技術(shù)的關(guān)鍵點。本節(jié)以醫(yī)療大數(shù)據(jù)、能源電力大數(shù)據(jù)為例，解讀大數(shù)據(jù)存儲技術(shù)的應(yīng)用。智能大數(shù)據(jù)處理平臺知識點二智能大數(shù)據(jù)處理平臺11DANA智能大數(shù)據(jù)開發(fā)平臺以“數(shù)據(jù)智能”為目標(biāo)，著手于“數(shù)據(jù)是誰”、“數(shù)據(jù)從哪里來”、“數(shù)據(jù)到哪里去”三個基本問題，提供大數(shù)據(jù)基礎(chǔ)開發(fā)平臺，讓用戶更好的應(yīng)用和組織數(shù)據(jù)，為開發(fā)者和公司提供更加容易運營、開發(fā)、部署應(yīng)用的環(huán)境，用戶也不再需要關(guān)心和管理私有云的基礎(chǔ)設(shè)施，包括網(wǎng)絡(luò)、存儲、服務(wù)器、開發(fā)服務(wù)等。智能大數(shù)據(jù)處理平臺121.數(shù)據(jù)集成提供數(shù)據(jù)庫、文件、日志、網(wǎng)頁、實時流數(shù)據(jù)的抽取、清洗、轉(zhuǎn)換方案。2.數(shù)據(jù)庫服務(wù)提供大數(shù)據(jù)時代穩(wěn)定可靠、可彈性伸縮的數(shù)據(jù)庫服務(wù)。Stock數(shù)據(jù)庫引擎根據(jù)不同業(yè)務(wù)開發(fā)對各類數(shù)據(jù)庫的需求，提供便捷統(tǒng)一的數(shù)據(jù)庫管理、使用、監(jiān)控、運維等服務(wù)。Lemur是基于內(nèi)存存儲的高性能結(jié)構(gòu)化數(shù)據(jù)庫，支持標(biāo)準(zhǔn)SQL語法，可提供每秒百萬級別的交互事務(wù)，更提供高效的實時數(shù)據(jù)分析能力。Teryx幫助構(gòu)建PB級別的分布式OLAP數(shù)據(jù)倉庫。智能大數(shù)據(jù)處理平臺133.存儲服務(wù)Fox文件系統(tǒng)提供無限擴展、NAS協(xié)議標(biāo)準(zhǔn)文件存儲服務(wù)。Boa塊存儲提供高性能、高可靠的塊級隨機存儲。Cayman非結(jié)構(gòu)數(shù)據(jù)倉庫提供私有對象存儲和高效率的非結(jié)構(gòu)化數(shù)據(jù)管理。智能大數(shù)據(jù)處理平臺144.大數(shù)據(jù)處理服務(wù)DANA平臺提供豐富和強大的數(shù)據(jù)處理服務(wù)引擎，例如：Eagles實時搜索與分析引擎實現(xiàn)海量實時在線快速搜索和準(zhǔn)確分析服務(wù)。Phoenix消息中間件低延時、高性能的特點輕松應(yīng)對海量消息的發(fā)送和接收，服務(wù)于大數(shù)據(jù)領(lǐng)域中數(shù)據(jù)管道、曰志服務(wù)、流處理數(shù)據(jù)中心等應(yīng)用方案。智能大數(shù)據(jù)處理平臺15Eel流媒體引擎支持RTMP、RTSP,HTIP、HLS等多種流媒體協(xié)議，輕松實現(xiàn)多媒體文件的直播、點播以及虛擬直播等功能。Dodo調(diào)度引擎以接流程自動調(diào)用組件的形式幫助處理分布式任務(wù)的調(diào)度、執(zhí)行和監(jiān)控。智能大數(shù)據(jù)處理平臺16Mustang實時流計算引擎，基于SparkStreaming實時流計算框架，滿足所有對實時性要求富的流計算應(yīng)用場景和系統(tǒng)需求。Leopard智能媒體數(shù)據(jù)處理引擎針對海量文檔、圖片、音視頻等數(shù)據(jù)進行有效快速處理。醫(yī)療大數(shù)據(jù)融合平臺知識點三醫(yī)療大數(shù)據(jù)融合平臺18隨著大數(shù)據(jù)在互聯(lián)網(wǎng)、電子商務(wù)、公共服務(wù)等行業(yè)的成功應(yīng)用，醫(yī)療衛(wèi)生行業(yè)的信息化也迎來自己的“大數(shù)據(jù)時代”。目前，醫(yī)療衛(wèi)生系統(tǒng)的信息化日趨成熟，但隨著省級醫(yī)院與基層、公共衛(wèi)生機構(gòu)之間的數(shù)據(jù)共享和互聯(lián)互通建設(shè)的推進，數(shù)據(jù)數(shù)量的增加、數(shù)據(jù)所需處理速度的提高、數(shù)據(jù)類型和標(biāo)準(zhǔn)的多樣化、系統(tǒng)之間的數(shù)據(jù)孤島等問題逐漸顯現(xiàn)。醫(yī)療大數(shù)據(jù)融合平臺19醫(yī)療大數(shù)據(jù)平臺幫助醫(yī)院取得如下幾個方面的成果和業(yè)務(wù)價值：數(shù)據(jù)孤島打通?；颊呓】禉n案。醫(yī)務(wù)人員績效管理。全面數(shù)據(jù)分析。高效決策支持。智慧國土大數(shù)據(jù)融合平臺知識點四智慧國土大數(shù)據(jù)融合平臺21各級國土部門在國家省、市、縣等基礎(chǔ)上，基本建成以全國遙感建設(shè)一張圖，綜合監(jiān)管平臺、公共服務(wù)平臺為主題的國土資源信息化框架體現(xiàn)，積累了海量的國土、人事、事件、財務(wù)等數(shù)據(jù)。當(dāng)前需要在現(xiàn)有數(shù)據(jù)基礎(chǔ)上，利用超融合、云計算等技術(shù)，解決數(shù)據(jù)計算和存儲的問題，實現(xiàn)國土信息化由傳統(tǒng)的以業(yè)務(wù)需求建設(shè)為主轉(zhuǎn)向以數(shù)據(jù)驅(qū)動為民眾帶來更優(yōu)化服務(wù)體驗的目標(biāo)。智慧國土大數(shù)據(jù)融合平臺22智慧國土大數(shù)據(jù)融合平臺的建設(shè)，其主要應(yīng)用價值：分布式集群實現(xiàn)底層架構(gòu)無限擴張，多副本機制確保數(shù)據(jù)安全可靠。解決因業(yè)務(wù)口徑不同而產(chǎn)生的數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一、類型不匹配、格式不一致、語義不一致等問題。從各個環(huán)節(jié)、各個維度進行記錄、管控、分析。讓數(shù)據(jù)分析成為決策的第一手科學(xué)依據(jù)。能源電力大數(shù)據(jù)融合平臺知識點五能源電力大數(shù)據(jù)融合平臺24電力行業(yè)是國民經(jīng)濟的命脈，但我國電力工業(yè)面臨能源枯竭、溫室氣體排放和嚴(yán)重霧霾的三重挑戰(zhàn)，以投資勞動增長的發(fā)展方式已難以為繼。雖然衡量我國電力工業(yè)發(fā)展的重要指標(biāo)—裝機容量始終在增長，但是其增速已經(jīng)大大放緩。一方面，電力工業(yè)近年來快速增長透支的產(chǎn)品需要時間來慢慢消化；一方面，我國電力需求的增速也在逐步放緩。這就要求根據(jù)新的形勢和國際規(guī)則探索新的發(fā)展模式，迎接所面臨的各種挑戰(zhàn)。能源電力大數(shù)據(jù)融合平臺25通過電力大數(shù)據(jù)融合平臺的建設(shè)，可以最大限度地發(fā)揮數(shù)據(jù)的價值。大力提升生產(chǎn)集約化和管理現(xiàn)代化水平提高智能電網(wǎng)的信息化水平增強操作控制的自動化能力提升用電服務(wù)的互動化水平大數(shù)據(jù)技術(shù)已廣泛應(yīng)用于各個行業(yè)，如何整合數(shù)據(jù)、利用數(shù)據(jù)創(chuàng)造價值是大數(shù)據(jù)存儲技術(shù)的關(guān)鍵點。本節(jié)對大數(shù)據(jù)存儲技術(shù)的典型應(yīng)用進行了介紹，對大數(shù)據(jù)存儲應(yīng)用的平臺價值進行了剖析。包括如下內(nèi)容：1.大數(shù)據(jù)存儲技術(shù)應(yīng)用。2.智能大數(shù)據(jù)處理平臺。3.大數(shù)據(jù)典型應(yīng)用案例。任務(wù)小結(jié)調(diào)研要求：調(diào)研我國大數(shù)據(jù)存儲技術(shù)的產(chǎn)業(yè)化情況。調(diào)研了解我國大數(shù)據(jù)存儲主流技術(shù)及產(chǎn)品特性。要求：

各學(xué)員通過調(diào)研、搜集網(wǎng)絡(luò)數(shù)據(jù)等方式完成。