2023學(xué)年完整公開(kāi)課版數(shù)據(jù)價(jià)值

數(shù)據(jù)價(jià)值目錄數(shù)據(jù)價(jià)值處理流程應(yīng)用實(shí)例2數(shù)據(jù)概念數(shù)據(jù)概念3數(shù)據(jù)就是數(shù)值，也就是我們通過(guò)觀察、實(shí)驗(yàn)或計(jì)算得出的結(jié)果。數(shù)據(jù)有很多種，最簡(jiǎn)單的就是數(shù)字。數(shù)據(jù)也可以是文字、圖像、聲音等。數(shù)據(jù)可以用于科學(xué)研究、設(shè)計(jì)、查證等。數(shù)據(jù)概念4功能效用：數(shù)據(jù)是客觀時(shí)間的測(cè)量和記錄。表現(xiàn)形態(tài)：數(shù)據(jù)是指對(duì)客觀事件進(jìn)行記錄并可以鑒別的符號(hào)。生產(chǎn)要素：數(shù)據(jù)已成為數(shù)字經(jīng)濟(jì)時(shí)代的新型生產(chǎn)要素。數(shù)據(jù)概念5體積：數(shù)據(jù)量很重要。速度：速度是接收和作用于數(shù)據(jù)的速率。品種：多樣性是指可用的多種數(shù)據(jù)類型。處理流程數(shù)據(jù)收集數(shù)據(jù)收集數(shù)據(jù)源會(huì)影響大數(shù)據(jù)質(zhì)量的真實(shí)性、完整性數(shù)據(jù)收集、一致性、準(zhǔn)確性和安全性。數(shù)據(jù)預(yù)處理預(yù)處理環(huán)節(jié)主要包括數(shù)據(jù)清理、數(shù)據(jù)集成、數(shù)據(jù)歸約與數(shù)據(jù)轉(zhuǎn)換等內(nèi)容數(shù)據(jù)處理與分析要根據(jù)大數(shù)據(jù)類型選擇合適的存儲(chǔ)形式和數(shù)據(jù)處理系統(tǒng)，以實(shí)現(xiàn)大數(shù)據(jù)質(zhì)量的最優(yōu)化。數(shù)據(jù)可視化與應(yīng)用提高大數(shù)據(jù)分析結(jié)果的直觀性，便于用戶理解與使用數(shù)據(jù)預(yù)處理處理與分析可視化與應(yīng)用6數(shù)據(jù)預(yù)處理7數(shù)據(jù)清理數(shù)據(jù)集成數(shù)據(jù)歸約數(shù)據(jù)轉(zhuǎn)換處理數(shù)據(jù)處理和分析8數(shù)據(jù)處理：大數(shù)據(jù)的分布式處理技術(shù)與存儲(chǔ)形式、業(yè)務(wù)數(shù)據(jù)類型等相關(guān)，針對(duì)大數(shù)據(jù)處理的主要計(jì)算模型有MapReduce分布式計(jì)算框架、分布式內(nèi)存計(jì)算系統(tǒng)、分布式流計(jì)算系統(tǒng)等。數(shù)據(jù)分析：大數(shù)據(jù)分析技術(shù)主要包括已有數(shù)據(jù)的分布式統(tǒng)計(jì)分析技術(shù)和未知數(shù)據(jù)的分布式挖掘、深度學(xué)習(xí)技術(shù)。數(shù)據(jù)可視化與應(yīng)用9數(shù)據(jù)可視化是指將大數(shù)據(jù)分析與預(yù)測(cè)結(jié)果以計(jì)算機(jī)圖形或圖像的直觀方式顯示給用戶的過(guò)程，并可與用戶進(jìn)行交互式處理。大數(shù)據(jù)應(yīng)用是指將經(jīng)過(guò)分析處理后挖掘得到的大數(shù)據(jù)結(jié)果應(yīng)用于管理決策、戰(zhàn)略規(guī)劃等的過(guò)程。數(shù)據(jù)價(jià)值10幫助人們獲得知識(shí)和洞察。幫助人們形成正確的決策。幫助人們做出快速?zèng)Q策。幫助人們少犯錯(cuò)誤。數(shù)據(jù)價(jià)值11數(shù)據(jù)量大是大數(shù)據(jù)具有價(jià)值的前提。數(shù)據(jù)關(guān)聯(lián)是大數(shù)據(jù)實(shí)現(xiàn)價(jià)值的基礎(chǔ)。計(jì)算分析使大數(shù)據(jù)最終產(chǎn)生價(jià)值。廣泛使用使大數(shù)據(jù)效益倍增。應(yīng)用實(shí)例-啤酒和尿不濕12為了能夠準(zhǔn)確了解顧客在其門(mén)店的購(gòu)買習(xí)慣，沃爾瑪對(duì)其顧客的購(gòu)物行為進(jìn)行了購(gòu)物籃關(guān)聯(lián)規(guī)則分析，從而知道顧客經(jīng)常一起購(gòu)買的商品有哪些。在沃爾瑪龐大的數(shù)據(jù)倉(cāng)庫(kù)里集合了其所有門(mén)店的詳細(xì)原始交易數(shù)據(jù)，在這些原始交易數(shù)據(jù)的基礎(chǔ)上，沃爾瑪利用數(shù)據(jù)挖掘工具對(duì)這些數(shù)據(jù)進(jìn)行分析和挖掘。一個(gè)令人驚奇和意外的結(jié)果出現(xiàn)了：“跟尿不濕一起購(gòu)買最多的商品竟是啤酒”！應(yīng)用實(shí)例-懷孕預(yù)測(cè)13Target能夠通過(guò)分析女性客戶購(gòu)買記錄，“猜出”哪些是孕婦。他們從Target的數(shù)據(jù)倉(cāng)庫(kù)中挖掘出25項(xiàng)與懷孕高度相關(guān)的商品，制作“懷孕預(yù)測(cè)”指數(shù)。比如他們發(fā)現(xiàn)女性會(huì)在懷孕四個(gè)月左右，大量購(gòu)買無(wú)香味乳液。以此為依據(jù)推算出預(yù)產(chǎn)期后，就搶先一步將孕婦裝、嬰兒床等折扣券寄給客戶來(lái)吸引客戶購(gòu)買。應(yīng)用實(shí)例-亞馬遜的信息公司14如果全球哪家公司從大數(shù)據(jù)發(fā)掘出了最大價(jià)值，截至目前，答案可能非亞馬遜莫屬。亞馬遜也要處理海量數(shù)據(jù)，這些交易數(shù)據(jù)的直接價(jià)值更大。作為一家“信息公司”，亞馬遜不僅從每個(gè)用戶的購(gòu)買行為中獲得信息，還將每個(gè)用戶在其網(wǎng)站上的所有行為都記錄下來(lái)：頁(yè)面停留時(shí)間、用戶是否查看評(píng)論、每個(gè)搜索的關(guān)鍵詞、瀏覽的商品等等。對(duì)于亞馬遜來(lái)說(shuō)，大數(shù)據(jù)意味著大銷售量。應(yīng)用實(shí)例-谷歌的意圖15如果說(shuō)有一家科技公司準(zhǔn)確定義了“大數(shù)據(jù)”概念的話，那一定是谷歌。谷歌的體量和規(guī)模，使它擁有比其他大多數(shù)企業(yè)更多的應(yīng)用大數(shù)據(jù)的途徑。谷歌搜索引擎本身的設(shè)計(jì)