5.1認識大數(shù)據(jù)（教學課件）

5.1認識大數(shù)據(jù)

情景引入

同學們在日常生活中都產(chǎn)生或接觸了哪些數(shù)據(jù)？哪些數(shù)據(jù)是可以統(tǒng)計的？哪些數(shù)據(jù)又是人不能在有效時間內(nèi)進行統(tǒng)計的？它們之間有什么區(qū)別呢？5.1.1大數(shù)據(jù)

大數(shù)據(jù)：指無法在可承受的時間范圍內(nèi)用常規(guī)軟件工具進行高效捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。大數(shù)據(jù)的概念5.1.1大數(shù)據(jù)大數(shù)據(jù)的來源、承載方式大數(shù)據(jù)的產(chǎn)生是與人類日益普及的網(wǎng)絡(luò)行為所伴生：物聯(lián)網(wǎng)、云計算、移動互聯(lián)網(wǎng)、車聯(lián)網(wǎng)、手機、電腦以及各種各樣的傳感器。5.1.1大數(shù)據(jù)大數(shù)據(jù)的作用人們提取信息、做出決策的重要依據(jù)，是推動信息社會發(fā)展的重要資源。5.1.2大數(shù)據(jù)的特征

快速閱讀《數(shù)據(jù)與計算》P102,三個案例，分析其體現(xiàn)的特征：【案例1】互聯(lián)網(wǎng)產(chǎn)生大數(shù)據(jù)的角度【案例2】互聯(lián)網(wǎng)思維的角度【案例3】大數(shù)據(jù)存儲與計算的角度5.1.2大數(shù)據(jù)的特征

互聯(lián)網(wǎng)產(chǎn)生大數(shù)據(jù)——4V特征（重點）1.大量：TB（太字節(jié)）

PB（拍字節(jié)）2.多樣：網(wǎng)絡(luò)日志、視頻、圖片、地理位置信息……3.低價值密度：在連續(xù)不斷的監(jiān)控中，有用的數(shù)據(jù)僅僅一兩秒4.高速：數(shù)據(jù)來自世界各地的網(wǎng)絡(luò)終端，且以秒為單位快速變化。5.1.2大數(shù)據(jù)的特征

互聯(lián)網(wǎng)思維1.樣本漸趨于總體：數(shù)據(jù)要全量而不是抽樣，即強調(diào)數(shù)據(jù)規(guī)模全量，而不是強調(diào)數(shù)量巨大。2.精確讓位于模糊：追求模糊性，適當忽略微觀層面上的精確度，在宏觀層面擁有更好的洞察力。3.相關(guān)性重于結(jié)果：無須再緊盯事物之間的因果關(guān)系，而應該尋找事物之間的相關(guān)關(guān)系，會提醒我們這件事情正在發(fā)生。5.1.2大數(shù)據(jù)的特征

大數(shù)據(jù)存儲與計算1.分布式存儲——云存儲2.分布式并行計算——云計算5.1.2傳統(tǒng)數(shù)據(jù)與大數(shù)據(jù)的區(qū)別

5.1.2傳統(tǒng)數(shù)據(jù)與大數(shù)據(jù)的區(qū)別

傳統(tǒng)數(shù)據(jù)大數(shù)據(jù)數(shù)據(jù)量小數(shù)據(jù)類型少價值密度高更新速度慢追求數(shù)據(jù)抽樣、精確性、因果關(guān)系本地存儲、集中計算數(shù)據(jù)體量巨大數(shù)據(jù)類型繁多價值密度低更新速度快追求數(shù)據(jù)全量、模糊性、相關(guān)性分布式存儲、并行計算大數(shù)據(jù)對日常生活的影響

雙面性1.便捷：支付、出行、購物與產(chǎn)品推介、看病與診病大數(shù)據(jù)對日常生活的影響大數(shù)據(jù)對日常生活的影響

雙面性2.負面影響：個人信息泄露大數(shù)據(jù)對日常生活的影響

雙面性2.負面影響：信息傷害