數(shù)據(jù)與大數(shù)據(jù)教學課件-1

情境引入基于歷史數(shù)據(jù)，利用數(shù)據(jù)建模定量分析不同球員特點，合理搭配，重新組隊；打破傳統(tǒng)思維，通過分析比賽數(shù)據(jù)，尋找“性價比”最高球員，運用數(shù)據(jù)取得成功；布拉德?皮特主演的《點球成金》是一部美國奧斯卡獲獎影片，所講述的是皮特扮演的棒球隊總經(jīng)理利用計算機數(shù)據(jù)分析，對球隊進行了翻天覆地的改造，讓一家不起眼的小球隊能夠取得巨大的成功。情境引入互聯(lián)網(wǎng)、移動網(wǎng)絡、物聯(lián)網(wǎng)等每天都產(chǎn)生著大量數(shù)據(jù)，這些數(shù)據(jù)規(guī)模巨大、格式多樣，已經(jīng)很難用傳統(tǒng)的方式進行處理。于是，大數(shù)據(jù)技術應運而生，通過分析、挖掘這些數(shù)據(jù)，發(fā)現(xiàn)其蘊藏的價值。情境引入引用資源中的附件3：智慧校園解決方案視頻討論交流話題：

天氣預報越來越準確了，準確率可以達100%嗎？從天氣預報的發(fā)展、設備、技術、數(shù)據(jù)方面進行描述知識講解什么是大數(shù)據(jù)？了解數(shù)據(jù)的采集和來源有哪些？數(shù)據(jù)的方式有哪些？是不是數(shù)據(jù)量大就是大數(shù)據(jù)？引用資源中的附件4：《3分鐘讓你認識什么是大數(shù)據(jù)》視頻知識講解什么是大數(shù)據(jù)？其實很簡單，大數(shù)據(jù)其實就是海量資料巨量資料，這些巨量資料來源于世界各地隨時產(chǎn)生的數(shù)據(jù)，在大數(shù)據(jù)時代，任何微小的數(shù)據(jù)都可能產(chǎn)生不可思議的價值。大數(shù)據(jù)代表著信息量大、速度快、種類繁多的信息資產(chǎn)，需要特定的技術和分析方法將其轉化為價值。知識講解大數(shù)據(jù)的特征：4V，數(shù)量（volume）、速度（Velocity）、多樣（Variety）和價值（Value）。數(shù)量（volume）:TB\PB\EB\ZB僅供開采162年僅供開采45年僅供開采60年不可再生資源VS數(shù)據(jù)過去3年數(shù)據(jù)總量比以往4萬年還多2013年,10分鐘的信息總量將達1.8ZB2010年全球數(shù)據(jù)總量1.2ZB，年增長50%數(shù)據(jù)不再是社會生產(chǎn)的“副產(chǎn)物”，而是可被二次乃至多次加工的原料，從中可以探索更大價值，它變成了生產(chǎn)資料。問題思考大數(shù)據(jù)的特征：4V，數(shù)量（volume）、速度（Velocity）、多樣（Variety）和價值（Value）。1Byte1KB1MB1GB1TB1PB1EB1ZB1YB1PB相當于50%的全美學術研究圖書館藏書信息內(nèi)容5EB相當于至今全世界人類所講過的話語1ZB如同全世界海灘上的沙子數(shù)量總和1YB相當于7000位人類體內(nèi)的微細胞總和一般情況下，大數(shù)據(jù)是以PB、EB、ZB為單位進行計量的問題1：現(xiàn)在為什么現(xiàn)在闖紅燈等違規(guī)行為越來越少了？問題2：請你估算一下一天產(chǎn)生的數(shù)據(jù)量有多少？知識講解大數(shù)據(jù)的特征：4V，數(shù)量（volume）、速度（Velocity）、多樣（Variety）和價值（Value）。速度（Velocity）:數(shù)據(jù)產(chǎn)生的速度快，數(shù)據(jù)處理的速度快知識講解大數(shù)據(jù)的特征：4V，數(shù)量（volume）、速度（Velocity）、多樣（Variety）和價值（Value）。多樣（Variety）：人工產(chǎn)生的，機器自動產(chǎn)生知識講解大數(shù)據(jù)的特征：4V，數(shù)量（volume）、速度（Velocity）、多樣（Variety）和價值（Value）。多樣（Variety）：人工產(chǎn)生的，機器自動產(chǎn)生行業(yè)/企業(yè)內(nèi)數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)物聯(lián)網(wǎng)數(shù)據(jù)大數(shù)據(jù)數(shù)據(jù)來源多企業(yè)內(nèi)部多個應用系統(tǒng)的數(shù)據(jù)、互聯(lián)網(wǎng)和物聯(lián)網(wǎng)的興起，帶來了微博、社交網(wǎng)站、傳感器等多種來源。數(shù)據(jù)類型多保存在關系數(shù)據(jù)庫中的結構化數(shù)據(jù)只占少數(shù)，70~80%的數(shù)據(jù)是如圖片、音頻、視頻、模型、連接信息、文檔等非結構化和半結構化數(shù)據(jù)。關聯(lián)性強數(shù)據(jù)之間頻繁交互，比如游客在旅行途中上傳的圖片和日志，就與游客的位置、行程等信息有了很強的關聯(lián)性。知識講解大數(shù)據(jù)的特征：4V，數(shù)量（volume）、速度（Velocity）、多樣（Variety）和價值（Value）。價值（Value）：價值密度低，大量的視頻記錄下來，有許多冗余挖掘大數(shù)據(jù)的價值類似沙里淘金，從海量數(shù)據(jù)中挖掘稀疏但珍貴的信息；價值密度低，是大數(shù)據(jù)的一個典型特征；大數(shù)據(jù)不僅僅是技術，關鍵是產(chǎn)生價值可以從各個層面進行優(yōu)化，更要考慮整體討論交流女性,尤其當今女大學生是人力資源中不可缺少的組成部分.職場中女性面臨著調(diào)和家庭與事業(yè)兩方面矛盾的問題.就女大學生職業(yè)生涯規(guī)劃的內(nèi)容而言,主要集中在三方面:現(xiàn)代女性職業(yè)發(fā)展的困境;女大學生的職業(yè)定位與外界影響;如何促進女大學生職業(yè)生涯的發(fā)展問題。想要設計一個性別對女大學生職業(yè)生涯規(guī)劃影響的調(diào)查研究，具體怎么做？知識講解更好不是因果關系而是相關關系更多不是隨機樣本而是全部數(shù)據(jù)更雜不是精確性而是混雜性大數(shù)據(jù)的思維變革知識講解大數(shù)據(jù)的思維變革人口大普查全數(shù)據(jù)模式隨機采樣樣本模式大數(shù)據(jù)應用全數(shù)據(jù)模式是指在國家統(tǒng)一規(guī)定的時間內(nèi)，按照統(tǒng)一的方法、統(tǒng)一的項目、統(tǒng)一的調(diào)查表和統(tǒng)一的標準時點，對全國人口普遍地、逐戶逐人地進行的一次性調(diào)查登記；主要特點是調(diào)查組織高度集中性，普查對象的全面完整性；人口大普查耗時耗費，一般來講是十年一次，新中國成立以來共進行了6次人口大普查；人口大普查是一種典型的全數(shù)據(jù)模式；大數(shù)據(jù)時代小數(shù)據(jù)時代知識講解大數(shù)據(jù)的思維變革人口大普查全數(shù)據(jù)模式隨機采樣樣本模式大數(shù)據(jù)應用全數(shù)據(jù)模式人口大普查是一種耗時耗費的工程，一般是以十年為單位；各國每年需要進行幾百次的小規(guī)模人口調(diào)查，采取隨機采樣分析的方式，這是一種樣本模式；源于實用并且很好的創(chuàng)新！隨機采樣分析是小數(shù)據(jù)時代的產(chǎn)物；大數(shù)據(jù)時代小數(shù)據(jù)時代知識講解大數(shù)據(jù)的思維變革人口大普查全數(shù)據(jù)模式隨機采樣樣本模式大數(shù)據(jù)應用全數(shù)據(jù)模式我們已具備了大數(shù)據(jù)的各種技術能力，思維需要轉換到大數(shù)據(jù)的全數(shù)據(jù)模式：樣本=全部；大數(shù)據(jù)不用隨機分析法這樣的捷徑，而采用所有數(shù)據(jù)的方法；這里的“大”是相對的——相撲比賽所有數(shù)據(jù)存儲還不需要一個TB，但是是所有的數(shù)據(jù)！在大數(shù)據(jù)時代采用隨機采樣法，就像在汽車時代騎馬一樣，雖然特定情況下仍可采樣隨機采樣法，但是慢慢地我們會放棄它；大數(shù)據(jù)時代小數(shù)據(jù)時代案例分析出行大數(shù)據(jù)繪制的“城市星云圖”是這樣的！案例分析出行大數(shù)據(jù)繪制的“城市星云圖”是這樣的！案例分析阿里釘釘大數(shù)據(jù)案例分析引用資源中的附件5：如何在大數(shù)據(jù)里掘金？視頻討論交流馬云說數(shù)據(jù)重要、李彥宏說算法重要、馬化騰說場景重要，大家說的矛盾嗎？你是怎么理解的？大數(shù)據(jù)給社會帶來了哪些影響？引用資源中的附件6：馬化騰專