Chapter0-廈門大學-林子雨-大數(shù)據(jù)技術原理與應用（第3版）-課程介紹（2020年12月版本）

1、廈門大學計算機科學系 2020年12月版本課程介紹（PPT版本號：2020年12月版本） 大數(shù)據(jù)技術原理與應用（第3版）/post/bigdata3溫馨提示：編輯幻燈片母版，可以修改每頁PPT的廈大?；蘸偷撞课淖至肿佑?博士/副教授廈門大學計算機科學系E-mail: ziyulin主頁：/post/linziyu本章配套教學視頻/course/XMU-1002335004大數(shù)據(jù)技術原理與應用（第3版）在線視頻觀看地址提綱1.課程特色2.教材介紹3.內(nèi)容提要4.教學大綱5.配套資源6.班級介紹附錄A：主講教師林子雨簡介附錄B：大數(shù)據(jù)技術原理與應用教材附錄C：高校大數(shù)據(jù)課程公共服務平臺歡迎訪問大數(shù)

2、據(jù)技術原理與應用（第3版）教材官方網(wǎng)站：/post/bigdata3本PPT是如下教材的配套講義：大數(shù)據(jù)技術原理與應用概念、存儲、處理、分析與應用 （2020年9月第3版）廈門大學 林子雨 編著，人民郵電出版社主講教師主講教師：廈門大學 林子雨 博士/副教授中國高校首個“數(shù)字教師”提出者和建設者2009年7月從事教師職業(yè)以來累計免費網(wǎng)絡發(fā)布超過1000萬字高價值教學和科研資料網(wǎng)絡瀏覽量超過1000萬次2017年度廈門大學獎教金獲得者2020年度廈門大學獎教金獲得者課程特色搭建起通向“大數(shù)據(jù)知識空間”的橋梁和紐帶構(gòu)建知識體系、闡明基本原理引導初級實踐、了解相關應用為學生在大數(shù)據(jù)領域“深耕細作”奠

3、定基礎、指明方向教材介紹大數(shù)據(jù)技術原理與應用大數(shù)據(jù)概念、存儲、處理、分析與應用 廈門大學 林子雨編著 人民郵電出版社 2021年1月第3版 ISBN:978-7-115-54405-6 定價：59.8元國內(nèi)高校第一本系統(tǒng)介紹大數(shù)據(jù)知識專業(yè)教材京東、當當?shù)雀鞔缶W(wǎng)店暢銷書籍致力于打造成為大數(shù)據(jù)入門教材精品工信部“全國云計算與大數(shù)據(jù)應用技術人才考試、認證項目”目前唯一指定大數(shù)據(jù)教材國內(nèi)多所高校采用本教材開課配套目前國內(nèi)高校最完備的課程公共服務平臺2021年1月第3版掃一掃訪問教材官網(wǎng)教材配套實驗手冊本書是與大數(shù)據(jù)技術原理與應用（第3版）教材配套的唯一指定實驗指導書步步引導，循序漸進，詳盡的安裝指南為

4、順利搭建大數(shù)據(jù)實驗環(huán)境鋪平道路深入淺出，去粗取精，豐富的代碼實例幫助快速掌握大數(shù)據(jù)基礎編程方法精心設計，巧妙融合，八套大數(shù)據(jù)實驗題目促進理論與編程知識的消化和吸收結(jié)合理論，聯(lián)系實際，大數(shù)據(jù)課程綜合實驗案例精彩呈現(xiàn)大數(shù)據(jù)分析全流程林子雨編著大數(shù)據(jù)基礎編程、實驗和案例教程（第2版）清華大學出版社 ISBN:978-7-302-55977-1 定價：69元，2020年10月第2版教材官網(wǎng)： /post/bigdatapractice2/掃一掃訪問教材官網(wǎng)內(nèi)容提要本課程系統(tǒng)介紹了大數(shù)據(jù)相關知識系統(tǒng)地論述了大數(shù)據(jù)的基本概念、大數(shù)據(jù)處理架構(gòu)Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫HBase、No

5、SQL數(shù)據(jù)庫、云數(shù)據(jù)庫、分布式并行編程模型MapReduce、數(shù)據(jù)倉庫Hive、基于內(nèi)存的分布式計算框架Spark、流計算、流處理框架Flink、圖計算以及大數(shù)據(jù)在互聯(lián)網(wǎng)、生物醫(yī)學和物流等各個領域的應用在Hadoop、HDFS、HBase、MapReduce、Hive、Spark和Flink等重要章節(jié)，安排了入門級的實踐操作，讓學生更好地學習和掌握大數(shù)據(jù)關鍵技術教學大綱章 節(jié)主要內(nèi)容學時安排第1章 大數(shù)據(jù)概述介紹大數(shù)據(jù)的基本概念和應用領域，并闡述大數(shù)據(jù)、云計算和物聯(lián)網(wǎng)的相互關系2第2章 大數(shù)據(jù)處理架構(gòu)Hadoop介紹大數(shù)據(jù)處理架構(gòu)Hadoop4第3章 分布式文件系統(tǒng)HDFS分布式文件系統(tǒng)HDF

6、S的基本原理和使用方法4第4章 分布式數(shù)據(jù)庫HBase分布式數(shù)據(jù)庫HBase的基本原理和使用方法4第5章 NoSQL數(shù)據(jù)庫NoSQL數(shù)據(jù)庫的概念和基本原理2第6章 云數(shù)據(jù)庫云數(shù)據(jù)庫的概念和基本原理2第7章 MapReduce分布式并行編程模型MapReduce原理和使用方法4第8章 Hadoop架構(gòu)再探討Hadoop技術的發(fā)展演變過程、YARN、HDFS Federation自學第9章 數(shù)據(jù)倉庫Hive數(shù)據(jù)倉庫Hive的概念、原理和安裝使用方法2第10章 SparkSpark原理與基礎編程4第11章 流計算流計算概念和原理、Storm2第12章 Flink流處理框架Flink的應用場景、體系架

7、構(gòu)和編程模型2第13章 圖計算圖計算概念和原理、Pregel自學第14章 數(shù)據(jù)可視化數(shù)據(jù)可視化概念、代表性技術和軟件自學第15、16和17章 大數(shù)據(jù)在不同領域的應用大數(shù)據(jù)在互聯(lián)網(wǎng)領域的典型應用：推薦系統(tǒng)，以及在其他領域的典型應用自學合計32教材官網(wǎng)教材官網(wǎng)：/post/bigdata3/提供以下教材配套內(nèi)容：講義PPT授課視頻教材配套大數(shù)據(jù)軟件安裝和編程實踐指南實驗指南和答案習題（選擇題）和答案高校大數(shù)據(jù)課程公共服務平臺掃一掃訪問平臺主頁/post/bigdata-teaching-platform/掃一掃觀看3分鐘FLASH動畫宣傳片所有資料全部免費共享支持電腦和手機瀏覽課程配套教學資源國內(nèi)

8、高校第一個大數(shù)據(jù)課程公共服務平臺為教師教學和學生學習大數(shù)據(jù)課程，提供全方位、一站式服務平臺所有資源全部通過網(wǎng)絡免費共享（無需注冊）、采用WORD和PPT可編輯格式課程配套教學資源制作精美的平臺宣傳圖冊/post/xuanchuanpian/附錄A：主講教師林子雨簡介單位：廈門大學計算機科學系E-mail: ziyulin個人網(wǎng)頁：/post/linziyu數(shù)據(jù)庫實驗室網(wǎng)站：主講教師：林子雨林子雨，男，1978年出生，博士（畢業(yè)于北京大學），全國高校知名大數(shù)據(jù)教師，現(xiàn)為廈門大學計算機科學系副教授，曾任廈門大學信息科學與技術學院院長助理、晉江市發(fā)展和改革局副局長。中國計算機學會數(shù)據(jù)庫專業(yè)委員會委員

9、，中國計算機學會信息系統(tǒng)專業(yè)委員會委員。國內(nèi)高校首個“數(shù)字教師”提出者和建設者，廈門大學數(shù)據(jù)庫實驗室負責人，廈門大學云計算與大數(shù)據(jù)研究中心主要建設者和骨干成員，2013年度、2017年度和2020年度廈門大學教學類獎教金獲得者，榮獲2019年福建省精品在線開放課程、2018年廈門大學高等教育成果特等獎、2018年福建省高等教育教學成果二等獎、2018年國家精品在線開放課程。主要研究方向為數(shù)據(jù)庫、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘、大數(shù)據(jù)、云計算和物聯(lián)網(wǎng)，并以第一作者身份在軟件學報計算機學報和計算機研究與發(fā)展等國家重點期刊以及國際學術會議上發(fā)表多篇學術論文。作為項目負責人主持的科研項目包括1項國家自然科學青年基

10、金項目(No.61303004)、1項福建省自然科學青年基金項目(No.2013J05099)和1項中央高?；究蒲袠I(yè)務費項目(No.2011121049)，主持的教改課題包括1項2016年福建省教改課題和1項2016年教育部產(chǎn)學協(xié)作育人項目，同時，作為課題負責人完成了國家發(fā)改委城市信息化重大課題、國家物聯(lián)網(wǎng)重大應用示范工程區(qū)域試點泉州市工作方案、2015泉州市互聯(lián)網(wǎng)經(jīng)濟調(diào)研等課題。中國高校首個“數(shù)字教師”提出者和建設者，2009年至今，“數(shù)字教師”大平臺累計向網(wǎng)絡免費發(fā)布超過1000萬字高價值的研究和教學資料，累計網(wǎng)絡訪問量超過1000萬次。打造了中國高校大數(shù)據(jù)教學知名品牌，編著出版了中國高

11、校第一本系統(tǒng)介紹大數(shù)據(jù)知識的專業(yè)教材大數(shù)據(jù)技術原理與應用，并成為京東、當當網(wǎng)等網(wǎng)店暢銷書籍；建設了國內(nèi)高校首個大數(shù)據(jù)課程公共服務平臺，為教師教學和學生學習大數(shù)據(jù)課程提供全方位、一站式服務，年訪問量超過200萬次，累計訪問量超過1000萬次。掃一掃訪問個人主頁附錄B：大數(shù)據(jù)學習路線圖大數(shù)據(jù)學習路線圖訪問地址：/post/10164/附錄C：林子雨大數(shù)據(jù)系列教材了解全部教材信息：/post/bigdatabook/附錄D：大數(shù)據(jù)導論（通識課版）教材本課程旨在實現(xiàn)以下幾個培養(yǎng)目標：引導學生步入大數(shù)據(jù)時代，積極投身大數(shù)據(jù)的變革浪潮之中了解大數(shù)據(jù)概念，培養(yǎng)大數(shù)據(jù)思維，養(yǎng)成數(shù)據(jù)安全意識認識大數(shù)據(jù)倫理，努力

12、使自己的行為符合大數(shù)據(jù)倫理規(guī)范要求熟悉大數(shù)據(jù)應用，探尋大數(shù)據(jù)與自己專業(yè)的應用結(jié)合點激發(fā)學生基于大數(shù)據(jù)的創(chuàng)新創(chuàng)業(yè)熱情教材官網(wǎng)：/post/bigdataintroduction/開設全校公共選修課的優(yōu)質(zhì)教材高等教育出版社 ISBN:978-7-04-053577-8 定價：32元 版次：2020年2月第1版附錄E：大數(shù)據(jù)導論教材林子雨 編著大數(shù)據(jù)導論人民郵電出版社，2020年9月第1版ISBN:978-7-115-54446-9 定價：49.80元教材官網(wǎng)：/post/bigdata-introduction/掃一掃訪問教材官網(wǎng)開設大數(shù)據(jù)專業(yè)導論課的優(yōu)質(zhì)教材附錄F：大數(shù)據(jù)技術原理與應用（第3版）

13、教材歡迎訪問大數(shù)據(jù)技術原理與應用概念、存儲、處理、分析與應用教材官方網(wǎng)站：/post/bigdata3掃一掃訪問教材官網(wǎng)大數(shù)據(jù)技術原理與應用概念、存儲、處理、分析與應用（第3版），由廈門大學計算機科學系林子雨博士編著，是國內(nèi)高校第一本系統(tǒng)介紹大數(shù)據(jù)知識的專業(yè)教材。人民郵電出版社 ISBN:978-7-115-54405-6 定價：59.80元全書共有17章，系統(tǒng)地論述了大數(shù)據(jù)的基本概念、大數(shù)據(jù)處理架構(gòu)Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù) 庫HBase、NoSQL數(shù)據(jù)庫、云數(shù)據(jù)庫、分布式并行編程模型MapReduce、Spark、流計算、Flink、圖計算、數(shù)據(jù)可視化以及大數(shù)據(jù)在互聯(lián)

14、網(wǎng)、生物醫(yī)學和物流等各個領域的應用。在Hadoop、HDFS、HBase、MapReduce、Spark和Flink等重要章節(jié)，安排了入門級的實踐操作，讓讀者更好地學習和掌握大數(shù)據(jù)關鍵技術。本書可以作為高等院校計算機專業(yè)、信息管理等相關專業(yè)的大數(shù)據(jù)課程教材，也可供相關技術人員參考、學習、培訓之用。附錄G：大數(shù)據(jù)基礎編程、實驗和案例教程（第2版）本書是與大數(shù)據(jù)技術原理與應用（第3版）教材配套的唯一指定實驗指導書步步引導，循序漸進，詳盡的安裝指南為順利搭建大數(shù)據(jù)實驗環(huán)境鋪平道路深入淺出，去粗取精，豐富的代碼實例幫助快速掌握大數(shù)據(jù)基礎編程方法精心設計，巧妙融合，八套大數(shù)據(jù)實驗題目促進理論與編程知識的

15、消化和吸收結(jié)合理論，聯(lián)系實際，大數(shù)據(jù)課程綜合實驗案例精彩呈現(xiàn)大數(shù)據(jù)分析全流程林子雨編著大數(shù)據(jù)基礎編程、實驗和案例教程（第2版）清華大學出版社 ISBN:978-7-302-55977-1 定價：69元 2020年10月第2版附錄H：Spark編程基礎（Scala版）Spark編程基礎（Scala版）廈門大學 林子雨，賴永炫，陶繼平 編著披荊斬棘，在大數(shù)據(jù)叢林中開辟學習捷徑填溝削坎，為快速學習Spark技術鋪平道路深入淺出，有效降低Spark技術學習門檻資源全面，構(gòu)建全方位一站式在線服務體系本書以Scala作為開發(fā)Spark應用程序的編程語言，系統(tǒng)介紹了Spark編程的基礎知識。全書共8章，內(nèi)容

16、包括大數(shù)據(jù)技術概述、Scala語言基礎、Spark的設計與運行原理、Spark環(huán)境搭建和使用方法、RDD編程、Spark SQL、Spark Streaming、Spark MLlib等。本書每個章節(jié)都安排了入門級的編程實踐操作，以便讀者更好地學習和掌握Spark編程方法。本書官網(wǎng)免費提供了全套的在線教學資源，包括講義PPT、習題、源代碼、軟件、數(shù)據(jù)集、授課視頻、上機實驗指南等。人民郵電出版社出版發(fā)行，ISBN:978-7-115-48816-9教材官網(wǎng)：/post/spark/附錄I：Spark編程基礎（Python版）Spark編程基礎（Python版）廈門大學 林子雨，鄭海山，賴永炫 編

17、著披荊斬棘，在大數(shù)據(jù)叢林中開辟學習捷徑填溝削坎，為快速學習Spark技術鋪平道路深入淺出，有效降低Spark技術學習門檻資源全面，構(gòu)建全方位一站式在線服務體系本書以Python作為開發(fā)Spark應用程序的編程語言，系統(tǒng)介紹了Spark編程的基礎知識。全書共8章，內(nèi)容包括大數(shù)據(jù)技術概述、Spark的設計與運行原理、Spark環(huán)境搭建和使用方法、RDD編程、Spark SQL、Spark Streaming、Structured Streaming、Spark MLlib等。本書每個章節(jié)都安排了入門級的編程實踐操作，以便讀者更好地學習和掌握Spark編程方法。本書官網(wǎng)免費提供了全套的在線教學資源，包括講義PPT、習題、源代碼、軟件、數(shù)據(jù)集、上機實驗指南等。人民郵電出版社出版發(fā)行，ISBN:978-7-115-52439-3教材官網(wǎng)： /post/spark-python/附錄J：高校大數(shù)據(jù)課程公共服務平臺掃一掃訪問平臺主頁/post/bigdata-teaching-platform/掃一掃觀看3分鐘FLASH動畫宣傳片附錄K：高校大數(shù)據(jù)實訓課程系列案例教材掃一掃訪問大數(shù)據(jù)實訓課