數據科學與大數據技術專業(yè)導論學習總結

數據科學與大數據技術專業(yè)導論學習總結數據科學與大數據技術是當前炙手可熱的概念理論，是科技公司飛速發(fā)展和數字科技日益當前，大數據相關技術已基本成熟，逐步成為支撐型的基礎設施，其發(fā)展方向也開始向提升效率轉變，向個性化的上層應用聚焦。隨著5G通信標準的落地，物聯網、移動互聯網、大數據、傳統(tǒng)行業(yè)將深度融合，算力、模塊、云數、數智等技術融合學科方向特色，體現最新技術發(fā)展動向Big（系統(tǒng)地培養(yǎng)學生掌握大下面是大數據與數據科學的整體課程體系：數學/統(tǒng)計理論：微積分、線性代數、概率論、數理統(tǒng)計、統(tǒng)計學習計算科學：計算機系統(tǒng)、編程語言、數據結構、信息系統(tǒng)架構等Hadoop/Spark/數據倉庫模型分析：機器學習理論、優(yōu)化建模、模式識別、知識表示/推理、可視化分析行業(yè)應用：商務智能、智能金融、供應鏈分析、城市規(guī)劃等數據倫理：大數據管理與創(chuàng)新、大數據治理與政策大數據與數據科學的主要課程內容1、概率論與數理統(tǒng)計2、多元統(tǒng)計分析多元正態(tài)分布；聚類分析；判別分析；主成分分析；因子分析；對應分析；Logistic回歸模型、偏最小二乘回歸模型等。3、微積分基本的微積分概念、計算原理4、線性代數基本的線性代數概念、計算原理5、時間序列分析6/數據結構編程語言（Python或R、C或Java）、主要的程序結構、基本的數據結構、常用算法7、計算機系統(tǒng)基礎信息抽取技術8、大數據導論Hadoop大數據的基本概念、大數據分析基礎、大數據挖掘基礎、大數據可視化技術基礎、大數據存儲技術基礎、大數據安全技術基礎、數據科學基礎、大數據與crm等9、Hadoop大數據技術Hadoop生態(tài)，介紹Hadoop的安裝和配置，Hadoop的組件包括HDFS分布式存儲系統(tǒng)，MapReduce計算框架，海量數據庫HBase，Hive數據倉庫，Pig、ZooKeeper管理系統(tǒng)等知識10、分布式數據庫原理及應用管理系統(tǒng)的可靠性，數據復制等分布式數據管理技術的經典內容11、數據建模分析介紹數據挖掘/建模的主要流程以及除算法外的其它建模重點，包括數據探索性分析、建模（具體的建模算法放到數據挖掘課程）12、數據倉庫與數據挖掘技術Rough分析、蟻群分析、分形技Agent/（分兩個重點方向：算法設計原理和算法應用13、數據可視化技術紹相應的可視化方法；介紹可視化綜合應用及實用系統(tǒng)14、大數據分析與內存計算Spark的體系結構、工作機制、安裝與部署、開發(fā)環(huán)境搭建、計算模型、Benchmark、BDAS等內容；應用角度講解了一些簡單的、有代表性的案例15、商業(yè)智能方法與應用16、大數據管理與創(chuàng)新理提供一些思考方向17、大數據治理與政策面對具體的專業(yè)方向開設相關的數據應用課程或講座應用比如：18、模式識別/計算機視覺：介紹非結構化數據在模式識別、圖像識別等方面的處理技術和原理等；19、自然語言處理/知識表示/推理：介紹文本型數據在智能系統(tǒng)中的處理和表示技術及原理；20、大數據與城市規(guī)劃：介紹數據治理在城市規(guī)劃中的具體應用和相關