第3章 獲取、驗(yàn)證和加工數(shù)據(jù)

第3章獲取、驗(yàn)證和加工數(shù)據(jù)教學(xué)目標(biāo)了解數(shù)據(jù)獲取、驗(yàn)證和加工的重要意義；熟悉通過(guò)Excel讀入CSV等常見(jiàn)格式數(shù)據(jù)的方法；熟悉數(shù)據(jù)驗(yàn)證的基本思路，能夠通過(guò)Excel實(shí)施數(shù)據(jù)驗(yàn)證；掌握通過(guò)Excel字符串公式等工具從文本數(shù)據(jù)中提取信息的方法；掌握通過(guò)Excel數(shù)據(jù)透視表等工具對(duì)數(shù)據(jù)進(jìn)行分組加工的方法；掌握數(shù)據(jù)分析報(bào)告中數(shù)據(jù)說(shuō)明部分的寫(xiě)作方法。教學(xué)方式與課時(shí)安排課堂講授：3學(xué)時(shí)演示匯報(bào)：3學(xué)時(shí)教學(xué)重點(diǎn)與難點(diǎn)在實(shí)踐場(chǎng)景中，獲取、驗(yàn)證和加工數(shù)據(jù)環(huán)節(jié)一般會(huì)在數(shù)據(jù)分析過(guò)程中占據(jù)相當(dāng)大部分的工作量，有時(shí)候甚至工作目標(biāo)本身就是獲取、驗(yàn)證和加工數(shù)據(jù)，建立用戶畫(huà)像的工作就是一項(xiàng)典型的加工數(shù)據(jù)的工作。但是這部分工作受到具體的數(shù)據(jù)情況和應(yīng)用場(chǎng)景的影響特別大，單純從理論層面很難給出全面又普適的行為指南，在各門(mén)專業(yè)課中也較少涉及到相關(guān)的講解和練習(xí)。為此，在講解過(guò)程中要特別注意引導(dǎo)學(xué)生理解“為什么”要做某一項(xiàng)操作，通過(guò)對(duì)目標(biāo)的強(qiáng)調(diào)來(lái)使得學(xué)生不但“知其然”還“知其所以然”，避免只聚焦于具體操作。此外，本章案例以企業(yè)端實(shí)務(wù)為背景，對(duì)于尚未工作的學(xué)生而言，沒(méi)有相關(guān)的生活或工作經(jīng)驗(yàn)作為切入的依托點(diǎn)，會(huì)在理解背景方面遇到一定困難。微課3-1對(duì)這部分進(jìn)行了比較詳細(xì)的講解，老師可依托微課進(jìn)行講解、組織討論和問(wèn)答，幫助學(xué)生加深對(duì)業(yè)務(wù)問(wèn)題的理解；也可利用第2章介紹的設(shè)定分析目標(biāo)的方法，要求學(xué)生在精讀案例背景介紹后，完成一個(gè)明確的分析目標(biāo)。本章包含大量Excel操作，可以作為預(yù)習(xí)內(nèi)容提前要求學(xué)生自學(xué)，將課堂講授時(shí)間更加集中在對(duì)上述兩點(diǎn)內(nèi)容的介紹。這個(gè)安排也是對(duì)實(shí)際工作環(huán)境的一種模擬，建立快速尋找答案、解決問(wèn)題的自學(xué)能力。如果學(xué)生通過(guò)自學(xué)掌握相關(guān)內(nèi)容有困難，可從演示匯報(bào)環(huán)節(jié)挪借1學(xué)時(shí)，不建議壓縮對(duì)上述1/2兩點(diǎn)內(nèi)容的講解時(shí)間。教學(xué)過(guò)程課堂講授：3學(xué)時(shí)導(dǎo)入(25分鐘)：講解。老師回顧圖1.2，講解獲取、驗(yàn)證和加工數(shù)據(jù)的重要性。講解。老師介紹案例背景。可借助微課3-1進(jìn)行翻轉(zhuǎn)課堂。討論。學(xué)生在預(yù)習(xí)微課3-1和精讀案例背景介紹的基礎(chǔ)上，使用第2章介紹的相關(guān)內(nèi)容，為案例要解決的問(wèn)題定義一個(gè)明確的分析目標(biāo)。討論完成后由部分小組展示匯報(bào)討論結(jié)果，老師做總結(jié)點(diǎn)評(píng)。獲取數(shù)據(jù)(30分鐘)講解。老師介紹各種常見(jiàn)數(shù)據(jù)源。演示。老師演示3.2.2~3.2.3小節(jié)中與獲取數(shù)據(jù)相關(guān)的操作。如學(xué)生程度較好，可由老師提出要求，學(xué)生完成操作。提問(wèn)。老師針對(duì)各個(gè)常見(jiàn)數(shù)據(jù)源要求學(xué)生回答，每個(gè)數(shù)據(jù)源可以提供哪些數(shù)據(jù)，并列舉至少一個(gè)可以通過(guò)這個(gè)數(shù)據(jù)源提供的數(shù)據(jù)解決的業(yè)務(wù)問(wèn)題。比如：可以通過(guò)萬(wàn)得等付費(fèi)終端獲取上市公司的財(cái)務(wù)數(shù)據(jù)，可以使用這些數(shù)據(jù)對(duì)上市公司的盈利情況和財(cái)務(wù)健康度做出評(píng)估，作為投資的決策依據(jù)。驗(yàn)證數(shù)據(jù)(30分鐘)講解。老師講解驗(yàn)證數(shù)據(jù)的基本思路。演示。老師演示3.3.2~3.3.3小節(jié)中與驗(yàn)證數(shù)據(jù)相關(guān)的操作，并講解如何解讀箱形圖、散點(diǎn)圖，如何根據(jù)分位數(shù)函數(shù)提供的結(jié)果對(duì)分布進(jìn)行評(píng)價(jià)。如學(xué)生程度較好，可由老師提出要求，學(xué)生自行完成操作；或由老師展示成果，由學(xué)生直接進(jìn)行解讀，老師對(duì)回答做出評(píng)價(jià)。提問(wèn)。老師簡(jiǎn)單總結(jié)講解的各種數(shù)據(jù)驗(yàn)證項(xiàng)目?？梢蕴岢鲆环N數(shù)據(jù)驗(yàn)證項(xiàng)目，要求學(xué)生解釋為什么要進(jìn)行這一類驗(yàn)證；舉出某一個(gè)驗(yàn)證示例，要求學(xué)生回答它是從哪個(gè)角度對(duì)數(shù)據(jù)進(jìn)行驗(yàn)證。老師可展示章案例數(shù)據(jù)，逐個(gè)變量要求學(xué)生回答如應(yīng)如何對(duì)該變量進(jìn)行驗(yàn)證。加工數(shù)據(jù)(35分鐘)講解。老師講解加工數(shù)據(jù)的常用方法。演示。老師演示3.4.2~3.4.3小節(jié)中與加工數(shù)據(jù)相關(guān)的操作。講解重點(diǎn)可放在VLOOKUP函數(shù)和函數(shù)嵌套：前者是Excel最常用的公式之一，準(zhǔn)確理解各參數(shù)意義一般即可全面掌握；后者相對(duì)靈活，老師可在教材提供的幾個(gè)例子基礎(chǔ)上，再設(shè)計(jì)更多需要綜合利用多個(gè)函數(shù)的場(chǎng)景，從思路上給學(xué)生更多啟發(fā)。如學(xué)生程度較好，可由老師提出要求，學(xué)生自行完成操作；或由老師展示成果，由學(xué)生直接進(jìn)行解讀，老師對(duì)回答做出評(píng)價(jià)。提問(wèn)。老師簡(jiǎn)單總結(jié)加工數(shù)據(jù)的常用方法，然后從思路和實(shí)踐兩個(gè)方向提問(wèn)要求學(xué)生回答。例如：如果某電商企業(yè)要建立用戶畫(huà)像，需要獲取哪些數(shù)據(jù)，如何將不同來(lái)源和粒度的數(shù)據(jù)合并為用戶畫(huà)像？想知道章案例數(shù)據(jù)中有多少條廣告是用戶在搜索51job相關(guān)搜索詞時(shí)出現(xiàn)的，應(yīng)該如何操作(對(duì)“搜索詞”一列篩選包含“51job”或“前程無(wú)憂”的行，對(duì)一個(gè)變量的多個(gè)篩選條件取并集)？在上述記錄中，由51job自己投放的廣告有多少條，由其競(jìng)爭(zhēng)對(duì)手投放的有多少條，要如何操作(可復(fù)習(xí)數(shù)據(jù)透視表的使用)？數(shù)據(jù)分析報(bào)告寫(xiě)作(15分鐘)講解。老師講解數(shù)據(jù)分析報(bào)告中數(shù)據(jù)說(shuō)明部分的重要性和寫(xiě)作方法?？梢越柚⒄n3-2進(jìn)行翻轉(zhuǎn)課堂。討論。老師可以將數(shù)據(jù)說(shuō)明與數(shù)據(jù)獲取/驗(yàn)證/加工結(jié)合在一起進(jìn)行提問(wèn)。例如，在基于用戶畫(huà)像數(shù)據(jù)對(duì)用戶行為進(jìn)行分析后，需要寫(xiě)作一篇數(shù)據(jù)分析報(bào)告介紹用戶的屬性和行為進(jìn)行介紹，這篇報(bào)告的數(shù)據(jù)說(shuō)明表應(yīng)當(dāng)包含哪些行？可選擇部分小組進(jìn)行展示。在這個(gè)討論中，學(xué)生容易混淆原始數(shù)據(jù)(如銷售系統(tǒng)中的訂單明細(xì))和用于分析的數(shù)據(jù)(即基于原始數(shù)據(jù)加工生成的用戶畫(huà)像)；老師要基于學(xué)生的展示成果引導(dǎo)他們加深對(duì)兩者區(qū)別的理解。演示匯報(bào)：3學(xué)時(shí)學(xué)生分組匯報(bào)，老師點(diǎn)評(píng)。點(diǎn)評(píng)中請(qǐng)注意幾類學(xué)生在初學(xué)時(shí)經(jīng)常遇到的問(wèn)題并進(jìn)行矯正：1、（5）、b款中提到的混淆原始數(shù)據(jù)和分