Python網(wǎng)絡(luò)爬蟲技術(shù)-第4章-常規(guī)動(dòng)態(tài)網(wǎng)頁爬取-教案

第4章常規(guī)動(dòng)態(tài)網(wǎng)頁爬取教案課程名稱：Python網(wǎng)絡(luò)爬蟲技術(shù)課程類別：必修適用專業(yè)：大數(shù)據(jù)技術(shù)類相關(guān)專業(yè)總學(xué)時(shí)：32學(xué)時(shí)（其中理論14學(xué)時(shí)，實(shí)驗(yàn)18學(xué)時(shí)）總學(xué)分：2.0學(xué)分本章學(xué)時(shí)：6學(xué)時(shí)材料清單《Python網(wǎng)絡(luò)爬蟲技術(shù)》教材。配套PPT。引導(dǎo)性提問。探究性問題。拓展性問題。教學(xué)目標(biāo)與基本要求教學(xué)目標(biāo)先通過源碼對(duì)比區(qū)分動(dòng)態(tài)網(wǎng)頁和靜態(tài)網(wǎng)頁，然后使用逆向分析技術(shù)爬取網(wǎng)站“”首頁新書信息。還有使用Selenium爬取網(wǎng)站“/search/books”中的以“Python編程”為關(guān)鍵詞的信息。和將數(shù)據(jù)存入MongoDB數(shù)據(jù)庫?；疽罅私忪o態(tài)網(wǎng)頁和動(dòng)態(tài)網(wǎng)頁的區(qū)別。逆向分析爬取動(dòng)態(tài)網(wǎng)頁。使用Selenium庫爬取動(dòng)態(tài)網(wǎng)頁。使用MongoDB數(shù)據(jù)庫儲(chǔ)存數(shù)據(jù)。問題引導(dǎo)性提問引導(dǎo)性提問需要教師根據(jù)教材內(nèi)容和學(xué)生實(shí)際水平，提出問題，啟發(fā)引導(dǎo)學(xué)生去解決問題，提問，從而達(dá)到理解、掌握知識(shí)，發(fā)展各種能力和提高思想覺悟的目的。什么是動(dòng)態(tài)網(wǎng)站？動(dòng)態(tài)網(wǎng)站和靜態(tài)網(wǎng)站有和區(qū)別？和關(guān)系型數(shù)據(jù)庫比較，非關(guān)系型數(shù)據(jù)庫解決了什么問題？探究性問題探究性問題需要教師深入鉆研教材的基礎(chǔ)上精心設(shè)計(jì)，提問的角度或者在引導(dǎo)性提問的基礎(chǔ)上，從重點(diǎn)、難點(diǎn)問題切入，進(jìn)行插入式提問?；蛘呤菍?duì)引導(dǎo)式提問中尚未涉及但在課文中又是重要的問題加以設(shè)問。Selenium庫爬取網(wǎng)站的優(yōu)缺點(diǎn)是什么？Selenium庫如何快速得到想要數(shù)據(jù)？MongoDB和MySQL對(duì)比有哪些優(yōu)點(diǎn)?拓展性問題拓展性問題需要教師深刻理解教材的意義，學(xué)生的學(xué)習(xí)動(dòng)態(tài)后，根據(jù)學(xué)生學(xué)習(xí)層次，提出切實(shí)可行的關(guān)乎實(shí)際的可操作問題。亦可以提供拓展資料供學(xué)生研習(xí)探討，完成拓展性問題。Selenium庫Requests庫相比爬取網(wǎng)站和的優(yōu)缺點(diǎn)是什么？如何提高Selenium爬取網(wǎng)站速度？主要知識(shí)點(diǎn)、重點(diǎn)與難點(diǎn)主要知識(shí)點(diǎn)了解靜態(tài)網(wǎng)頁和動(dòng)態(tài)網(wǎng)頁區(qū)別。逆向分析爬取動(dòng)態(tài)網(wǎng)頁。安裝Selenium庫以及下載瀏覽器補(bǔ)丁。Selenium庫聲明瀏覽對(duì)象并訪問頁面。Selenium庫頁面等待。Selenium庫頁面操作。Selenium庫元素選取。Selenium庫預(yù)期的條件。了解MongoDB數(shù)據(jù)庫和MySQL數(shù)據(jù)庫的區(qū)別。將數(shù)據(jù)存儲(chǔ)入MongoDB數(shù)據(jù)庫。重點(diǎn)逆向分析爬取動(dòng)態(tài)網(wǎng)頁。Selenium庫元素選取。將數(shù)據(jù)存儲(chǔ)入MongoDB數(shù)據(jù)庫。難點(diǎn)Selenium庫的使用。將數(shù)據(jù)存儲(chǔ)入MongoDB數(shù)據(jù)庫。教學(xué)過程設(shè)計(jì)理論教學(xué)過程了解靜態(tài)網(wǎng)頁和動(dòng)態(tài)網(wǎng)頁的區(qū)別。獲取“”首頁的信息。對(duì)“”首頁進(jìn)行逆向分析爬取。了解Selenium庫的使用方法。分析“/search/books”首頁的網(wǎng)頁結(jié)構(gòu)。分析網(wǎng)頁“/search/books”搜索“Python編程”圖書的操作。使用Selenium庫模擬瀏覽器的操作。了解MongoDB數(shù)據(jù)庫與MySQL的區(qū)別。在Python上建立連接MongoDB數(shù)據(jù)庫。將數(shù)據(jù)插入MongoDB數(shù)據(jù)庫的集合中。實(shí)驗(yàn)教學(xué)過程獲取“”首頁的信息。對(duì)“”首頁進(jìn)行逆向分析爬取。分析“/search/books”首頁的網(wǎng)頁結(jié)構(gòu)。分析網(wǎng)頁“/search/books”搜索“Python編程”圖