項(xiàng)目3 簡(jiǎn)單靜態(tài)網(wǎng)頁(yè)爬取-獲取某企業(yè)官網(wǎng)基本信息 教案

項(xiàng)目3簡(jiǎn)單靜態(tài)網(wǎng)頁(yè)爬取——獲取某企業(yè)官網(wǎng)基本信息教案課程名稱：Python網(wǎng)絡(luò)爬蟲(chóng)技術(shù)課程類別：必修適用專業(yè)：大數(shù)據(jù)技術(shù)類相關(guān)專業(yè)總學(xué)時(shí)：64學(xué)時(shí)（其中理論24學(xué)時(shí)，實(shí)驗(yàn)40學(xué)時(shí)）總學(xué)分：4.0學(xué)分本章學(xué)時(shí)：16學(xué)時(shí)材料清單《Python網(wǎng)絡(luò)爬蟲(chóng)技術(shù)（第2版）（微課版）》教材。配套PPT。引導(dǎo)性提問(wèn)。探究性問(wèn)題。拓展性問(wèn)題。教學(xué)目標(biāo)與基本要求教學(xué)目標(biāo)使用Chrome開(kāi)發(fā)者工具定位目標(biāo)元素，查看網(wǎng)頁(yè)資源加載情況；使用urllib3和Requests庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求，并使用Xpath、BeautifulSoup庫(kù)和正則表達(dá)式解析網(wǎng)頁(yè)內(nèi)容；講解將解析得到的數(shù)據(jù)存儲(chǔ)到JSON文件、MySQL數(shù)據(jù)庫(kù)當(dāng)中的方法?；疽笳莆誄hrome瀏覽器開(kāi)發(fā)者工具的使用方法。掌握使用urllib3和Requests庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求的流程。掌握Xpath的基本語(yǔ)法和常用函數(shù)。掌握創(chuàng)建BeautifulSoup對(duì)象的方法。掌握正則表達(dá)式解析網(wǎng)頁(yè)的常用方法。掌握使用JSON模塊和PyMySQL庫(kù)存儲(chǔ)數(shù)據(jù)的方法。問(wèn)題引導(dǎo)性提問(wèn)引導(dǎo)性提問(wèn)需要教師根據(jù)教材內(nèi)容和學(xué)生實(shí)際水平，提出問(wèn)題，啟發(fā)引導(dǎo)學(xué)生去解決問(wèn)題，提問(wèn)，從而達(dá)到理解、掌握知識(shí)，發(fā)展各種能力和提高思想覺(jué)悟的目的。Chrome開(kāi)發(fā)者模式中如何查看網(wǎng)頁(yè)源碼？定位某個(gè)元素？創(chuàng)建HTML文件時(shí)，使用到了各種標(biāo)簽，能否使用標(biāo)簽之間的關(guān)系定位到某個(gè)標(biāo)簽？結(jié)合之前課程的學(xué)習(xí)，文本信息保存到本地，使用Python代碼可以保存為什么類型？探究性問(wèn)題探究性問(wèn)題需要教師深入鉆研教材的基礎(chǔ)上精心設(shè)計(jì)，提問(wèn)的角度或者在引導(dǎo)性提問(wèn)的基礎(chǔ)上，從重點(diǎn)、難點(diǎn)問(wèn)題切入，進(jìn)行插入式提問(wèn)。或者是對(duì)引導(dǎo)式提問(wèn)中尚未涉及但在課文中又是重要的問(wèn)題加以設(shè)問(wèn)。Xpath和BeautiuflSoup定位標(biāo)簽元素時(shí)，有何異同點(diǎn)？正則表達(dá)式中貪婪模式和非貪婪模式分別是何含義？如何區(qū)分？MySQL是用什么SQL指令實(shí)現(xiàn)數(shù)據(jù)插入？如何實(shí)現(xiàn)多行數(shù)據(jù)插入？拓展性問(wèn)題拓展性問(wèn)題需要教師深刻理解教材的意義，學(xué)生的學(xué)習(xí)動(dòng)態(tài)后，根據(jù)學(xué)生學(xué)習(xí)層次，提出切實(shí)可行的關(guān)乎實(shí)際的可操作問(wèn)題。亦可以提供拓展資料供學(xué)生研習(xí)探討，完成拓展性問(wèn)題。使用PyMySQL庫(kù)如何從數(shù)據(jù)表中刪除數(shù)據(jù)？更新數(shù)據(jù)？Chrome開(kāi)發(fā)者工具中，其他選項(xiàng)卡的作用是什么？主要知識(shí)點(diǎn)、重點(diǎn)與難點(diǎn)主要知識(shí)點(diǎn)Chrome瀏覽器查看網(wǎng)頁(yè)。urllib3庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求。Requests庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求。Xpath解析網(wǎng)頁(yè)。BeautifulSoup庫(kù)解析網(wǎng)頁(yè)。正則表達(dá)式解析網(wǎng)頁(yè)。將數(shù)據(jù)存儲(chǔ)為JSON文件。將數(shù)據(jù)存儲(chǔ)到MySQL數(shù)據(jù)庫(kù)。重點(diǎn)Requests庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求。Xpath解析網(wǎng)頁(yè)。BeautifulSoup庫(kù)解析網(wǎng)頁(yè)。將數(shù)據(jù)存儲(chǔ)到MySQL數(shù)據(jù)庫(kù)。難點(diǎn)正則表達(dá)式解析網(wǎng)頁(yè)。將數(shù)據(jù)存儲(chǔ)到MySQL數(shù)據(jù)庫(kù)。教學(xué)過(guò)程設(shè)計(jì)理論教學(xué)過(guò)程使用Chrome瀏覽器查看網(wǎng)頁(yè)。使用urllib3庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求。使用Requests庫(kù)實(shí)現(xiàn)HTTP請(qǐng)求。使用Xpath解析網(wǎng)頁(yè)。使用BeautifulSoup庫(kù)解析網(wǎng)頁(yè)。使用正則表達(dá)式解析網(wǎng)頁(yè)。將數(shù)據(jù)存儲(chǔ)為JSON文件。將數(shù)據(jù)存儲(chǔ)到MySQL數(shù)據(jù)庫(kù)。實(shí)驗(yàn)教學(xué)過(guò)程使用Chrome瀏覽器查看網(wǎng)頁(yè)源碼，并定位節(jié)點(diǎn)。使用urllib3和Requests實(shí)現(xiàn)HTTP請(qǐng)求發(fā)送和接收響應(yīng)結(jié)果。使用Xpath、BeautifulSoup或者正則表達(dá)式對(duì)響應(yīng)的內(nèi)容進(jìn)行解析。將數(shù)據(jù)存儲(chǔ)到JSON文件中。將數(shù)據(jù)存儲(chǔ)到MySQL數(shù)據(jù)庫(kù)中。教材與參考資料教材池瑞楠．Python網(wǎng)絡(luò)爬蟲(chóng)技術(shù)（第2版）（微課版）[M]．人民郵電出版社．2023．參考資料江吉彬．Python網(wǎng)絡(luò)爬蟲(chóng)技術(shù)[M]．人民郵電出版社．2