Python網(wǎng)絡(luò)爬蟲程序技術(shù) （微課版）配套教案02

第頁項目2爬取名言網(wǎng)站數(shù)據(jù)課時內(nèi)容授課時間課時網(wǎng)頁數(shù)據(jù)爬取方法90分鐘講授4實踐6教學(xué)目標(biāo)教學(xué)重點學(xué)習(xí)使用BeautifulSoup對網(wǎng)站的網(wǎng)頁進行解析并得到所要的數(shù)據(jù)。教學(xué)難點學(xué)習(xí)使用BeautifulSoup裝載文檔。。學(xué)習(xí)使用BeautifulSoup遍歷文檔元素。教學(xué)設(shè)計1.教學(xué)思路：（1）通過講解BeautifulSoup爬取數(shù)據(jù)等相關(guān)知識，讓學(xué)生了解BeautifulSoup；（2）講解制作模擬名言網(wǎng)站的爬取，讓學(xué)生掌握上述知識點的基本操作；（3）安排練習(xí)爬取實際名言網(wǎng)站，鞏固學(xué)生掌握的技能。2.教學(xué)手段：（1）講解基礎(chǔ)知識，講解結(jié)束后開始實踐并進行疑難解答；（2）通過實戰(zhàn)項目，讓學(xué)生掌握爬蟲程序在實際工作中的相關(guān)應(yīng)用。3.教學(xué)要求：可對實際名言網(wǎng)站進行爬取，讓學(xué)生了解爬取名言網(wǎng)站應(yīng)該掌握的技能。教學(xué)內(nèi)容1.1名言網(wǎng)站項目任務(wù)1.2BeautifulSoup裝載HTML文檔1.2.1創(chuàng)建模擬名言網(wǎng)站1.2.2安裝BeautifulSoup庫1.2.3BeautifulSoup裝載HTML文檔1.3BeautifulSoup查找HTML元素1.3.1使用find函數(shù)查找1.3.2查找元素屬性與文本1.3.3使用find_all函數(shù)查找1.3.4使用高級查找1.4BeautifulSoup遍歷文檔元素1.4.1獲取元素節(jié)點的父節(jié)點1.4.2獲取元素節(jié)點的直接子元素節(jié)點1.4.3獲取元素節(jié)點的所有子孫元素節(jié)點1.4.4獲取元素節(jié)點的兄弟節(jié)點1.5BeautifulSoup使用CSS語法查找1.5.1使用CSS語法查找1.5.2使用屬性的語法規(guī)則1.5.3select查找子孫節(jié)點1.5.4select查找直接子節(jié)點1.5.5select查找兄弟節(jié)點1.5.6select_one查找單一元素1.6綜合項目爬取模擬名言網(wǎng)站數(shù)據(jù)1.6.1創(chuàng)建模擬名言網(wǎng)站1.6.2爬取名言數(shù)據(jù)1.6.3設(shè)計存儲數(shù)據(jù)庫1.6.4編寫爬蟲程序1.6.5執(zhí)行爬蟲程序1.7實戰(zhàn)項目爬取實際名言網(wǎng)站數(shù)據(jù)1.7.1解析網(wǎng)站HTML代碼1.7.2爬取全部頁面的數(shù)據(jù)1.7.3編寫爬蟲程序1.7.4執(zhí)行爬蟲程序小結(jié)掌握了使用BeautifulSoup對網(wǎng)站的網(wǎng)頁進行解析并得到所要的數(shù)據(jù)，實現(xiàn)了爬取網(wǎng)站數(shù)據(jù)的爬蟲程序。課程安排課程實踐環(huán)境Python3.6+vsCodeIDE教材及參考書教材《Python爬蟲項目教程》（微課版），黃銳軍編，人民郵電