第頁項目5爬取商城網(wǎng)站數(shù)據(jù)課時內(nèi)容授課時間課時selenium爬取動態(tài)數(shù)據(jù)90分鐘講授4實(shí)踐6教學(xué)目標(biāo)教學(xué)重點(diǎn)學(xué)習(xí)使用selenium爬取包含多個網(wǎng)頁的商城網(wǎng)站數(shù)據(jù)。教學(xué)難點(diǎn)學(xué)習(xí)selenium環(huán)境的搭建，并使用selenium編寫爬蟲程序。學(xué)習(xí)使用selenium的XPath、CSS等方法查找元素。學(xué)習(xí)使用selenium模擬瀏覽器的訪問過程與用戶的登錄過程并爬取數(shù)據(jù)。學(xué)習(xí)創(chuàng)建Ajax網(wǎng)站并使用selenium爬取數(shù)據(jù)。學(xué)習(xí)使用selenium等待延遲的HTML元素并最終爬取元素的數(shù)據(jù)。教學(xué)設(shè)計1.教學(xué)思路：（1）通過講解selenium環(huán)境的搭建、selenium中包括的爬取方式等相關(guān)知識，讓學(xué)生了解selenium爬蟲程序的概況；（2）講解制作模擬商城網(wǎng)站的爬取，讓學(xué)生掌握上述知識點(diǎn)的基本操作；（3）安排練習(xí)爬取實(shí)際商城網(wǎng)站，鞏固學(xué)生掌握的技能。2.教學(xué)手段：（1）講解基礎(chǔ)知識，講解結(jié)束后開始實(shí)踐并進(jìn)行疑難解答；（2）通過實(shí)戰(zhàn)項目，讓學(xué)生掌握爬蟲程序在實(shí)際工作中的相關(guān)應(yīng)用。3.教學(xué)要求：可對實(shí)際商城網(wǎng)站進(jìn)行爬取，讓學(xué)生了解爬蟲爬取商城網(wǎng)站應(yīng)該掌握的技能。教學(xué)內(nèi)容1.1商品網(wǎng)站項目任務(wù)1.2selenium編寫爬蟲程序1.2.1JavaScript控制網(wǎng)頁1.2.2普通爬蟲程序的問題1.2.3安裝selenium框架1.2.4編寫selenium爬蟲程序1.3selenium查找HTML元素1.3.1創(chuàng)建模擬商城網(wǎng)站1.3.2使用xpath查找元素1.3.3查找元素的文本與屬性1.3.3使用id查找元素1.3.4使用name查找元素1.3.5使用CSS查找元素1.3.6使用tagname查找元素1.3.7使用文本查找超級鏈接1.3.8使用class查找元素1.4selenium實(shí)現(xiàn)用戶登錄1.4.1創(chuàng)建用戶登錄網(wǎng)站1.4.2使用元素動作1.4.3編寫爬蟲程序1.4.4執(zhí)行JavaScript程序1.5selenium爬取Ajax網(wǎng)頁數(shù)據(jù)1.5.1創(chuàng)建Ajax的網(wǎng)站1.5.2理解selenium爬蟲程序1.5.3編寫爬蟲程序1.5.4執(zhí)行爬蟲程序1.6selenium等待HTML元素1.6.1創(chuàng)建延遲模擬網(wǎng)站1.6.2編寫爬蟲程序1.6.3selenium強(qiáng)制等待1.6.4selenium隱式等待1.6.5selenium顯式等待1.7綜合項目爬取模擬商城網(wǎng)站數(shù)據(jù)1.7.1創(chuàng)建模擬商城網(wǎng)站1.7.2爬取網(wǎng)站數(shù)據(jù)1.7.3設(shè)計數(shù)據(jù)存儲1.7.4編寫爬蟲程序1.7.5執(zhí)行爬蟲程序1.8實(shí)戰(zhàn)項目爬取實(shí)際商城網(wǎng)站數(shù)據(jù)1.8.1解析網(wǎng)頁HTML代碼1.8.2爬取網(wǎng)頁數(shù)據(jù)1.8.3實(shí)現(xiàn)網(wǎng)頁翻頁1.8.4編寫爬蟲程序1.8.5執(zhí)行爬蟲程序小結(jié)掌握了使用selenium爬取包含多個網(wǎng)頁的商城網(wǎng)站數(shù)據(jù)，實(shí)現(xiàn)了爬取商城網(wǎng)站數(shù)據(jù)的爬蟲程序。課程安排課程實(shí)踐環(huán)境Python3.6+vsCodeIDE教材及參考書教材《Python爬蟲項目教程》（微課