數(shù)據(jù)挖掘技術(shù)DataMiningTechnology>>人工智能專(zhuān)業(yè)項(xiàng)目二：租房數(shù)據(jù)的采集與存儲(chǔ)實(shí)戰(zhàn)任務(wù)一任務(wù)介紹任務(wù)二使用BeautifulSoup框架采集存儲(chǔ)租房數(shù)據(jù)任務(wù)三使用scrapy框架采集存儲(chǔ)租房數(shù)據(jù)任務(wù)四租房數(shù)據(jù)預(yù)處理任務(wù)四租房數(shù)據(jù)預(yù)處理任務(wù)四2.4.1數(shù)據(jù)類(lèi)型轉(zhuǎn)化data['短租房?jī)r(jià)格元/日']=data['短租房?jī)r(jià)格元/日'].astype(float)data['面積/㎡']=pd.to_numeric(data['面積/㎡'])data['用戶評(píng)論數(shù)']=pd.to_numeric(data['用戶評(píng)論數(shù)'])data將租房?jī)r(jià)格轉(zhuǎn)化成浮點(diǎn)數(shù)，面積、用戶評(píng)論數(shù)轉(zhuǎn)化成整型:代碼及運(yùn)行結(jié)果如下，可看到價(jià)格字段數(shù)據(jù)已變成浮點(diǎn)數(shù)：任務(wù)四2.4.2添加字段data['短租房?jī)r(jià)格元/月']=data['短租房?jī)r(jià)格元/日']*30data['短租房?jī)r(jià)格元/月']=data['短租房?jī)r(jià)格元/日'].astype(float)data添加字段'短租房?jī)r(jià)格元/月'，并將該字段設(shè)置成浮點(diǎn)數(shù)，代碼如下：運(yùn)行結(jié)果如下，可看到最后一列已添加浮點(diǎn)數(shù)類(lèi)型的'短租房?jī)r(jià)格元/月字段：任務(wù)四2.4.3

調(diào)整字段順序d=data.pop('短租房?jī)r(jià)格元/月')data.insert(4,'短租房?jī)r(jià)格元/月',)data上圖看到，字段'短租房?jī)r(jià)格元/日'和'短租房?jī)r(jià)格元/月'相隔較遠(yuǎn)，需將字段'短租房?jī)r(jià)格元/月'字段順序調(diào)整到字段'短租房?jī)r(jià)格元/日'之后，實(shí)現(xiàn)代碼如下:運(yùn)行結(jié)果如下所示：任務(wù)四2.4.4數(shù)據(jù)導(dǎo)出data.to_excel(r'C:\Users\1\PycharmProjects\yuchuli\nanning（導(dǎo)出）.xlsx')將預(yù)處理后的數(shù)據(jù)導(dǎo)出至excel表格中，代碼如下：到指定路徑中即可找到導(dǎo)出文件：任務(wù)四2.4.4數(shù)據(jù)導(dǎo)出打開(kāi)文件查看：本章小結(jié)本項(xiàng)目主要介紹了爬蟲(chóng)框架Scrapy、BeautifulSoup在租房數(shù)據(jù)場(chǎng)景的采集與存儲(chǔ)實(shí)相關(guān)內(nèi)容。通過(guò)本項(xiàng)目的學(xué)習(xí)，讀者應(yīng)重點(diǎn)掌握以下內(nèi)容：數(shù)據(jù)源系統(tǒng)及數(shù)據(jù)分類(lèi)。Scrapy、BeautifulSoup爬蟲(chóng)框架的原理。Scrapy、BeautifulSoup框架爬取存儲(chǔ)58同城網(wǎng)租房數(shù)據(jù)。使用pandas庫(kù)對(duì)租房數(shù)據(jù)進(jìn)行預(yù)處理。任務(wù)小結(jié)數(shù)據(jù)類(lèi)型轉(zhuǎn)化添加字段調(diào)整字段順序數(shù)據(jù)導(dǎo)出習(xí)題爬蟲(chóng)常見(jiàn)的框架有哪些？常見(jiàn)的數(shù)據(jù)存儲(chǔ)格式有哪些？文本文件的打開(kāi)方式有哪些？MySql常見(jiàn)的數(shù)據(jù)管理客戶端有哪些？SQLite創(chuàng)建表的語(yǔ)句是什么？概念題編寫(xiě)一個(gè)天氣預(yù)報(bào)的爬蟲(chóng)系統(tǒng)。要求系統(tǒng)實(shí)現(xiàn)如下功能：支持搜索關(guān)鍵字對(duì)應(yīng)的頁(yè)面爬取。獲