微博搜索關(guān)鍵詞采集【微博】搜索關(guān)鍵詞采集

在微博主頁登錄后，輸入關(guān)鍵詞搜索，采集得到的搜索結(jié)果列表數(shù)據(jù)。支持按【高級搜索】中設(shè)置的條件進搜索。?！疚⒉克阉麝P(guān)鍵詞采集在首頁搜索框輸入微博首頁網(wǎng)址然后點【開始采集】，八爪魚自動打開網(wǎng)頁。步驟1打開網(wǎng)頁【微博】搜索關(guān)鍵詞采集

1、打開瀏覽器模式點擊按鈕，打開瀏覽器模式。在瀏覽器模式中，點擊頁面的登錄按鈕，打開手機微博app掃碼登錄。步驟2微博登錄【微博】搜索關(guān)鍵詞采集2、使用Cookie登錄微博進入【打開網(wǎng)頁】設(shè)置界面，勾選【使用指定的Cookie】，點擊【獲取當(dāng)前頁面Cookie】并保存。這樣就獲取到了登錄后的Cookie，啟動時直接以登錄狀態(tài)打開網(wǎng)頁步驟2微博登錄【微博】搜索關(guān)鍵詞采集步驟三、在【高級搜索】中選擇搜索條件。

先在瀏覽器中測試一下。打開微博首頁，輸入關(guān)鍵詞【三體】，在【高級搜索】中選擇條件：【原創(chuàng)】【2023-03-0100時至2023-03-3000時】，得到網(wǎng)址：1、獲得帶有搜索關(guān)鍵詞和篩選條件的網(wǎng)址【微博】搜索關(guān)鍵詞采集步驟3：XPath軸翻頁。2、將1中的網(wǎng)址，輸入進八爪魚中在【打開網(wǎng)頁】后，增加一個步驟【打開網(wǎng)頁1】。雙擊進入【打開網(wǎng)頁1】設(shè)置頁面，輸入網(wǎng)址，然后保存，八爪魚自動打開這個網(wǎng)頁?！疚⒉克阉麝P(guān)鍵詞采集步驟四、使用自動識別，自動識別列表頁和翻頁1、使用自動識別，自動識別列表和翻頁網(wǎng)頁打開后，點擊【自動識別網(wǎng)頁內(nèi)容】，等待一段時間，成功識別了文章列表中的數(shù)據(jù)和翻頁。點擊【生成采集設(shè)置】，將自動識別出的列表數(shù)據(jù)和翻頁，生成為采集流程，方便我們使用和修改?！疚⒉克阉麝P(guān)鍵詞采集步驟四、使用自動識別，自動識別列表頁和翻頁2、修改【循環(huán)列表1】和【循環(huán)翻頁XPath自動識別生成【循環(huán)列表】和【循環(huán)翻頁】存在不通用的情況，需要手動修改。進入【循環(huán)翻頁】設(shè)置頁面，修改XPath為：//li[@class='cur']/a/../following-sibling::li[1]/a，然后點擊【應(yīng)用】保存。進入【循環(huán)列表1】設(shè)置頁面，修改XPath為：//div[@class="card-wrap"and@mid]，然后點擊【應(yīng)用】保存?！疚⒉克阉麝P(guān)鍵詞采集

在【當(dāng)前頁面數(shù)據(jù)預(yù)覽】面板中，可刪除多余字段，修改字段名，移動字段順序等。步驟五、編輯字段【微博】搜索關(guān)鍵詞采集

1、改【博文內(nèi)容】字段XPath【博文內(nèi)容】字段默認的XPath，無法精準定位到展開后的全部博文，需修改XPath。點擊【提取列表數(shù)據(jù)】進入對應(yīng)的數(shù)據(jù)預(yù)覽界面，點擊【博文內(nèi)容】字段右上方的...按鈕，選擇【修改元素定位】，修改XPath為：//div[@class="content"]//*[@class='txt'][last()]，然后應(yīng)用步驟六、優(yōu)化字段【微博】搜索關(guān)鍵詞采集2、格式化字段【轉(zhuǎn)發(fā)數(shù)】、【評論數(shù)】和【點贊數(shù)】三個字段，默認會帶上轉(zhuǎn)發(fā)、評論、贊的文本。如果需要去掉文本，只保留數(shù)字，可以通過格式化實現(xiàn)：點擊【轉(zhuǎn)發(fā)數(shù)】字段右上方的【...】按鈕，選擇【格式化數(shù)據(jù)】→【添加步驟】→【正則表達式匹配】，輸入正則表達式【\d+】后保存。【評論數(shù)】、【點贊數(shù)】的格式化數(shù)據(jù)過程相同。步驟六、優(yōu)化字段【微博】搜索關(guān)鍵詞采集1、單擊【采集】并【啟動本地采集】。啟動后八爪魚開始自動采集數(shù)據(jù)。步驟七、啟動采集【微博】搜索關(guān)鍵詞采集2、采集完成后，選擇合適的導(dǎo)出方式導(dǎo)出