大眾點評商家採集實戰-商家信息詳情-地堆人員人手一份
介紹採集使用八爪魚7.0採集大眾點評商家詳情頁數據的方法
採集網站:
https://www.dianping.com/search/category/7/30/g132
示例規則下載:
https://www.dianping.com/search/category/7/30/g1
使用功能點:
l 網頁列表內容提取
l 詳情頁數據採集
步驟1:創建採集任務
1)進入主界面,選擇「自定義模式」
2)將上面網址的網址複製粘貼到網站輸入框中,點擊「保存網址」
3)保存網址後,頁面將在八爪魚採集器中打開,紅色方框中的數據就是
我們需要採集的信息
步驟2:創建翻頁循環
l 找到翻頁按鈕,設置翻頁循環
1)將頁面下拉到底部,找到下一頁按鈕,滑鼠點擊,在右側操作提示框中,
選擇「循環點擊下一頁」
步驟3:採集詳情頁數據
l 選中需要點擊的商家名稱,創建循環點擊列表
l 進入詳情頁創建採集列表
1)如圖,移動滑鼠選中列表中商家的名稱,右鍵點擊,需採集的內容會變成綠色,然後點擊「選中全部」
注意:點擊右上角的「流程」按鈕,即可展現出可視化流程圖。
2)然後點擊「循環點擊每個元素」
3)網頁會跳轉到詳情頁中,移動滑鼠選中詳情頁商家的名稱,選擇「採集該元素的文本」
4)滑鼠右鍵點擊每個需要採集的文本欄位,點擊「採集以下數據」
5)修改採集欄位名稱,點擊下方紅色方框中的「保存並開始採集」
6)根據採集的情況選擇合適的採集方式,這裡選擇「啟動本地採集」
說明:本地採集佔用當前電腦資源進行採集,如果存在採集時間要求或當前電腦無法長時間進行採集可以使用雲採集功能,雲採集在網路中進行採集,無需當前電腦支持,電腦可以關機,可以設置多個雲節點分攤任務,10個節點相當於10台電腦分配任務幫你採集,速度降低為原來的十分之一;採集到的數據可以在雲上保存三個月,可以隨時進行導出操作。
步驟4:數據採集及導出
1)採集完成後,選擇合適的導出方式,將採集好的數據導出
希望這篇文檔的介紹,能讓你掌握大眾點評信息網頁數據採集,你可以試著上八爪魚官網http://www.bazhuayu.com下載八爪魚最新版本客戶端,也可以關注八爪魚官方微信了解到更多教程案例。
八爪魚·三分鐘就上手的網頁數據採集軟體·而且是免費軟體
點擊鏈接進入官網
八爪魚採集器 - 最好用的網頁數據採集器
推薦閱讀:
※雲時代的採集爬蟲軟體是使用瀏覽器即可操作的!
※虛擬串口技術在工廠設備PLC數據遠程採集中的應用
※如何快速掌握Python數據採集與網路爬蟲技術
※輕鬆學會採集鏈家網房源信息的爬蟲技巧