八爪魚爬蟲滾輪翻頁的網(wǎng)頁怎么爬

這類需要滾動下翻的網(wǎng)頁需要對打開網(wǎng)頁步驟進行設置在進行數(shù)據(jù)提取：

打開采集規(guī)則編輯界面：點擊打開網(wǎng)頁或者點擊元素步驟，

在右側(cè)的高級選項中勾選頁面加載完向下滾動，

根據(jù)頁面設置向下滾動的次數(shù)，及每次滾動的間隔，

滾動方式選擇“直接滾動到底部”,

設置完成后，就可以對數(shù)據(jù)進行提取。

注意：這里不需要像詳情頁提取一樣將提取數(shù)據(jù)的步驟放到翻頁循環(huán)中，打開網(wǎng)頁或者點擊元素的步驟需要放在提取數(shù)據(jù)步驟的前面，因為頁面打開后需要執(zhí)行滾動的步驟之后才開始采集，否則會導致只采集到加載后未下拉的數(shù)據(jù)，造成采集的數(shù)據(jù)缺失。