[爬蟲實戰] 如何透過Selenium 自動將頁面捲動至最下方抓取資料?

  • 大數學堂
  • 2016年3月31日 16:24

當碰到瀑布流網站 (例如: EZTABLE),抓取資訊就會變得比較困難。

但所幸可以使用Selenium 執行Javascript 來解決頁面捲動的問題。

在本範例中,我們利用 execute_script 執行 window.scrollTo(0, document.body.scrollHeight);,便可順利抓取瀑布流式網頁。