[爬蟲實戰] 如何透過Selenium 自動將頁面捲動至最下方抓取資料?

  • 大數學堂
  • March 31, 2016, 4:24 p.m.

當碰到瀑布流網站 (例如: EZTABLE)，抓取資訊就會變得比較困難。

但所幸可以使用Selenium 執行Javascript 來解決頁面捲動的問題。

在本範例中，我們利用 execute_script 執行 window.scrollTo(0, document.body.scrollHeight);，便可順利抓取瀑布流式網頁。