[爬蟲實戰] 如何透過Selenium 自動將頁面捲動至最下方抓取資料?

[爬蟲實戰] 如何透過Selenium 自動將頁面捲動至最下方抓取資料?

[爬蟲實戰] 如何透過Selenium 自動將頁面捲動至最下方抓取資料?

當碰到瀑布流網站(例如: EZTABLE),抓取資訊就會變得比較困難。但所幸可以使用Selenium 執行Javascript 來解決頁面捲動的問題,在本範例中,我們利用execute_script 執行 window.scrollTo(0, document.body.scrollHeight);,便可順利抓取瀑布流式網頁。

  • 星期四 31 三月 2016
回到最上面