[爬蟲實戰] 如何使用 Pyppeteer抓取 PCHOME 商品價格資訊?

  • 大數學堂
  • Oct. 16, 2021, 9:55 a.m.

當碰到資料是由 Javascript 渲染而成的網頁時，就無法直接使用requests 根據頁面網址抓到我們要的資料。此時除了找出正確的資料連結或使用笨重的Selenium 外，Pyppeteer 便是我們可以使用的解決方案之一！Pyppeteer 以Python 接合 Chromium API，透過輕量的Chromium讀取Javascript渲染過的頁面資料，讓網頁爬取變得再直覺不過！

影片： https://largitdata.com/course/148/

程式碼：https://github.com/ywchiu/largitdata/blob/master/code/Course_148.ipynb

#PCHOME爬蟲

#Pyppeteer

#Puppeteer

#Python網路爬蟲

#動態網頁抓取