[財經爬蟲] 如何透過Python 網路爬蟲抓取Goodinfo 台灣股市資訊網?

  • 大數學堂
  • 2020年8月2日 14:08

Goodinfo 台灣股市資訊網 (https://goodinfo.tw/) 蘊藏了許多股票的重要資訊。

為了能夠快速分析這些股市資訊,我們希望能打造一個Python 網路爬蟲自動化的爬取各股票的歷年經營績效,但Goodinfo 有設立了防爬蟲機制,因此我們即加上user-agent 讓網站誤以為我們的爬蟲是真人瀏覽行為,我們即可以順利爬取資料。

再透過Pandas 的整理功能,我們即可以迅速將網頁轉變成結構化資訊,讓有價值的資料能作輔助我們的投資決策!

影片: https://largitdata.com/course/132/

程式碼:https://github.com/ywchiu/largitdata/blob/master/code/Course_132.ipynb

#Goodinfo

#Python網路爬蟲

#財經爬蟲

#大數學堂

#大數軟體