[爬蟲實戰 ]如何模擬用戶代理 (User Agent) 成功存取目標網頁內容 (以永慶房屋為例)?

• 大數學堂
• 2015年4月27日 15:29

有些網頁伺服器會檢查用戶代理以限制爬蟲存取頁面內容，但我們可以通過在標頭中增加自己的瀏覽器用戶代理來繞過這種限制，成功獲取網頁內容。這種技術可以用來抓取永慶房屋的房價資訊。

開始上課

[交易系統] 如何抓取三大法人買賣金額統計表(Part 1)?

• 大數學堂
• 2015年4月26日 13:51

本篇文章介紹了如何使用Python的Requests模組來抓取三大法人買賣金額統計表。這是建立自己交易系統前需要的資料之一，作者提供了一步步的教學來引導讀者完成這個任務。這個教學對於想要學習如何使用Python來獲取金融相關資料的人來說很有幫助。

開始上課

[爬蟲實戰] 如何抓取圖表內的價格資訊?

• 大數學堂
• 2015年4月25日 15:26

本文介紹了如何使用Python的正規表達式模塊re中的search函數來抓取匯率網站圖表內的價格資訊，並提供了示範網址。

開始上課

[爬蟲實戰] 如何剖析PTT的網頁?

• 大數學堂
• 2015年4月24日 13:49

本篇文章介紹了如何使用Python的requests和BeautifulSoup4函式庫來獲取並解析PTT網站的文章內容。透過requests的get方法可以將網頁內容取回，再使用BeautifulSoup4來解析原始碼，提取出有意義的結構化資訊，例如文章標題 作者和發文時間等。這對於進一步分析和處理PTT文章內容非常有用。

開始上課

[爬蟲實戰] 如何爬取PTT的網頁?

• 大數學堂
• 2015年4月23日 15:09

本次實戰介紹如何從PTT Food版抓取鄉民的言論，以進行美食文字探勘分析。

開始上課