Covid19 分析案例

• 大數學堂
• 2022年5月23日 00:00

本章介紹Python進行Covid19分析的案例，從相關數據集中提取信息，使用數據科學工具進行分析和視覺化。透過案例，學習使用Python進行數據清理 聚合 統計分析和預測模型建立等任務，了解Covid19的傳播情況和趨勢。

開始上課

Python數字、字串與輸入輸出概論

• 大數學堂
• 2022年5月23日 00:00

《Python數字 字串與輸入輸出概論》是針對資料科學家的Python課程的第一個章節。該章節介紹了使用Python進行數字計算的基本概念和技巧，同時也解釋了如何處理字串以及讀取和顯示輸入和輸出的資料。這是一個重要的基礎知識，對於學習Python的人來說非常有幫助。

開始上課

[實價登錄分析] 如何使用Python Pandas 讀取實價登錄網的資料?

• 大數學堂
• 2016年9月9日 16:25

這篇文章講述了使用實價登錄資料來分析房市景氣的方法，並介紹了如何使用Python Pandas和Linux工具iconv進行資料讀取 編碼轉換和清理的步驟。

開始上課

[交易系統] 如何抓取三大法人買賣金額統計表(Part 1)?

• 大數學堂
• 2015年4月26日 13:51

本篇文章介紹了如何使用Python的Requests模組來抓取三大法人買賣金額統計表。這是建立自己交易系統前需要的資料之一，作者提供了一步步的教學來引導讀者完成這個任務。這個教學對於想要學習如何使用Python來獲取金融相關資料的人來說很有幫助。

開始上課

[資料產品實作] 如何取得臉書使用頻率最高的文字 (Part 2)?

• 大數學堂
• 2015年11月25日 13:53

為了獲得Facebook貼文的詞頻，我們需要對貼文進行斷詞，對於英文資料，只需要根據空格斷句即可，但中文需要依賴分詞工具。我們可以使用Python套件jieba來進行分詞，然後排序，就能獲得Facebook貼文中最常使用的詞頻。

開始上課

數字練習題

• 大數學堂
• 2022年5月23日 00:00

「給資料科學家的Python 課程」的數字練習題專注於幫助資料科學家掌握處理數字資料的技巧。學習者將學習使用Python進行數字運算 數值轉換 數字格式化等技術。這些技術對於資料分析 資料視覺化和統計分析非常重要。通過這些練習，學習者將掌握Python的數學運算符號 數學函數 數學模塊，並學習如何使用內建函數和模塊處理數字類型的資料。

開始上課

輸入與輸出練習題

• 大數學堂
• 2022年5月23日 00:00

這個章節將帶領資料科學家們進行與輸入與輸出相關的練習題。主題包括使用Python的輸入與輸出功能，從檔案中讀取數據 將數據寫入檔案 以及使用標準輸入與輸出。這些練習將讓你瞭解如何處理不同的輸入與輸出情況，並學會將處理後的結果輸出到不同的檔案或終端上。這些技巧對於資料科學家來說非常重要，因為數據的輸入與輸出是資料分析的關鍵一步。

開始上課

清單 (List) 練習題

• 大數學堂
• 2022年5月23日 00:00

本章節指出了練習題的重要性，以加強資料科學家對於Python中清單的熟練度。清單概念在資料科學中佔有重要地位，因此通過這些練習題能夠提升對清單的使用能力。

開始上課

[交易系統] 如何抓取三大法人買賣金額統計表(Part 2)?

• 大數學堂
• 2015年4月28日 16:04

本教學將透過BeautifulSoup 4和css selector，來抓取三大法人買賣金額統計表的資訊。首先，我們需要導入requests和BeautifulSoup套件。然後，使用requests.get()函式來獲取網頁的HTML內容，將其存儲在一個變數中。接下來，使用BeautifulSoup的select()方法和正確的css選擇器，來定位我們要抓取的元素。最後，遍歷結果，將每個元素的文本打印出來或進一步處理。這樣，我們就可以輕鬆地獲取三大法人買賣金額統計表的資訊了。

開始上課

開始使用Python撰寫網路爬蟲 ( Crawler )

• 大數學堂
• 2015年4月15日 00:49

這篇文章介紹了使用Python編寫網路爬蟲的開始步驟，其中需要安裝兩個Python套件：Requests和BeautifulSoup4。Requests是一個用於網路資源擷取的套件，而BeautifulSoup4則是一個用於HTML剖析的套件。

開始上課

模組、套件、第三方套件速覽

• 大數學堂
• 2022年5月23日 00:00

本章節將介紹Python中的模組 套件以及第三方套件。模組是一個Python檔案，可以包含變數 函式 類等程式碼，我們可以透過import語句引入使用。套件則是由多個模組組成的集合，方便共享和重複使用程式碼。常見的Python套件有math datetime random等。除了內建的模組和套件外，我們還可以使用第三方套件來擴展Python功能。第三方套件是由其他開發者開發的，可在官方網站或第三方網站下載和安裝。這章節將教你如何使用模組及套件，並安裝和管理第三方套件，提升Python程式開發效率。

開始上課

如何使用RSelenium 抓取PTT Food版的內容?

• 大數學堂
• 2015年6月29日 15:41

R可以搭配Web自動化測試工具Selenium進行網頁抓取，只要使用RSelenium進行安裝和使用，就能在Firefox瀏覽器中使用R腳本抓取網頁內容。這樣的功能不僅僅只有Python才能實現。

開始上課

用第三方套件打造"真"對話機器人

• 大數學堂
• 2022年5月23日 00:00

本文介紹如何使用Python中的第三方套件打造一個真實的對話機器人。對話機器人可以進行自然的對話，並根據使用者的輸入提供適當的回應。文章提到可以使用NLTK或spaCy等自然語言處理套件來處理和分析使用者的輸入。同時，可以使用GPT模型等語言模型生成自然流暢的回應。另外，也可以使用SpeechRecognition等語音辨識套件實現語音輸入功能。文章指出，這些套件能夠讓應用程序能與使用者進行自然且有意義的對話。

開始上課

Pythonic

• 大數學堂
• 2022年5月23日 00:00

Pythonic是指用Python編寫的程式碼符合Python語言風格和指導原則。這種程式碼利用Python的特色，實現了更簡潔 可讀性高和以Python方式解決問題的程式碼。

開始上課

Python 總複習 - 用Python 分析川普演說文最常出現字詞(Word Count)

• 大數學堂
• 2022年5月23日 00:00

文章介紹了在Python 中使用詞頻統計或字詞計數的方法來分析川普演說文中最常出現的字詞。作者提到了使用Python 的文本處理技術預處理川普演說文的內容，並使用字典資料結構記錄每個字詞的出現次數。透過迴圈和條件判斷式，可以遍歷川普演說文並計算每個字詞的出現次數，最後，可以使用Python 的排序功能將字詞按照出現次數進行排序並進行視覺化。

開始上課

結尾

• 大數學堂
• 2022年5月23日 00:00

這是一個Python課程的結束評價和感謝。該課程涵蓋了Python的基礎知識和資料科學應用，包括常用庫 資料視覺化和網絡爬蟲。重視實踐和應用，並提供了實例和練習。希望學生能夠提升Python技能，應用於資料科學項目。學生可以隨時聯繫課程作者提出問題和建議。最後，感謝學生的參與和支持，並祝願他們在資料科學領域取得成功。

開始上課

如何使用Python 的requests 及BeautifulSoup4 完成淘寶爬蟲?

• 大數學堂
• 2015年4月18日 01:59

這篇文章介紹如何使用Python的requests和BeautifulSoup4來完成淘寶網站的爬蟲。作者提到，既然已經了解了如何使用requests抓取網頁內容，並使用BeautifulSoup4來解析有用的資訊，接下來將進入實戰階段，示範如何完成淘寶爬蟲。

開始上課

[ChatGPT] 利用 ChatGPT 打造萬用網路爬蟲追蹤最新機票價格

• 大數學堂
• 2023年6月25日 09:23

本教學將教您如何使用Selenium自動瀏覽Expedia網站，並利用LangChain和ChatGPT的Extraction功能，自動解析半結構化資料。最後，使用Pandas將半結構化資料轉換為結構化資訊。透過ChatGPT和LangChain的幫助，我們可以省去編寫網路爬蟲時需要觀察元素的麻煩。再加上Selenium可以模擬人類操作，我們能夠簡化網路爬蟲的過程，輕鬆地獲取所需的網頁資訊。期待著中秋節的到來，並希望能在日圓跌至新低的時候，節省機票費用，享受一趟愉快的旅程。

開始上課

[交易系統] 如何透過Python 將抓取下來的金額資訊存入資料庫中?

• 大數學堂
• 2015年5月8日 14:49

這篇文章講述學會使用Python將資料存入資料庫並準備進行資料分析的最後一步。作者指出，他們可以將抓取的三大法人統計資訊存入finance.sqlite資料庫中，這樣就能開始進行分析了。整篇文章提供了構建分析所需的基本步驟和資訊。

開始上課

[爬蟲實戰] 如何抓取圖表內的價格資訊?

• 大數學堂
• 2015年4月25日 15:26

本文介紹了如何使用Python的正規表達式模塊re中的search函數來抓取匯率網站圖表內的價格資訊，並提供了示範網址。

開始上課

[爬蟲實戰] 如何抓取MoneyDJ 文章中的人氣指數?

• 大數學堂
• 2015年4月15日 14:27

本教學示範如何使用Python抓取MoneyDJ文章中的人氣指數。如果要安裝POSTMAN，請到指定網站下載。

開始上課

[爬蟲實戰] 如何撰寫Python爬蟲抓取台灣銀行的牌告匯率?

• 大數學堂
• 2016年12月16日 15:24

這篇文章介紹了如何利用爬蟲和Python Pandas來抓取台灣銀行的牌告匯率資料，並將其整理成漂亮的表格，並存成Excel檔案。這樣的工具可以幫助你在買進日圓時，找到最低價位，提供了出國血拼時的硬是划算方式。

開始上課

[爬蟲實戰] 如何使用Pandas快速分析上市櫃公司員工的薪資水平?

• 大數學堂
• 2020年7月5日 14:16

證交所公佈了上市與上櫃公司非擔任主管職務的全時員工薪資資訊，介紹了使用Python的requests和pandas來爬取和分析這些公司的薪資水平。以往只提供薪資平均值，而今年則加入了中位數的資訊，以更客觀地反映薪資水平。影片和程式碼連結也提供在文章中。

開始上課

[爬蟲實戰] 如何使用Selenium 抓取驗證碼?

• 大數學堂
• 2017年10月24日 15:22

使用selenium抓取驗證碼圖片並非難事，只需要先存取頁面快照，然後找到圖片位置，然後根據位置和大小，就能成功從頁面中擷取出驗證碼。接著，只需要將驗證碼交給機器學習引擎辨識，就能輕鬆讓電腦為我們自動訂票。可以參考這篇程式碼來實踐：<a href="https://github.com/ywchiu/largitdata/blob/master/code/Course_95.ipynb">https://github.com/ywchiu/largitdata/blob/master/code/Course_95.ipynb</a>

開始上課

[爬蟲實戰] 如何使用Python Pandas 分析比特幣最佳買點?

• 大數學堂
• 2017年6月9日 15:09

這篇文章提到使用Python網路爬蟲和數據分析工具Pandas來分析比特幣的趨勢線和移動平均線，以幫助投資者找到最適合的買點。並提供了程式碼的連結和與天善智能合作的線上課程，供讀者進一步了解如何使用Python進行資料分析。文章也提醒投資有賺有賠，投資前應詳閱公開說明書。

開始上課

[爬蟲實戰] 如何利用Python Flask自動轉換實價登錄網站加密字串?

• 大數學堂
• 2021年4月12日 13:47

本文介紹了如何透過Python Flask建立一個橋接器，來自動化抓取實價登錄網的加密字串。通常我們會使用Node.js或Pyexecjs等方法來加載加密函數，但這牽涉到處理Node.js或修改JavaScript的問題。透過Python Flask橋接器，我們可以輕鬆地重新導向加密字串到實價登錄網，實現破解新版實價登錄網的目標。影片和程式碼也提供了詳細的操作示例。

開始上課

[爬蟲實戰] 如何透過EMAIL即時獲取最新匯率資訊?

• 大數學堂
• 2016年12月26日 16:32

文章介紹了如何透過Python的爬蟲和電子郵件功能來自動通知匯率的變化。使用smtplib和GMAIL工具，將匯率資料以HTML格式的郵件寄送給用戶，使他們能夠即時掌握最佳的買點。這種自動化的方法能夠節省用戶的時間和精力，並確保他們不會錯過任何重要的交易機會。

開始上課

[爬蟲實戰] 如何使用機器學習方法破解驗證碼 (3) ? – 使用類神經網路自動辨認驗證碼

• 大數學堂
• 2017年7月14日 09:29

這篇文章介紹了如何用Python scikit-learn中的類神經網路(MLPClassfier)來辨識驗證碼中的數字，以進一步讓爬蟲程式更容易破解驗證碼的阻擋。文中還提供了程式碼的GitHub連結，想要學習更多機器學習相關課程的讀者們，也可以參考提供的連結。

開始上課