[資料產品實作] 如何取得臉書使用頻率最高的文字 (Part 1)?

• 大數學堂
• Nov. 25, 2015, 1:07 p.m.

文章介紹了最近vonvon的人氣臉書文字分析服務，並提供了使用網路爬蟲（Python Crawler）來抓取用戶在Facebook上留下的所有訊息內容的教程。

開始上課

為什麼要學習Python?

• 大數學堂
• May 23, 2022, midnight

Python是一種非常流行的程式語言，用於各種領域。學習Python的原因包括其簡單易學的語法，跨平台的特性，以及在資料科學和機器學習領域的廣泛應用。此外，Python擁有大量的資源和社區支持。學習Python對於資料科學家來說是必備技能之一，能夠快速開發和執行數據科學項目，並能夠與廣泛的工具和庫集成。

開始上課

Jupyter Notebook 操作簡介

• 大數學堂
• May 23, 2022, midnight

Jupyter Notebook是一個交互式程式開發環境，能夠支援多種程式語言，並能在同一個環境中整合程式碼 文字和圖片。它使用單元格作為開發基礎，使用者可以根據需要新增 刪除 移動這些單元格，並即時執行程式碼並進行調試。Jupyter Notebook還提供了自動完成 代碼提示 內容搜索等功能，提高程式撰寫效率。此外，它還支援共享到網路上

開始上課

Spyder 操作簡介

• 大數學堂
• May 23, 2022, midnight

本文介紹了Spyder作為一個針對資料科學家所設計的整合開發環境(IDE)的功能。從安裝和設定開始，探索Spyder的介面和佈局，並介紹了新建 開啟 儲存和執行Python檔案的方法。此外，還介紹了變數瀏覽器 錯誤檢查 調試功能以及使用內置控制台進行交互式編寫和測試的方法。最後，聚焦於Spyder的潛力，提高資料科學工作效率和加速開發和測試過程。

開始上課

Covid19 分析案例

• 大數學堂
• May 23, 2022, midnight

本章介紹Python進行Covid19分析的案例，從相關數據集中提取信息，使用數據科學工具進行分析和視覺化。透過案例，學習使用Python進行數據清理 聚合 統計分析和預測模型建立等任務，了解Covid19的傳播情況和趨勢。

開始上課

[其他專題] 完美結合！ Excel 中也可以用 Python 做機器學習？

• 大數學堂
• Oct. 17, 2023, 9 p.m.

以前在Python中進行資料分析可能會讓你不得不依賴Pandas，但當需要進行資料修改或新增時，Excel總是那個得心應手的選擇，對吧？現在有一個令人興奮的消息！微軟和Anaconda攜手合作，將Anaconda帶入Excel的世界中。這意味著，現在你可以在Excel的熟悉界面中，發揮Python的強大威力，進行資料分析和機器學習。不再需要繁瑣的資料匯出和匯入，一切都在一個地方搞定！🔗🔢

開始上課

如何安裝 R (3.2.0 for Windows)

• 大數學堂
• May 11, 2015, 1:55 p.m.

本章將介紹在Windows上安裝R 3.2.0的步驟，R是資料分析不可或缺的工具，也是資料分析的好助手。

開始上課

[交易系統] 如何抓取三大法人買賣金額統計表(Part 1)?

• 大數學堂
• April 26, 2015, 1:51 p.m.

本篇文章介紹了如何使用Python的Requests模組來抓取三大法人買賣金額統計表。這是建立自己交易系統前需要的資料之一，作者提供了一步步的教學來引導讀者完成這個任務。這個教學對於想要學習如何使用Python來獲取金融相關資料的人來說很有幫助。

開始上課

什麼是網路爬蟲?

• 大數學堂
• April 10, 2015, 5:49 a.m.

爬蟲是一種利用HTTP Request 抓取網路資料的技術，可以用來建立比價網站或進行資料分析。當你需要資料但又無法與他人交換或合作時，爬蟲技術可以將他人的資料庫變成自己的資料庫。這種技術擁有很大的應用價值。

開始上課

數字(Numeric)

• 大數學堂
• May 23, 2022, midnight

本文介紹了在Python中使用數字的基本操作和常用函數。Python提供了整數 浮點數和複數等不同的數字型別。文章還介紹了數字的基本操作（如加法 減法 乘法 除法）和常用函數（如絕對值 四捨五入 取整）。同時，文章還介紹了如何使用數字解決實際問題，例如計算平均值 標準差

開始上課

[比特幣程式交易] 如何透過API獲取比特幣歷史報價數據?

• 大數學堂
• Jan. 13, 2021, 2:11 p.m.

比特幣快速突破歷史新高後，開始快速回檔。因此，有人打算透過 Python 分析比特幣的買賣點，以引領獲利。他們首先教大家使用Poloniex的API獲取歷史報價資訊，並用Plotly將數據繪製成K線圖。影片和程式碼可以在相應的鏈接中找到。

開始上課

[財經爬蟲] 如何透過Pandas 快速抓取並分析黃金價格?

• 大數學堂
• May 15, 2020, 2:56 p.m.

這篇文章介紹了如何使用Python的Pandas套件進行黃金價格的抓取和分析。文章提供了一個影片教學和相應的程式碼連結。這將幫助讀者輕鬆地掌握黃金價格的網路爬蟲。文章也列出了一些相關的標籤，包括Python網路爬蟲 黃金價格 Pandas和財經爬蟲。

開始上課

[實價登錄分析] 如何使用Python Pandas 讀取實價登錄網的資料?

• 大數學堂
• Sept. 9, 2016, 4:25 p.m.

這篇文章講述了使用實價登錄資料來分析房市景氣的方法，並介紹了如何使用Python Pandas和Linux工具iconv進行資料讀取 編碼轉換和清理的步驟。

開始上課

數字練習題

• 大數學堂
• May 23, 2022, midnight

「給資料科學家的Python 課程」的數字練習題專注於幫助資料科學家掌握處理數字資料的技巧。學習者將學習使用Python進行數字運算 數值轉換 數字格式化等技術。這些技術對於資料分析 資料視覺化和統計分析非常重要。通過這些練習，學習者將掌握Python的數學運算符號 數學函數 數學模塊，並學習如何使用內建函數和模塊處理數字類型的資料。

開始上課

輸入與輸出練習題

• 大數學堂
• May 23, 2022, midnight

這個章節將帶領資料科學家們進行與輸入與輸出相關的練習題。主題包括使用Python的輸入與輸出功能，從檔案中讀取數據 將數據寫入檔案 以及使用標準輸入與輸出。這些練習將讓你瞭解如何處理不同的輸入與輸出情況，並學會將處理後的結果輸出到不同的檔案或終端上。這些技巧對於資料科學家來說非常重要，因為數據的輸入與輸出是資料分析的關鍵一步。

開始上課

[實價登錄分析] 如何使用Python Pandas 整併歷年實價登錄資訊?

• 大數學堂
• Sept. 14, 2016, 4:29 p.m.

文章中提到，僅整理一季的資料無法完整進行房價分析，因此需要將歷年的實價登錄資訊存放在不同的目錄夾中。接著，使用Pandas的Data Frame將各季的資料讀入，再使用Concat指令合併所有的Data Frame。以此，可以選擇使用describe指令獲得敘述性統計，或使用to_excel功能將資料寫入Excel檔案中。

開始上課

[比特幣程式交易] 如何使用TA-Lib快速建立比特幣技術分析指標?

• 大數學堂
• Jan. 20, 2021, 3:52 a.m.

這篇文章介紹了如何使用TA-Lib建立158種常見的技術分析指標。搭配Plotly圖表整合，能夠快速找出比特幣的平均移動線 KD指標 RSI指標和MACD等指標，並進行可視化分析。提供了相關影片和程式碼供參考。

開始上課

如何在五分鐘內透過AWS的EMR服務快速開啟一個Hadoop叢集?

• 大數學堂
• May 20, 2015, 4:38 p.m.

這篇文章介紹了如何使用Amazon EC2的EMR服務快速建立Hadoop叢集，並指出這將使巨量資料分析變得非常簡單。同時，文章也提到如果讀者對Hadoop和其生態系統有更多興趣的話，可以參考由作者和Tibame共同開設的線上課程。

開始上課

如何安裝Spark-Notebook 在Ubuntu?

• 大數學堂
• June 2, 2015, 4:11 p.m.

本文介紹了一個優秀的專案Spark Notebook，該專案可以使用Jupyter Notebook的形式存取Spark並生成可互動的視覺化圖表。除了可以使用WISP來使用d3.js生成SVG圖檔外，還支持使用筆記本形式來進行資料分析。這將為使用者提供更多的工具來進行Spark的操作和視覺化。

開始上課

[ChatGPT] Whisper還是剪映？選擇最佳字幕創建工具讓你的影片更專業！

• 大數學堂
• March 12, 2023, 8:31 a.m.

這篇文章提到隨著YouTube影片的普及，語音轉文字的需求也相應增加。文章介紹了如何使用Python調用Whisper API將YouTube影片轉錄成字幕，並利用Pysrt合併和修改字幕時間。同時還比較了這種轉錄方式與剪映的差異。影片和程式碼也提供了相關連結，以便讀者更深入了解。該文章還以標籤形式列出了相關的主題，如語音識別 YouTube字幕生成等，方便讀者查找相關資訊。

開始上課

套件(Package)

• 大數學堂
• May 23, 2022, midnight

在資料科學中，套件 (Package) 是指一組相關的功能模組或程式庫，以協助資料科學家處理和分析數據。Python 是一個廣受歡迎的程式語言，擁有豐富的套件生態系統，對於資料科學家來說，這些套件不僅能節省開發時間，還能幫助處理龐大的數據集。

開始上課

如何使用Python 套件: BeautifulSoup4 剖析網頁內容?

• 大數學堂
• April 17, 2015, 4:19 p.m.

這篇文章介紹了使用BeautifulSoup4來解析網頁內容的方法。透過幾個簡單的選取動作，我們可以迅速地從非結構化的資料中抓取有價值的部分。有了這些資料，進一步的分析也就離我們不遠了。

開始上課

[分類實戰] 如何使用Spark 預測客戶是否流失(Part 2)?

• 大數學堂
• June 18, 2015, 4:14 p.m.

MLlib 提供了決策樹分類的功能，使用DecisionTree.train可以輕鬆建立模型並預測客戶是否流失。此外，也可以使用不同的套件計算準確度和AUC，使用Spark來分析大量的資料非常簡便和迅速。

開始上課

用第三方套件打造"真"對話機器人

• 大數學堂
• May 23, 2022, midnight

本文介紹如何使用Python中的第三方套件打造一個真實的對話機器人。對話機器人可以進行自然的對話，並根據使用者的輸入提供適當的回應。文章提到可以使用NLTK或spaCy等自然語言處理套件來處理和分析使用者的輸入。同時，可以使用GPT模型等語言模型生成自然流暢的回應。另外，也可以使用SpeechRecognition等語音辨識套件實現語音輸入功能。文章指出，這些套件能夠讓應用程序能與使用者進行自然且有意義的對話。

開始上課

第三方套件練習題 - 運用結巴斷詞

• 大數學堂
• May 23, 2022, midnight

結巴斷詞（jieba）是一個常用的中文中文字斷詞的Python套件。該套件可以將中文文本進行分割，分離出詞彙的單位，方便進行文本分析 文字處理等自然語言處理任務。想使用結巴斷詞套件，需要先安裝並匯入該套件。以下有安裝指令和匯入代碼的示例。透過結巴斷詞可以將中文句子斷詞為詞彙的單位，方便後續的處理和分析。

開始上課

檔案簡介

• 大數學堂
• May 23, 2022, midnight

這個 Python 課程針對資料科學家設計，旨在教授他們Python的核心概念和技術，以應用於資料分析和機器學習項目。Python 是一種簡潔 易於學習的程式語言，在資料科學領域廣泛應用。課程將幫助資料科學家學習如何使用Python進行資料分析和機器學習工作。

開始上課

Python 總複習 - 用Python 分析川普演說文最常出現字詞(Word Count)

• 大數學堂
• May 23, 2022, midnight

文章介紹了在Python 中使用詞頻統計或字詞計數的方法來分析川普演說文中最常出現的字詞。作者提到了使用Python 的文本處理技術預處理川普演說文的內容，並使用字典資料結構記錄每個字詞的出現次數。透過迴圈和條件判斷式，可以遍歷川普演說文並計算每個字詞的出現次數，最後，可以使用Python 的排序功能將字詞按照出現次數進行排序並進行視覺化。

開始上課

結尾

• 大數學堂
• May 23, 2022, midnight

這是一個Python課程的結束評價和感謝。該課程涵蓋了Python的基礎知識和資料科學應用，包括常用庫 資料視覺化和網絡爬蟲。重視實踐和應用，並提供了實例和練習。希望學生能夠提升Python技能，應用於資料科學項目。學生可以隨時聯繫課程作者提出問題和建議。最後，感謝學生的參與和支持，並祝願他們在資料科學領域取得成功。

開始上課

如何安裝及使用SparkR?

• 大數學堂
• June 20, 2015, 3:02 p.m.

Spark最近版本中收錄了R語言的SparkR，這讓R語言的資料分析能夠與Spark進行無縫整合。在RStudio下的安裝過程經過實測後發現，非常簡單且與使用RHadoop撰寫MapReduce非常相似。然而，研究後發現部分機器學習的功能仍需自行撰寫，無法直接呼叫MLlib，這是目前讓人最失望的部分。

開始上課

[交易系統] 如何透過Python 操作SQLite3?

• 大數學堂
• May 7, 2015, 4:31 p.m.

本章教學了如何使用Python指令和sqlite3模組來操作finance.sqlite資料庫，並成功將清理完的資訊存入表格中。

開始上課

[爬蟲實戰] 如何爬取PTT的網頁?

• 大數學堂
• April 23, 2015, 3:09 p.m.

本次實戰介紹如何從PTT Food版抓取鄉民的言論，以進行美食文字探勘分析。

開始上課

[交易系統] 如何透過Python 將抓取下來的金額資訊存入資料庫中?

• 大數學堂
• May 8, 2015, 2:49 p.m.

這篇文章講述學會使用Python將資料存入資料庫並準備進行資料分析的最後一步。作者指出，他們可以將抓取的三大法人統計資訊存入finance.sqlite資料庫中，這樣就能開始進行分析了。整篇文章提供了構建分析所需的基本步驟和資訊。

開始上課

[ChatGPT] 出一張嘴就能賺錢?! 利用 Code Interpreter 打造最強 ETF 定期定額投資策略

• 大數學堂
• July 9, 2023, 7:03 a.m.

ChatGPT的Code Interpreter能自動撰寫和執行Python程式碼，使用者可以快速分析各種ETF的優缺點，並比較各種定期定額投資策略。該功能還具有檔案上傳功能，可以直接分析來自Yahoo Finance的數據，並提供統計和視覺化報告。它甚至可以模擬不同的ETF定期定額投資策略，計算各種策略的成本、收益和收益率。Code Interpreter可以幫助投資者進行專業的投資策略分析，無需寫任何程式碼，甚至可以充當資料科學家的角色。

開始上課

[其他專題] 運用數據科學分析Wordle 該從哪個字開始猜？

• 大數學堂
• Feb. 12, 2022, 5:25 a.m.

Wordle是一款熱門遊戲，許多人想嘗試猜出當天的字謎。文章提到，猜字謎有訣竅，選擇涵蓋範圍最廣的字可得到更多提示。作者介紹使用nltk和pandas來分析，發現ceria和corey是不錯的起始字。文章附有影片和程式碼供讀者參考。同時，作者也在徵資深前端工程師，提供職缺連結。標籤包括wordle nltk pandas 資料科學和數據科學。

開始上課

[財經爬蟲] 如何使用Python 網路爬蟲抓取Yahoo 台指期的即時行情?

• 大數學堂
• Sept. 30, 2022, 12:59 p.m.

這篇文章介紹了如何使用Python網路爬蟲抓取台指期的即時行情資料，並製作成分析圖表。作者提供了相關的影片和程式碼連結，讓讀者可以更深入地了解和應用這項技術。此外，文章還提到了大數學堂這個資料科學學習平台，讓讀者可以在此找到更多學習資源。文章標籤包括python網路爬蟲 財經爬蟲 即時行情 交易機器人 Yahoo股市 台指期和台指期貨。

開始上課

[財經爬蟲]手把手帶你用Python網路爬蟲抓取Goodinfo，再結合GPT-4o快速分析潛力股!

• 大數學堂
• June 16, 2024, 9 p.m.

本教學將手把手教學如何從GoodInfo網站獲取臺積電財報數據外，還將進一步利用ChatGPT的GPT-4 API解讀財報，判斷公司是否值得投資。影片內容涵蓋了爬蟲、資料處理、API註冊、提示詞設計、財報分析等詳細步驟，幫助您掌握快速取得股票財報和AI輔助投資決策的方法。

開始上課

[財經爬蟲] 如何透過Python 網路爬蟲抓取Goodinfo 台灣股市資訊網?

• 大數學堂
• Aug. 2, 2020, 2:08 p.m.

Goodinfo台灣股市資訊網為投資者提供重要股票資訊，作者使用Python網路爬蟲自動化爬取各股票的歷年經營績效。作者通過設定user-agent以規避Goodinfo的防爬蟲機制，並使用Pandas整理資料。這樣的資料結構可以幫助投資者做出更好的投資決策。詳細的影片和程式碼連結都有提供。

開始上課

如何徹底解決在Windows上安裝Python 套件的惱人問題?

• 大數學堂
• June 7, 2015, 3:34 p.m.

文章介紹了在Windows上使用Numpy和Pandas進行資料分析時，如果不想使用Anaconda安裝Python套件的解決辦法。作者建議安裝Microsoft Visual C ++ Compiler for Python 2.7，這樣就可以解決套件安裝的問題。

開始上課

[爬蟲實戰] 如何在1111購物狂歡節 快速爬取淘寶上的商品資訊?

• 大數學堂
• Oct. 30, 2019, 1:39 p.m.

這篇文章介紹了如何快速寫一個淘寶爬蟲程式。現在的電商網頁都有提供API，可以方便地將商品資訊下載下來。只要透過Chrome的開發人員工具找到API的端口，然後使用requests將JSON格式資料爬取下來。再搭配Pandas的資料整理功能，就可以將商品資訊整理成表格，方便閱覽和分析。文章最後提供了相關影片和程式碼的連結。

開始上課

[爬蟲實戰] 如何使用Pandas快速分析上市櫃公司員工的薪資水平?

• 大數學堂
• July 5, 2020, 2:16 p.m.

證交所公佈了上市與上櫃公司非擔任主管職務的全時員工薪資資訊，介紹了使用Python的requests和pandas來爬取和分析這些公司的薪資水平。以往只提供薪資平均值，而今年則加入了中位數的資訊，以更客觀地反映薪資水平。影片和程式碼連結也提供在文章中。

開始上課

[爬蟲實戰] 如何使用 PANDAS 快速爬取財報表格?

• 大數學堂
• Dec. 30, 2015, 5:14 p.m.

表格是一種常見的數據呈現格式，使用BeautifulSoup4和PANDAS可以很方便地對表格進行解析和爬取。PANDAS的read_html方法可以將復雜的網絡表格信息快速轉換為DataFrame，成為股票分析的數據來源之一。

開始上課

[爬蟲實戰] 如何使用Python Pandas 分析比特幣最佳買點?

• 大數學堂
• June 9, 2017, 3:09 p.m.

這篇文章提到使用Python網路爬蟲和數據分析工具Pandas來分析比特幣的趨勢線和移動平均線，以幫助投資者找到最適合的買點。並提供了程式碼的連結和與天善智能合作的線上課程，供讀者進一步了解如何使用Python進行資料分析。文章也提醒投資有賺有賠，投資前應詳閱公開說明書。

開始上課

[爬蟲實戰] 如何使用Pandas 快速繪製日幣近期的匯率走勢?

• 大數學堂
• Dec. 27, 2016, 5:04 p.m.

本文介紹了使用Pandas進行資料分析並畫圖的簡單方法。首先使用pandas的read_csv功能讀取csv資料，然後使用%pylab inline將圖表顯示在Jupyter Notebook中，最後使用plot函式繪製折線圖。這篇文章強調了透過Pandas的幾行指令就能輕鬆完成資料分析並畫出圖表的便利性。

開始上課

[財經爬蟲] 怎麼繞過驗證碼? 利用 2Captcha 驗證碼識別服務突破 reCAPTCHA 驗證碼，抓取證券櫃買中心的券商買賣證券日報表上分點交易資訊

• 大數學堂
• July 1, 2021, 7:08 a.m.

這篇文章介紹了如何利用Python網路爬蟲和2Captcha驗證碼識別服務，突破券商買賣證券日報表上的reCAPTCHA驗證碼，以獲取分點交易資訊。透過分析分點資料，可以分析大戶的進出行為，以便跟單獲利。文章提供了完整的教學文章連結 影片教學連結和程式碼，並介紹了2Captcha服務的連結。

開始上課

[爬蟲實戰] 如何透過 Python 網路爬蟲 抓取並整理 2018 公投選舉資料?

• 大數學堂
• Nov. 29, 2018, 2:29 p.m.

這篇文章提到了選舉結果以及如何利用Python的Selenium和Requests來抓取選舉統計資料，並分析各地民眾的意向。同時也提供了一個可以下載整理過後的資料的網址，以及相關的程式碼連結。

開始上課

[爬蟲實戰] 如何使用Pandas 快速抓取並分析iPhone 12 購機方案?

• 大數學堂
• Oct. 18, 2020, 2:15 p.m.

這篇文章介紹了使用Python Pandas來抓取並分析中華電信最新的5G購機方案。透過數據分析，讀者可以輕鬆找到最優惠的方案，不用再煩惱買空機或綁電信方案的問題。此外，文章也提供了相關的影片和程式碼供讀者參考。

開始上課