Covid19 分析案例
本章介紹Python進行Covid19分析的案例，從相關數據集中提取信息，使用數據科學工具進行分析和視覺化。透過案例，學習使用Python進行數據清理 聚合 統計分析和預測模型建立等任務，了解Covid19的傳播情況和趨勢。
開始上課
hidden
Python數字、字串與輸入輸出概論
《Python數字 字串與輸入輸出概論》是針對資料科學家的Python課程的第一個章節。該章節介紹了使用Python進行數字計算的基本概念和技巧，同時也解釋了如何處理字串以及讀取和顯示輸入和輸出的資料。這是一個重要的基礎知識，對於學習Python的人來說非常有幫助。
開始上課[實價登錄分析] 如何使用Python Pandas 讀取實價登錄網的資料?
![[實價登錄分析] 如何使用Python Pandas 讀取實價登錄網的資料?](https://img.youtube.com/vi/EGnAxXmQC6Y/0.jpg)
這篇文章講述了使用實價登錄資料來分析房市景氣的方法，並介紹了如何使用Python Pandas和Linux工具iconv進行資料讀取 編碼轉換和清理的步驟。
開始上課[交易系統] 如何抓取三大法人買賣金額統計表(Part 1)?
![[交易系統] 如何抓取三大法人買賣金額統計表(Part 1)?](https://img.youtube.com/vi/Y_5CA78A2RA/0.jpg)
本篇文章介紹了如何使用Python的Requests模組來抓取三大法人買賣金額統計表。這是建立自己交易系統前需要的資料之一，作者提供了一步步的教學來引導讀者完成這個任務。這個教學對於想要學習如何使用Python來獲取金融相關資料的人來說很有幫助。
開始上課[資料產品實作] 如何取得臉書使用頻率最高的文字 (Part 2)?
![[資料產品實作] 如何取得臉書使用頻率最高的文字 (Part 2)?](https://img.youtube.com/vi/OLw1elIl0HA/0.jpg)
為了獲得Facebook貼文的詞頻，我們需要對貼文進行斷詞，對於英文資料，只需要根據空格斷句即可，但中文需要依賴分詞工具。我們可以使用Python套件jieba來進行分詞，然後排序，就能獲得Facebook貼文中最常使用的詞頻。
開始上課[交易系統] 如何抓取三大法人買賣金額統計表(Part 2)?
![[交易系統] 如何抓取三大法人買賣金額統計表(Part 2)?](https://img.youtube.com/vi/BLraIsADeFU/0.jpg)
本教學將透過BeautifulSoup 4和css selector，來抓取三大法人買賣金額統計表的資訊。首先，我們需要導入requests和BeautifulSoup套件。然後，使用requests.get()函式來獲取網頁的HTML內容，將其存儲在一個變數中。接下來，使用BeautifulSoup的select()方法和正確的css選擇器，來定位我們要抓取的元素。最後，遍歷結果，將每個元素的文本打印出來或進一步處理。這樣，我們就可以輕鬆地獲取三大法人買賣金額統計表的資訊了。
開始上課開始使用Python撰寫網路爬蟲 ( Crawler )
這篇文章介紹了使用Python編寫網路爬蟲的開始步驟，其中需要安裝兩個Python套件：Requests和BeautifulSoup4。Requests是一個用於網路資源擷取的套件，而BeautifulSoup4則是一個用於HTML剖析的套件。
開始上課模組、套件、第三方套件速覽
本章節將介紹Python中的模組 套件以及第三方套件。模組是一個Python檔案，可以包含變數 函式 類等程式碼，我們可以透過import語句引入使用。套件則是由多個模組組成的集合，方便共享和重複使用程式碼。常見的Python套件有math datetime random等。除了內建的模組和套件外，我們還可以使用第三方套件來擴展Python功能。第三方套件是由其他開發者開發的，可在官方網站或第三方網站下載和安裝。這章節將教你如何使用模組及套件，並安裝和管理第三方套件，提升Python程式開發效率。
開始上課如何使用RSelenium 抓取 PTT Food版的內容?
R可以搭配Web自動化測試工具Selenium進行網頁抓取，只要使用RSelenium進行安裝和使用，就能在Firefox瀏覽器中使用R腳本抓取網頁內容。這樣的功能不僅僅只有Python才能實現。
開始上課用第三方套件打造"真"對話機器人
本文介紹如何使用Python中的第三方套件打造一個真實的對話機器人。對話機器人可以進行自然的對話，並根據使用者的輸入提供適當的回應。文章提到可以使用NLTK或spaCy等自然語言處理套件來處理和分析使用者的輸入。同時，可以使用GPT模型等語言模型生成自然流暢的回應。另外，也可以使用SpeechRecognition等語音辨識套件實現語音輸入功能。文章指出，這些套件能夠讓應用程序能與使用者進行自然且有意義的對話。
開始上課Python 總複習 - 用Python 分析川普演說文最常出現字詞(Word Count)
文章介紹了在Python 中使用詞頻統計或字詞計數的方法來分析川普演說文中最常出現的字詞。作者提到了使用Python 的文本處理技術預處理川普演說文的內容，並使用字典資料結構記錄每個字詞的出現次數。透過迴圈和條件判斷式，可以遍歷川普演說文並計算每個字詞的出現次數，最後，可以使用Python 的排序功能將字詞按照出現次數進行排序並進行視覺化。
開始上課如何使用Python 的requests 及BeautifulSoup4 完成淘寶爬蟲?
這篇文章介紹如何使用Python的requests和BeautifulSoup4來完成淘寶網站的爬蟲。作者提到，既然已經了解了如何使用requests抓取網頁內容，並使用BeautifulSoup4來解析有用的資訊，接下來將進入實戰階段，示範如何完成淘寶爬蟲。
開始上課[ChatGPT] 使用Llama Parse和 ChatGPT 翻譯 Google Drive 上的PDF文件
![[ChatGPT] 使用Llama Parse和 ChatGPT 翻譯 Google Drive 上的PDF文件](https://img.youtube.com/vi/ZEVufrG1_CQ/0.jpg)
在 [ 如何使用ChatGPT 快速翻譯 PDF 文件? ] 的影片中，我們探討了如何使用ChatGPT來翻譯文件。許多觀眾提問，表示他們有大量的論文儲存在自己的電腦或Google Drive上。因此，今天我們將展示如何有效利用我們的程式來翻譯這些文件。我們將直接從Google Drive存取文件，並使用ChatGPT進行翻譯。今天的教程不僅是對之前程式的改良，我們還將介紹一種更強大的PDF解析器。以往，我們使用了PyPDF來處理PDF文件，但由於PDF的結構複雜，我們今天將引入一個更專業的工具—LamaParse，這是由知名的RAG套件Lama Index所提供。讓我們開始今天的教程吧！
開始上課[ChatGPT] 利用 ChatGPT 打造萬用網路爬蟲追蹤最新機票價格
![[ChatGPT] 利用 ChatGPT 打造萬用網路爬蟲追蹤最新機票價格](https://img.youtube.com/vi/IMHKew03DTc/0.jpg)
本教學將教您如何使用Selenium自動瀏覽Expedia網站，並利用LangChain和ChatGPT的Extraction功能，自動解析半結構化資料。最後，使用Pandas將半結構化資料轉換為結構化資訊。透過ChatGPT和LangChain的幫助，我們可以省去編寫網路爬蟲時需要觀察元素的麻煩。再加上Selenium可以模擬人類操作，我們能夠簡化網路爬蟲的過程，輕鬆地獲取所需的網頁資訊。期待著中秋節的到來，並希望能在日圓跌至新低的時候，節省機票費用，享受一趟愉快的旅程。
開始上課[交易系統] 如何透過Python 將抓取下來的金額資訊存入資料庫中?
![[交易系統] 如何透過Python 將抓取下來的金額資訊存入資料庫中?](https://img.youtube.com/vi/ZE9cAXpfHAU/0.jpg)
這篇文章講述學會使用Python將資料存入資料庫並準備進行資料分析的最後一步。作者指出，他們可以將抓取的三大法人統計資訊存入finance.sqlite資料庫中，這樣就能開始進行分析了。整篇文章提供了構建分析所需的基本步驟和資訊。
開始上課![[爬蟲實戰] 如何抓取圖表內的價格資訊?](https://img.youtube.com/vi/kPIfXmQIW6A/0.jpg)
![[爬蟲實戰] 如何抓取MoneyDJ 文章中的人氣指數?](https://img.youtube.com/vi/CDwUsqpgYpU/0.jpg)
[爬蟲實戰] 如何撰寫Python爬蟲 抓取台灣銀行的牌告匯率?
![[爬蟲實戰] 如何撰寫Python爬蟲 抓取台灣銀行的牌告匯率?](https://img.youtube.com/vi/-c5rrzjsN34/0.jpg)
這篇文章介紹了如何利用爬蟲和Python Pandas來抓取台灣銀行的牌告匯率資料，並將其整理成漂亮的表格，並存成Excel檔案。這樣的工具可以幫助你在買進日圓時，找到最低價位，提供了出國血拼時的硬是划算方式。
開始上課[爬蟲實戰] 如何使用Pandas快速分析上市櫃公司員工的薪資水平?
![[爬蟲實戰] 如何使用Pandas快速分析上市櫃公司員工的薪資水平?](https://img.youtube.com/vi/1o7q9HuSgy0/0.jpg)
證交所公佈了上市與上櫃公司非擔任主管職務的全時員工薪資資訊，介紹了使用Python的requests和pandas來爬取和分析這些公司的薪資水平。以往只提供薪資平均值，而今年則加入了中位數的資訊，以更客觀地反映薪資水平。影片和程式碼連結也提供在文章中。
開始上課[AI人工智慧] 多模態AI應用實戰:輕鬆用Gemini 與 ElevenLabs 實現即時語音翻譯與合成
![[AI人工智慧] 多模態AI應用實戰:輕鬆用Gemini 與 ElevenLabs 實現即時語音翻譯與合成](https://img.youtube.com/vi/zuVG96KgK58/0.jpg)
自從看了GPT-4o的一個發表會以後，大家是不是對多模態模型都感到非常興奮呢?雖然我們現在可以在ChatGPT Plus使用到GPT-4o，但它並沒有展示會中所展示的語音輸入和輸出功能。 幸好的是，最近Google的Gemini也推出了多模態模型，而且也可以接受語音輸入。我就想，不如把這個技術結合語音合成，打造一個即時口語翻譯系統，而且更進一步，用自己的聲音翻譯!本影片將手把手教您如何使用Google的Gemini和ElevenLabs服務，讓AI自動翻譯您講的內容，並用你自己的聲音說出翻譯後的內容，大大降低溝通門檻。
開始上課[爬蟲實戰] 如何使用Selenium 抓取驗證碼?
![[爬蟲實戰] 如何使用Selenium 抓取驗證碼?](https://img.youtube.com/vi/hF-dJj559ug/0.jpg)
使用selenium抓取驗證碼圖片並非難事，只需要先存取頁面快照，然後找到圖片位置，然後根據位置和大小，就能成功從頁面中擷取出驗證碼。接著，只需要將驗證碼交給機器學習引擎辨識，就能輕鬆讓電腦為我們自動訂票。可以參考這篇程式碼來實踐：<a href="https://github.com/ywchiu/largitdata/blob/master/code/Course_95.ipynb">https://github.com/ywchiu/largitdata/blob/master/code/Course_95.ipynb</a>
開始上課[爬蟲實戰] 如何使用Python Pandas 分析比特幣最佳買點?
![[爬蟲實戰] 如何使用Python Pandas 分析比特幣最佳買點?](https://img.youtube.com/vi/wZ48Gjb-k2U/0.jpg)
這篇文章提到使用Python網路爬蟲和數據分析工具Pandas來分析比特幣的趨勢線和移動平均線，以幫助投資者找到最適合的買點。並提供了程式碼的連結和與天善智能合作的線上課程，供讀者進一步了解如何使用Python進行資料分析。文章也提醒投資有賺有賠，投資前應詳閱公開說明書。
開始上課[爬蟲實戰] 如何利用Python Flask自動轉換實價登錄網站加密字串?
![[爬蟲實戰] 如何利用Python Flask自動轉換實價登錄網站加密字串?](https://img.youtube.com/vi/hUWT6MJ6QrU/0.jpg)
本文介紹了如何透過Python Flask建立一個橋接器，來自動化抓取實價登錄網的加密字串。通常我們會使用Node.js或Pyexecjs等方法來加載加密函數，但這牽涉到處理Node.js或修改JavaScript的問題。透過Python Flask橋接器，我們可以輕鬆地重新導向加密字串到實價登錄網，實現破解新版實價登錄網的目標。影片和程式碼也提供了詳細的操作示例。
開始上課[爬蟲實戰] 如何透過EMAIL即時獲取最新匯率資訊?
![[爬蟲實戰] 如何透過EMAIL即時獲取最新匯率資訊?](https://img.youtube.com/vi/Y9w95eREzxs/0.jpg)
文章介紹了如何透過Python的爬蟲和電子郵件功能來自動通知匯率的變化。使用smtplib和GMAIL工具，將匯率資料以HTML格式的郵件寄送給用戶，使他們能夠即時掌握最佳的買點。這種自動化的方法能夠節省用戶的時間和精力，並確保他們不會錯過任何重要的交易機會。
開始上課[爬蟲實戰] 如何使用機器學習方法破解驗證碼 (3) ? – 使用類神經網路自動辨認驗證碼
![[爬蟲實戰] 如何使用機器學習方法破解驗證碼 (3) ? – 使用類神經網路自動辨認驗證碼](https://img.youtube.com/vi/sy3RBqeDNoY/0.jpg)
這篇文章介紹了如何用Python scikit-learn中的類神經網路(MLPClassfier)來辨識驗證碼中的數字，以進一步讓爬蟲程式更容易破解驗證碼的阻擋。文中還提供了程式碼的GitHub連結，想要學習更多機器學習相關課程的讀者們，也可以參考提供的連結。
開始上課