[爬蟲實戰] 如何透過開發人員工具破解實價登錄網新版API中的加密字串?

  • 大數學堂
  • April 5, 2021, 1:30 p.m.

新版實價登錄網站(http://210.65.131.75/)越來越難爬,為什麼API連結中會出現一堆神祕字串?為了能夠知曉神秘字串是從何產生的,這時我們就要善用Chrome 的開發人員工具了!透過在Source 設定一層層的 Debugger,即可以發現加密的JS 程式碼片段,此時只要重用加密函數片段加密替換參數的查詢條件,這時我們就可以如法泡製,順利抓取實價登錄資訊摟!

影片: https://largitdata.com/course/141/

程式碼:https://github.com/ywchiu/largitdata/blob/master/code/Course_141.ipynb

Python網路爬蟲

實價登錄資訊

Chrome開發人員工具