為了迎接即將到來的雙十一節,更新一下以前淘寶的爬蟲,造福所有想要在當天掌握價格變化,殺進殺出的買賣家。
舊的爬蟲只要爬取Document下的連結,便可很容易獲取商品價格資訊。但淘寶網也在這些時日更新了,變成使用AJAX的方式填入頁面內容。
因此我們便可以從XHR以及JS下手,找尋進入點,再使用正規表達法(re),便可以快速的剖析出重要資訊,讓你爬取淘寶網,無往不利!