[爬蟲實戰] 如何極速擷取1111購物狂歡節的特價商品資訊?

  • 大數學堂
  • Nov. 10, 2016, 2:34 p.m.

又來到1111 購物狂歡的季節,除了要瘋狂的Shopping 以外,千萬別忘了用Pyhton 網路爬蟲關注重要的特價訊息!

這次我們將用簡單的爬蟲,抓取天貓主會場的特價商品資料!先用python requests 抓取商品頁面,接者用BeautifulSoup4 抓取位在.J_dynamic_data 的資料區塊,最後用簡簡單單的json.loads,便可以將資料讀成字典結構,讓妳敗家當下,同時顧好荷包!

程式碼:https://github.com/ywchiu/largitdata/blob/master/code/Course_80.ipynb