黃金價格又來到近期的高點！今天將教大家簡簡單單用Pandas 即可完成黃金價格抓取與分析，讓大家都能透過Python 網路爬蟲輕鬆掌握黃金大行情。 影片： https://largitdata.com/course/129/ 程式碼：https://github.com/ywchiu/largitdata/blob/master/code/Course_129.ipynb #Python網路爬蟲 #PythonCrawler #黃金價格 #Pandas #財經爬蟲

Python網路爬蟲除了可以爬股市的即時行情之外，當然也可以抓取台指期的即時行情(Tick)資料。雖然抓取的方式略有不同，但只要透過開發人員工具，我們一樣可以輕輕鬆鬆找到突破點，將Yahoo 股市上的台指期順利抓取下來，並進一步製作成分析圖表！ 影片 https://largitdata.com/course/213/ 程式碼 https://github.com/ywchiu/largitdata/blob/master/code/Course_213.ipynb 給資料科學家的 Python 基礎課 https://www.youtube.com/watch?v=uzInb5gbl4M 大數學堂 - 學習資料科學的第一站 https://www.youtube.com/channel/UCSmvtvsTjqkvKLqpmsFWRQw #python網路爬蟲 #財經爬蟲 #即時行情 #交易機器人 #Yahoo股市 #台指期 #台指期貨

Goodinfo 台灣股市資訊網 (https://goodinfo.tw/) 蘊藏了許多股票的重要資訊。為了能夠快速分析這些股市資訊，我們希望能打造一個Python 網路爬蟲自動化的爬取各股票的歷年經營績效，但Goodinfo 有設立了防爬蟲機制，因此我們即加上user-agent 讓網站誤以為我們的爬蟲是真人瀏覽行為，我們即可以順利爬取資料。再透過Pandas 的整理功能，我們即可以迅速將網頁轉變成結構化資訊，讓有價值的資料能作輔助我們的投資決策！ 影片： https://largitdata.com/course/132/ 程式碼：https://github.com/ywchiu/largitdata/blob/master/code/Course_132.ipynb #Goodinfo #Python網路爬蟲 #財經爬蟲 #大數學堂 #大數軟體

為了能夠抓取 GoodInfo 所有上市公司基本資訊，首先我們要先取得所有上市公司的代碼，因此我們就造訪了Tej 的網站 (https://www.tej.com.tw/webtej/doc/uid.htm) 找到了上市上櫃公司的代碼清單。為了節省剖析頁面的時間，我們直接使用了正規表達法，把所有的數字代碼抽取(\d+)出來，如此一來，我們便能輕鬆取得所有上市公司的代碼！ 影片： https://largitdata.com/course/134/ 程式碼：https://github.com/ywchiu/largitdata/blob/master/code/Course_134.ipynb #Python網路爬蟲 #正規表達法 #TEJ

有在用Yahoo 股市關注即時行情的朋友，一定可以發現Yahoo 股市的頁面最近有更新版本。為了能夠讓我們的交易機器人隨時能根據最新的行情做決策，我們便必須要找到即時行情的API，讓 Python 網路爬蟲能夠順利蒐集新版Yahoo 股市資訊！ 影片： https://largitdata.com/course/143/ 程式碼：https://github.com/ywchiu/largitdata/blob/master/code/Course_143.ipynb #Python網路爬蟲 #財經爬蟲 #即時行情 #交易機器人 #Yahoo股市

天下武功、唯快不破，要在世界財經重鎮香港交易港股也是如此！為了能夠快速獲得股票成交資訊，讓你的交易機器人能在行情發動時第一時間進場或出場。我們便需要撰寫一個Python 網路爬蟲，在破解該存取API 上的Token 與時間戳資訊後，我們便能夠靠爬蟲快速爬取港股資訊，讓我們能在投資市場上洞燭先機，掌握財富密碼。 影片： https://largitdata.com/course/145/ 程式碼：https://github.com/ywchiu/largitdata/blob/master/code/Course_145.ipynb #Python網路爬蟲 #交易機器人 #香港交易所 #大數學堂 #大數軟體

有在操作股票的朋友們一定知道，證券櫃買中心的券商買賣證券日報表上包含了每日上櫃股票的分點交易資料，透過研究分點資料，便可以分析大戶進出行為，進而跟單獲利。但是券商買賣證券日報表上面埋有reCAPTCHA驗證碼，透過一堆圖片驗證題目，阻止我們的自動化網路爬蟲大軍去上面大量撈取資料。 但reCAPTCHA 驗證碼怎麼識別？ 因此大數軟體 X 大數學堂，今天就要教你該如何撰寫一Python網路爬蟲，再搭配2Captcha驗證碼識別服務，便可以輕輕鬆鬆突破券商買賣證券日報表上的 reCAPTCHA 驗證碼服務，順利抓取分點交易資訊。 完整文章： https://www.largitdata.com/blog_detail/20210629 影片： https://largitdata.com/course/146/ 程式碼： https://github.com/ywchiu/largitdata/blob/master/code/Course_146.ipynb 2Captcha 服務 https://2captcha.com/zh/?utm_medium=content&utm_source=largitdata&utm_campaign=taiwan&from=12066227 #驗證碼識別服務 #怎麼繞過驗證碼 #驗證碼怎麼識別 #Python網路爬蟲 #大數軟體 #大數學堂 #人工智慧