Python 大數據專案 X 工程 X 產品 資料工程師的升級攻略(第三版)
作者簡介
林子軒(Sam Lin)現任 17LIVE Data Engineer Manager,專注於資料工程與資料分析領域。長期投入 Python 與大數據相關技術實務,並致力於將複雜的資料系統,轉化為可落地、可維運的實際產品,期望為資料工程社群與開發者提供實用且可複製的經驗分享。經歷● 17 LIVE Data Engineer Manager。● 曾任職永豐金證券,軟體工程師。● 曾任職 Tripresso,資料工程師。● 曾於 Open UP Summit 2019、WebConf 2025,擔任 Speaker。● 東華研究所,應用數學碩士。FinMind● https://github.com/FinMind/FinMind● https://finmindtrade.com/個人 GitHub● https://github.com/linsamtwEmail● samlin266118@gmail.com如對本書有疑問,歡迎寄信到以上信箱。
內容簡介
https://youtu.be/od1RGCdhhII【本書特色】分享在 Github 獲得 2,300 stars 的大數據 Side Project——FinMind,並一步步帶領讀者從 0 開始,打造專屬於自己的大數據 Side Project。不同於僅止於教學示範的 Side Project,FinMind 是少數經過實際使用者驗證、長期維運的資料服務,完整呈現資料工程從架構設計、系統實作,到產品化與穩定營運的全流程。讀者不只學會「怎麼做」,更能理解 為什麼要這樣做。【你將學到】資料工程實戰►使用分散式架構蒐集證交所、櫃買中心、期交所等股市資料,►並以容器化技術建構爬蟲、API、資料庫與訊息佇列服務。低成本雲端部署►單月約 5 美金 即可運行完整系統,►一站式管理多台分散式機器與服務。產品化與迭代流程►從單元測試、CI/CD 到 API 上線,►建立可持續維護與擴充的資料產品。監控與視覺化►建立專屬資料儀表板,並以業界主流監控工具掌握系統狀態。