[心得] FinMind 大數據專案X架構解析

軟工

12120



大家好,我是 FinMind,開源金融數據的作者 ( https://github.com/FinMind/FinMind
),今年花了 10 個月的時間,將 FinMind 所用到的技術、架構,整理成一本書,分享給
大家 (書中包含程式碼)。


由於大數據時代,多數人做的都是 ML、DL、資料分析,反而資料工程相關資源非常欠缺
,但資料工程其實在整個大數據領域,是一個非常重要的位置。


因此,我將 FinMind 從 2017 開始到現在,一路以來的經驗,濃縮到這本書中。


從最基本的分散式爬蟲架構 RabbitMQ、Celery,MySQL 資料庫、雲端,到 FastAPI、
Docker Swarm、Unit Test、CICD、ApacheBench 壓力測試、Traefik 反向代理、Redash
BI 報表等技術,都寫在書中。


集合各種 Data Engineer 的技能樹,甚至進階到 Senior Data Engineer ( 其中一部分
也跟 SRE、Backend 技能重疊 ),目前書在天瓏書局預售中。


各位對大數據、資料工程有興趣的話,可以參考看看,也感謝大家對開源專案一路以來的
支持。


https://www.tenlong.com.tw/products/9789860776522?list_name=b-r7-zh_tw


--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 1.162.168.83 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1636119191.A.121.html
yinxuanh1樓 11/05 21:46
ss8651twtw2樓 11/05 22:50
a78998042a3樓有電子書? 11/05 23:08
有,會在 11/20,跟實體書一起推出
rongyaya4樓 11/05 23:48
cip6045樓 11/06 00:36
buddy888826樓同是DE推推 11/06 01:17
jack5297樓 11/06 14:29
mummyqq8樓 11/07 17:38
chupiggy9樓推,但要建議前輩下一版封面設計可以換一下 XDDD 11/07 23:13
太黑了是不是XD 如果有機會二刷,我問問看有沒有辦法用另一種封面
a12992410樓推 可否問電子書是哪一個平台 11/09 21:03
是指販售,還是電子書閱讀平台?
a12992411樓不好意思 是販售的平台 11/11 00:33
Sindragosa12樓推推 11/12 10:08
a920250713樓 11/13 10:43
更多心得
[心得] Glints 不推薦
[心得] 產品PM如何從需求海淘金
[心得] 新創公司給人的綺麗幻想與殘酷現實
[心得] 近期面試,簡單分享
[心得] AppWorks School 非本科前端轉職心得
[心得] 利用 AWS 打造分散式雲端架構 圖文講解
[心得] 2021高雄軟體面試心得
[心得] 煩呀,明天又是一場暴風雨