[心得] 資料工程師 X FinMind 架構解析

軟工

31240


大家好,我是 FinMind,開源金融數據的作者

https://github.com/FinMind/FinMind

在上次,濃縮個人好幾年的工作經驗、FinMind 專案開發經驗

出版了資料工程師書籍,迴響不錯

今年花了 8 個月的時間,在第一版書上,擴增了 50% 的內容

其中新增了

1. 分散式 Airflow 介紹、架設,提供大量範例,並與爬蟲做結合!!!
2. 業界常用的監控系統 - Grafana & Prometheus,介紹與架設。
3. 並將書中介紹的各項服務,Netdata、MySQL、RabbitMQ、Airflow、Traefik,都
與監控系統做串接,製作統一的 Dashboard 監控儀錶板工具!!!

這樣本書就算是一本,完整的資料工程師攻略了,包含

* 分散式爬蟲
* 資料庫架設
* API 架設
* 雲端系統
* Docker、Docker Swarm
* Unit Test
* CICD
* ApacheBench 壓力測試
* Traefik 反向代理
* Redash BI 報表
* 分散式 Airflow
* 業界知名的 Grafana 監控系統

一本書涵蓋大量資料工程師的技能樹。

甚至進階到 Senior Data Engineer ( 其中一部分也跟 SRE、Backend 技能重疊 )
目前書在天瓏書局預售中。

各位對大數據、資料工程有興趣的話,可以參考看看,也感謝大家對開源專案一路以來的
支持。


https://www.tenlong.com.tw/products/9786267273739?list_name=lv


--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.44.86.129 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1691768222.A.CAB.html
keepxha1樓 08/11 23:44
OhGNM2樓推用心 08/12 00:14
andy02193樓推推 08/12 03:12
marsonele4樓又出新書了? 08/12 03:26
ztsc03043565樓請問大大所謂的第二版是現在博X來上買的到的嗎? 08/12 08:31
本人6樓不是哦,第二版8/20才出版,封面也不同 08/12 09:25
ztsc03043567樓那一樣會上架在該平台嗎?,因為我比較常用 08/12 10:13
本人8樓會上架在博客來 08/12 10:24
本人9樓上架後我私信你 08/12 10:24
michellehot10樓 08/12 10:36
ztsc030435611樓好的,十分感謝 08/12 10:41
Ouranos12樓推推,希望能趕快到8/20! 08/12 16:51
hyouun13樓推,API好用 08/12 17:01
kshskghs14樓請問沒看過第一版適合直接閱讀第二版嗎 08/12 18:33
wandallin15樓推個 08/12 20:32
lonelytea16樓有興趣 08/12 23:02
本人17樓第一版的內容,第二版都有,而第二版新增了50%內容,所 08/12 23:58
本人18樓以直接買第二版即可 08/12 23:58
kshskghs19樓了解!!馬上下單 08/13 00:05
NTUTM0420樓 08/13 15:39
agra21樓推有心 08/13 20:02
x246libra22樓沒有spark能叫資料工程師? 08/14 07:29
x246libra23樓感覺和後端技能一樣啊,但我想轉資料工程,都因為沒sp 08/14 07:31
x246libra24樓ark經驗被婉拒 08/14 07:31
拍拍,目前我在 17LIVE 的 data team,沒有用到 Spark 或許你可以參考以下職缺,還有在徵人 Requirements 也沒有提到 spark,應該可以試試看
zoo202025樓請問有出電子書嗎? 08/14 07:50
有喔,到時候再貼連結過來
xsoho26樓出電子書大概沒多久就可以看到免費版 08/14 11:06
BigCockman27樓推 用的技術很貼近業界潮流 有電子書的話會支持 08/14 16:14
感謝,技術真的都是業界實際在應用的 等出版後,會再附上電子書連結
Cabranct28樓推,期待電子書 08/15 16:57
HmmHmm29樓等電子書 08/17 07:07
kusoboy52030樓等電子書 08/18 12:34
更多心得
[心得] 我在科技業遇到的鬼故事之一
[心得] 一堆無聲卡的面試經驗
[心得] 非本科工作分享(年資 ~1.5 年)
[心得] 軟體考古系列 毀滅戰士們:草創之初
[心得] Nvidia TW swe面試心得
[心得] (代po) 國泰世華工作經驗分享
[心得] 2023面試-後端-台積/SWAG/Circle等
[心得] 2023 軟體工程師(後端)面試分享