Apache Airflow 是什麼?從 cron 到工作流程編排
· tech · 約 6 分鐘 · 📚 Airflow 學習筆記 #1
一句話:Apache Airflow 是用 Python 把「一連串有相依關係、要定時執行、失敗要能重試與監控」的工作編排起來的工具。它最初由 Airbnb 在 2014 年開發,現在是 Apache…
· tech · 約 6 分鐘 · 📚 Airflow 學習筆記 #1
一句話:Apache Airflow 是用 Python 把「一連串有相依關係、要定時執行、失敗要能重試與監控」的工作編排起來的工具。它最初由 Airbnb 在 2014 年開發,現在是 Apache…
· tech · 約 5 分鐘 · 📚 Spark 學習筆記 #1
一句話:Apache Spark 是一個把「大到單台機器裝不下、算不完」的資料,切成很多份、分散到一整個叢集上平行運算的引擎。它源自 UC Berkeley(2009),2014 成為 Apache …
· tech · 約 2 分鐘 · 📚 成為 Tech Leader 讀書筆記 #6
上一篇談到,「看不到自己」是創新的第一道障礙——你改不掉一個你沒看見的東西。作者給的解法意外地簡單:每天花五分鐘寫日記。而且最有意思的是,光是「開始寫」這個動作本身,就能同時訓練與觀察好幾件事。 聽到…
· tech · 約 2 分鐘 · 📚 成為 Tech Leader 讀書筆記 #5
創新不是少數天才的靈光,而是一種「環境允許你提出不同想法」的能力(呼應 MOI 裡的 Innovation)。但有三種心態會在源頭就把創新擋下來——而且它們往往是無意識的。 第一道牆是看不清自己的行為…
· tech · 約 3 分鐘 · 📚 成為 Tech Leader 讀書筆記 #4
在真正成為 Leader 之前,有些想法會先把自己擋在門外。 很多人抱著「不在其位、不謀其政」的心態,認為只有頭銜掛著 Leader 的人才有資格管事。問題是,抱這種心態的人真的當上 Leader 之…
· tech · 約 3 分鐘 · 📚 成為 Tech Leader 讀書筆記 #3
成長模型描述的是「技能隨時間怎麼變化」。同一條成長曲線,在不同的觀察尺度下,會呈現完全不同的形狀。下面從最遠的宏觀、一路拉近到最貼近真實的微觀。 只要每天持續進步,把時間尺度拉得夠遠來看,技能的成長速…
· tech · 約 5 分鐘 · 📚 成為 Tech Leader 讀書筆記 #2
領導方式模型就是透過幾項指標來描述一個環境,MOI模型就是其中一種描述方式 MOI 模型包含三個構面:Motivation(激勵)、Organization(組織)、Innovation(創新)。每個…
· tech · 約 3 分鐘 · 📚 成為 Tech Leader 讀書筆記 #1
「Leadership」這個詞常被誤解成「職位高」、「會下命令」、「有人聽話」——但實際上,Leadership的核心並不是權力或控制,而是影響力。 Leadership應該有其影響範圍,每個人在不同…
· tech · 約 10 分鐘
前陣子幫目前社區實作了一個簡單的車位抽籤頁面,後來其他管理委員們認為可能會被住戶質疑這程式不可信任,可能有黑箱疑慮,藉此研究了一下如何證明這個抽籤流程沒有黑箱。 - 複雜的說是抽籤的過程可受某方控制達…