サーバーワークスエンジニアブログ
id:swx-kotaro-sato
データ分析基盤のジョブを構築する場合のGlue WorkflowとStep Functionsの違いを比較して整理する
さとうです。 表題の通りですが、データ分析基盤のジョブをStep Functionsで実装する場合とGlue Workflowで実装する場合の違いをまとめてみようと思います。 まとめと言う割には大長編になってしまいました! 前提 データ分析基盤に必要なETLパイプライン Glueで実装するETLパイプライン、何で制御するか問題 ETLパイプラ…