ENECHANGE Developer Blog

はじめに 以下の記事で、AWS Glue と Iceberg を用いて分析基盤を作成してみました。 本記事では、この分析基盤に対して 1万〜15万件 のデータを取り込み、以下の観点で検証します。 Glue Job の処理時間（XML パース → Iceberg MERGE）の計測 データ量に対する処理時間のスケーリング傾向の把握 ワーカー数（並列度）によ…