ENGINEERING BLOG ドコモ開発者ブログ

Apache Icebergを用いて、SnowflakeとBigQueryを横断するマルチDWHのデータパイプラインを実現しました。 開発・運用の効率性を高くするためdbtで実装したが、その中で気を付けなければいけない点が多くありました。 想定する読者 Icebergを用いたパイプラインをdbtで実現したいデータエンジニアの方 マルチDWHでのデータ…