Building production-ready data pipelines using Dataflow: Planningのメモ

cloud.google.com 開発前に気にすることが紹介されている資料のメモです。他の章のメモはこちら。 サービスレベル Data Freshness 何%のデータが時間内で処理される、未処理の一番古いデータがある時間、パイプラインが一定時間内に終るなどの指標。 Data correctness 開発時はユニットテスト・結合テスト(Building prod…