KAKEHASHI Tech Blog
id:kakehashi_dev
【AWS】ログレベルを設定するだけでGlueSparkJobのログ収集にかかるコストを98%削減!?
こちらの記事は カケハシ Part1 Advent Calendar 2023 の5日目の記事になります。 こんにちは、カケハシで Musubi Insight のバックエンドエンジニアをしている末松です。 Musubi Insight ではデータ集計バッチに AWS の GlueSparkJob を採用しているのですが、この GlueSparkJob のログレベルを設定することで CloudWatch…