サーバーワークスエンジニアブログ
id:swx-kosuga
コードをあまり書かずにログファイルのParquet変換とパーティションキー設定を実現したい
サウナの水風呂はちょっと高めで長めに浸かりたい派の小菅です。 AWSリソースにおいては、「各種ログをS3に出力する」という機能が結構あり設定されている方も多いと思います。 その各種ログをAthenaで分析したい!そのためにテーブル化される方も多いと思います。 その中には「ログが大量にあるのでParquet形式にしたいけ…