System.out.println("takeru");
id:tkr911
Redshift Spectrumでparquetを扱う、timestampに苦労した話
概要 元データがtsv, csvなものをpythonを利用してparquetに変換して、spectrumで利用するためにやったこと timestampなカラム周りでかなり苦労したのでせっかくなので書く 結果的にかなり単純にできるんだけど、あまりやり方とかなかったのでせっかくだし書いた 一行でまとめると fastparquetのwrite関数でtimesオプショ…