Yuta NakataのBlog
id:yuta-nakata
AWS Lambdaで複数のファイルを並列で取得する
ランキング参加中Python ランキング参加中AWS (Amazon Web Services) AWS LambdaでS3から大量のファイルを取得すると、逐次ダウンロードでは実行時間がどんどん膨らんでいきます。本記事では、PythonのThreadPoolExecutorを使った並列ダウンロードの実装方法と、あわせて押さえておきたいメモリ設定・vCPUの関係、boto3ク…