EC2のWindows上にpyspark+JupyterでS3上のデータ扱うための開発環境を作る
EC2(Windows)にpyspark構築してS3の情報取得するところまでやる機会があったので情報残しておきます。 環境変数設定 各種ランタイムインストール Javaのインストール Python3.7.2インストール Spark インストール Sparkダウンロード 7zipでgzipを解凍 hadoop-awsのインストール Hadoop Native Libralyインストール pyspark…
