PySparkでログ出力を詳細（DEBUG）にするには、環境変数 SPARK_LOG_LEVEL=DEBUG を設定するだけではなく、Sparkのロガー設定ファイル（log4j.properties）を明示的に読み込ませる必要があります。 ⸻ 方法①：Pythonコード内でログレベルをDEBUGにする（おすすめ） 以下 ...