この記事は Pythonその4 Advent Calendar 2020 24日目クリスマスイブの投稿記事です。 pythonはいろいろな用途で使えるのですが、私の利用用途の一つであるデータのチェックの観点での投稿になります。 データエンジニアな世界のpython Java、pythonが多いですね。
🛠️ はじめに：なぜPySparkを使うのか？ 前回の記事で「家計はKPIで管理せよ」と提唱しました。今回はその基礎となるデータ分析を、Databricksが最も得意とする PySpark で行います。 処理能力: データ量が増加しても、PySparkの分散処理能力により高速に処理が ...
一部の結果でアクセス不可の可能性があるため、非表示になっています。
アクセス不可の結果を表示する