データハンドリングと前処理 - 「教養としてのデータリテラシー」学びの素材集

データハンドリングと前処理

データハンドリング

データの「分析」そのものではなく、データを「分析ができる状態」にしたり、「効果的・効率的に」分析ができるようにするために、データ自体をどう扱うべきか、という話

データの分析に適した「データの形式（データの持ち方）」を知っておく必要がある

そのうえで、生のデータを「分析できる状態にする」作業を行うが、それに適したツールとその使い方を知っておくとよい

現代的にはETLツールを用いられることが多くなってきている

Rではtidyverse、PythonではPandasなどを用いたデータの処理がよく行われる

Excelを用いた処理もまだまだ現役

データの形式

データの前処理

データの前処理から分析までを一気に行う

データの収集