参考:データ前処理¶
データ前処理の例
今回使ったCSVファイルは、KEOのページから取得したデータを私が前処理・抽出して保存したものです。元々のデータはnp.loadtxtで読み込める形式ではなく、Pandasのread_fwf関数を使って読み込みました。
参考までに、私がデータ読み込み→データ確認→使用期間の抜き出し・保存を行った作業ノートブックを掲載します。
ごちゃごちゃした解析をいろいろしていて恥ずかしいノートですが、実際のところを見てもらうために公開しました。
研究の大部分は、こういった泥臭い作業の繰り返しです。
説明していない機能や技法をいろいろ使っていますが、興味があれば調べてみてください。