DuckDBでCSVをSQL集計する
CSV fileを読み、SQLで件数やgroup別の値を集計します。
- 目的
- CSV fileを読み、SQLで件数やgroup別の値を集計します。
- 構成
- DuckDB
- 必要条件
- CSV
- 列型と文字codeの確認
- 最短の利用経路
- CSVをread_csvで読む
- 必要列と集計条件を指定する
- sampleと集計値を照合する
- 向く場面
- 大きめの表を繰り返し集計する作業。
- 向かない場面
- 自動型推定を無確認で信用する運用。
- 検証方法
- 行数・null・列型・小sampleの手計算を照合します。