仕様・利用条件は変わることがあります。重要な判断は原典と実際の結果で再確認してください。
この手段について
- 目的
- DuckDBでCSVをParquetへ変換して型を照合する
- 構成
- DuckDB
最短の利用経路
- CSVの区切り・文字コードと列型を確認する
- 型を明示した読取結果をParquetへ書き出す
- Parquetを読み直し、行数・型・NULLを比較する
必要条件
- 対象ファイルへの権限
- 型・文字コードの確認
- 原典と導入済みversionの対応を確認し、権限のある検証用入力・別の出力先を用意する
向く場面
SQLの利用経路で列指向ファイルへ変換する場面。
向かない場面
先頭行の推定だけで全行の型が正しいとする用途。
確認方法
自動推定に依存する列を確認し、変換前後の値を代表例で照合します。