仕様・利用条件は変わることがあります。重要な判断は原典と実際の結果で再確認してください。
この手段について
- 目的
- PyArrowでParquetファイルを読み取り表として確認する
- 構成
- PyArrow + Python
最短の利用経路
- 権利とschemaが分かるParquetを用意する
- PyArrowのParquet読取り経路でtableを取得する
- schemaと行数・代表値を確認する
必要条件
- 対象データへの権限
- 接続先または入力ファイルを確認する
- Python環境へ対応版を導入し、入力と出力の型を確認します。
向く場面
PyArrowでParquetファイルを読み取り表として確認するという目的を、この利用経路で短く試したい場面。
向かない場面
型変換を無確認で繰り返し情報を失う用途。
確認方法
列型、null、行数が元データの仕様に合うかを確認します。