このツールについて
Parquet Viewerは、Apache Parquetファイルを手早く中身確認するためのプレビュー・調査用ツールです。スキーマ、行数、row group、作成元情報、カスタムメタデータ、圧縮方式などを確認しながら、必要な範囲の行を表形式で表示できます。
ファイル全体を最初から展開するのではなく、メタデータを先に読み、表示している範囲を中心に読み込む設計です。データパイプラインのデバッグや、手元に届いたParquetの構造確認に向いています。
こんなときに便利
- データパイプラインの途中で生成されたParquetのスキーマや行数を素早く確認したい
- 受け取ったParquetがどの圧縮方式やrow group構成になっているか調べたい
- SQL環境を用意せず、数十〜数百行だけ確認してCSVへコピー・保存したい