parquet-tools

parquetフォーマットのデータをプレビューしたり、スキーマを確認したりできるツール。

• https://github.com/apache/parquet-mr/

ビルドする

git clone https://github.com/apache/parquet-mr.git
cd parquet-mr/parquet-tools
mvn package

scala 2.12、masterブランチではビルドエラーになった。以下の環境に変更するとビルドできた

• java 8
• scala 2.11
• タグ apache-parquet-1.10.1

使い方

java -jar target/parquet-tools-1.10.1.jar schema ./party_alias

こんな感じのエイリアスにしておくと便利かも

alias parquet-tools="java -jar /path/to/parquet-tools-1.10.1.jar"