查看parquet文件工具parquet-tools

下载

地址

安装

pip install parquet-tools

用法

$ parquet-tools --help
usage: parquet-tools [-h] {show,csv,inspect} ...

parquet CLI tools

positional arguments:
  {show,csv,inspect}
    show              Show human readble format. see `show -h`
    csv               Cat csv style. see `csv -h`
    inspect           Inspect parquet file. see `inspect -h`

optional arguments:
  -h, --help          show this help message and exit

示例

• 查看本地parquet文件

  > parquet-tools show test.parquet
  

• 查看s3上的parquet文件

  > parquet-tools show test.parquet
  

• 查看parquet文件的结构

  > parquet-tools inspect /path/to/parquet