![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
存储
文章平均质量分 92
kaka11
这个作者很懒,什么都没留下…
展开
-
Parquet 编码学习笔记
目录一.官方Parquet 编码文档二. Plain Encoding三. 字典编码四. RLE / Bit-Packed 混合4.1 编码格式4.2 其中的bit-packing 原理4.3. varint-encode()4.4 其它一.官方Parquet 编码文档更详细的可以直接看原文。本文只是一些个人的理解和学习笔记。parquet-format/Encodings.md at master · apache/parquet-format · Gi...原创 2021-12-18 22:11:15 · 1524 阅读 · 0 评论 -
Parquet 嵌套学习笔记
目录一. parquet 嵌套列表示二.Definition levels && Repetition levels2.1定义:2.2例子:2.3生成具有 repetition levels 和 definition levels 的 column strips。三. 参考:一. parquet 嵌套列表示为了编码嵌套列,parquet 使用 group, repeated 来表示一个类似于 struct 和 list 的概念。比如这个 Doc...原创 2021-12-18 21:46:07 · 1181 阅读 · 1 评论