- 博客(1)
- 资源 (10)
- 收藏
- 关注
转载 HFile V2
最新版的HFile主要做了两个改进,这两个改进都主要是为了降低内存使用和启动时间,思路都是将它们切分为多个block,填满就写出去,这也降低了writer的内存占用:1. 增加了树状结构的数据块索引(data block index)支持。原因是在数据块的索引很大时,很难全部load到内存,比如当前的一个data block会在data block indxe区域对应一个数据项,
2014-12-09 21:29:34 785
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人