HDFS目录缓存是HAWQ master用于确定表数据在HDFS上的分布信息的缓存服务。
HDFS在RPC处理方面速度慢,特别是当并发请求数量很高时。为了决定哪个segments 处理哪部分数据,HAWQ需要从HDFS namenodes获得数据位置信息。HDFS目录缓存用于缓存数据位置信息并加速HDFS RPCS。
HDFS目录缓存是HAWQ master用于确定表数据在HDFS上的分布信息的缓存服务。
HDFS在RPC处理方面速度慢,特别是当并发请求数量很高时。为了决定哪个segments 处理哪部分数据,HAWQ需要从HDFS namenodes获得数据位置信息。HDFS目录缓存用于缓存数据位置信息并加速HDFS RPCS。