HDFS块缓存

最新推荐文章于 2023-07-23 08:33:01 发布

vfvsfs

最新推荐文章于 2023-07-23 08:33:01 发布

阅读量1.7k

点赞数 1

文章标签： hadoop

本文链接：https://blog.csdn.net/vfvsfs/article/details/109029478

版权

HDFS块缓存

通常DataNode从磁盘中读取块，但对于访问频繁的文件，其对应的块可能被显示的缓存在DataNode的内存中，以堆外块缓存的形式存在。默认情况下，一个块仅缓存在一个DataNode的内存中，当然可以针对每个文件配置DataNode的数量。作业调度器通过在缓存块的DataNode上运行任务，可以利用块缓存的优势提高读操作的性能。