Hadoop
文章平均质量分 89
orisonchan
这个作者很懒,什么都没留下…
展开
-
Hive查询HBase调用MapReduce性能优化
折腾了很久,被领导天天督促&指点,算是有个最基本的性能优化。 1. 背景介绍: Hive使用hive-hbase-handler建立HBase external table。在hive查询包含count(*)、join、以及Predicate Pushdown等操作时,会调用MapReduce进行处理。本文旨在查询性能方面的优化,算是对工作中的一点记录。 优化主要分为两个方面: 1)...原创 2018-08-09 23:11:24 · 951 阅读 · 0 评论 -
Hadoop 集中式的缓存管理demo
参考文献: http://www.infoq.com/cn/articles/hdfs-centralized-cache https://blog.csdn.net/javastart/article/details/50586743 从Hadoop 2.3.0 开始,加入了集中式缓存管理(HDFS centralized cache management)。 特点: 由nameno...原创 2018-08-09 23:21:23 · 356 阅读 · 0 评论