hadoop3.x概述
java版本的问题
hadoop3.x新特性之common改进
shell脚本的重写,修bug加新特性,不兼容的都列出来了
过时的API删除了
hadoop3.x新特性之HDFS改进
EC的使用,替换副本,省空间
支持两个以上的namenode
磁盘的datanode的平衡
多个服务之间默认端口发生了变化
hadoop3.x新特性之YARN改进
Timeline应用程序信息的检索
改善了timeline扩展性和稳定性
增强了flows和聚合aggregation
opportunistic container
hadoop3.x新特性之MapReduce改进
task-level优化
daemon和task堆进行了重构
hadoop3.x新特性之其他
客户端jar包管理hadoop的依赖打到一个jar包里边去了
支持微软的Azure Data Lake和阿里云对象存储系统相连
10小时大数据:第10章-Hadoop3.x新特性
最新推荐文章于 2023-06-22 18:18:00 发布