Hadoop
文章平均质量分 90
Hadoop学习使用总结
小崔编码
渴望起飞的菜鸡大数据程序员一枚,期待与你的交流学习
展开
-
Hadoop中yarn节点任务资源配置
set mapreduce.map.memory.mb=4096;// 每个Map Task需要的内存量set mapreduce.map.java.opts=-Xmx3276M; // 每个Map Task 的JVM最大使用内存set mapreduce.reduce.memory.mb=4096; // 每个Reduce Task需要的内存量set mapreduce.reduce.java.opts=-Xmx3276M; // 每个Reduce Task 的JVM最大使用内存set mapre原创 2022-03-30 22:13:17 · 1582 阅读 · 0 评论 -
大数据平台安装部署(适用虚拟机级真实服务器,亲测)
大数据集群搭建一、基础环境准备(虚拟环境or服务器环境)1. 虚拟环境准备(服务器安装跳过此步骤)1.1 安装vmware[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-f1N35Du3-1612505654356)(C:\Users\sthq\AppData\Roaming\Typora\typora-user-images\image-20210204135642876.png)]注意:安装centos8系统及以上需要高版本vmware,实测vmware12.x原创 2021-02-05 16:32:47 · 5300 阅读 · 1 评论