hadoop
文章平均质量分 66
时代新人0-0
大数据技术爱好者
展开
-
raft算法与paxos算法的差异
依照一篇博客总结了raft算法与paxos算法之间的差异原创 2024-04-09 10:24:42 · 275 阅读 · 0 评论 -
hadoop中hdfs的fsimage文件与edits文件
本文简要介绍了hadoop中hdfs的fsimage和edits文件的用途,并结合了实际用途进行描述原创 2024-04-08 20:45:49 · 524 阅读 · 0 评论 -
mv: 无法获取“/opt/module/hadoop/logs/hadoop-atguigu-nodemanager-hadoop102.out.1“ 的文件状态(stat): 没有那个文件或目录
hadoop文件配置的小问题原创 2023-11-04 12:12:11 · 1442 阅读 · 0 评论 -
Hadoop入门之什么是YARN
如上图所示,HDFS处于YARN之外,为YARN提供应用程序所需要的数据,而YARN中可以部署很多应用,包括MapReduce HBase Spark等。通俗来讲YARN就是一个集群管理器,它可以统筹多台服务器上的资源,根据业务需要向特定应用分配资源(资源是指处理器和内存等)。Resource manager是大总管,掌管一切资源,如果有任务提交,Resource manager就会为任务分配资源。NodeManager是小总管,主要负责该节点内所有容器的生命周期的管理,监视资源和跟踪节点健康。原创 2023-09-24 19:54:09 · 53 阅读 · 1 评论 -
Hadoop中HA模式和非HA模式的区别
本文简述了hadoop中,HA模式的特点。原创 2023-09-24 10:24:52 · 195 阅读 · 1 评论