![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop高可用优化
andycao1
这个作者很懒,什么都没留下…
展开
-
hadoop集群ping不同外网静态IP解决方法
原创 2021-12-29 11:03:21 · 2581 阅读 · 0 评论 -
hadoop集群安全模式
集群处于安全模式,不能执行重要操作(写操作)。集群启动完成后,自动退出安全模式。(1)bin/hdfs dfsadmin -safemode get (功能描述:查看安全模式状态)(2)bin/hdfs dfsadmin -safemode enter (功能描述:进入安全模式状态)(3)bin/hdfs dfsadmin -safemode leave (功能描述:离开安全模式状态)(4)bin/hdfs dfsadmin -safemode wait (功能描述:等待安全模式状态).原创 2021-11-28 22:47:03 · 364 阅读 · 0 评论 -
集群hadoop静态IP解决方法
原创 2021-11-27 12:53:26 · 1695 阅读 · 0 评论 -
hadoop 总结
1.2 Hadoop1.2.1 Hadoop常用端口号 hadoop2.x Hadoop3.x 访问HDFS端口 50070 9870 访问MR执行情况端口 8088 8088 历史服务器 19888 19888 ...原创 2021-11-17 20:42:35 · 155 阅读 · 0 评论 -
hadoop 结合zookeeper 高可用 优化新特性
大数据技术之Flume第1章 Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。1.2Flume基础架构Flume组成架构如下图所示。1.2.1 AgentAgent是一个JVM进程,它以事件的形式将数据从源头送至目的。Agent主要有3个部分组成,Source、Channel、Sink。1.2.2 SourceSource是负责接收数据到Flum...原创 2021-11-07 17:06:44 · 197 阅读 · 0 评论