- 博客(5)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 YARN HA实现和原理
YARN将共享存储系统抽象成RMStateStore,以保存恢复ResouceManager所必须的信息，包括： Application状态信息ApplicationState。内部包含应用程序提交描述信息context、提交时间submitTime、拥...
2018-02-12 22:59:21
675
原创 YARN HA实现和原理
YARN将共享存储系统抽象成RMStateStore,以保存恢复ResouceManager所必须的信息，包括： Application状态信息ApplicationState。内部包含应用程序提交描述信息context、提交时间submitTime、拥...
2018-02-12 22:59:17
3198
原创 Hadoop2容错机制
在Hadoop1中HDFS和MapReduce均采用了master/slave结构，这种结构虽然具有设计非常简单的优点，但是同时存在master单点故障的问题，所有长时间Hadoop处于仅用于离线存储和计算。Hadoop2中HDFS同样面临着单点故障问题，但由于每个MapReduce作业拥有自己的作业管...
2018-02-09 00:15:47
987
原创 shell变量的引用
在使用shell过程我们会遇到一个这样的问题，变量的引用问题，这个问题具体就是 a=b b=c 当我们echo $a的时候打印的是b,其实我们是想打印出c 这个就是变量引用问题这里提供了2种方式1、感叹号的使用a=bb=cecho $a #打印becho ${!a} #打印c2、eval的使用a=bb=ceval d=\${$a}echo $d #打印c
2018-02-06 19:56:35
534
原创 Hadoop2.7.5HA的安装和测试
这篇文章我们只介绍Hadoop HA的安装和配置，不会深入讲解HA的原理。 1、集群的规划 主机名 IP 安装的软件 运行的进程cdh1 192.168.18.160 jdk、hadoop NameNode DFSZKFailoverController(zkfc)、ResourceManagercd
2018-02-04 23:30:53
1092
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人