- 博客(3)
- 收藏
- 关注
RSS订阅翻译 MapR上的高可用性
介绍 高可用性（HA）是指系统能够在出现无法预料的故障时保持正常运行的能力，避免意外停机或服务中断。HA是企业依赖的关键功能，可支持面向客户的应用程序和服务级别协议 HA在MapR融合数据平台中的优势 MapR融合数据平台中的高级HA功能为尝试利用大数据的组织提供了许多好处 没有数据丢失 MapR平台确保关键数据永远不会通过可配置的复制级别丢失。自动故障转移可确保群集始终可用，因此大数据应用程序可...
2019-03-15 10:06:37
536
原创 spark安装过程
spark安装过程 安装步骤： 1.上传解压，ps:首先保证每个节点上有scala 2.修改spark-env.sh（cp or mv spark-env.sh template spark-env.sh） 3.修改slaves配置文件cp slaves.template slaves 4.修改自己的系统配置文件，我的是/etc/profile 5.分发到其他节点scp -r spark hado...
2018-11-20 14:00:44
280
原创 hadoop各种流程
元数据合并流程 HDFS的读写过程 shuffle过程 job提交流程 元数据合并流程 CheckPoint edits:日志的元数据 fsImage ：镜像的元数据 1）snn会向namenode发送元数据是否合并的检查 1min检查一次 2）namenode需要元数据合并 会向snn进行相应 3）snn向namenode发送元数据合并的 请求 4）namenode将正在编辑的元数据的日志...
2018-11-14 21:01:47
800
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人