大数据
文章平均质量分 93
zcc_heu
开心就好
展开
-
ubuntu14.04安装ambari
本文是在ubuntu14.04上安装ambari。安装 Ambari 最方便的方式就是使用公共的库源(public repository)。在进行具体的安装之前,需要做几个准备工作。一、准备工作使用公共的库源安装ambari可以选择系统一路回车选择系统默认的数据库PostgreSQL和默认的jdk。也可以使用自己事先安装好的jdk和数据库。此处我使用的是自己安装的jdk-8u111和mysql5.7原创 2016-11-30 17:27:44 · 4224 阅读 · 1 评论 -
在ubuntu14.04上使用ambari搭建hadoop集群
使用ambari搭建hadoop集群本文使用三台机器搭建hadoop集群。IP分别为:ubuntu 的 IP :192.168.127.138hadoop1 的 IP: 192.168.127.135hadoop2 的 IP:192.168.127.1341.原创 2016-12-09 19:41:17 · 4421 阅读 · 0 评论 -
hadoop yarn 学习笔记(一)
yarn简介Yarn的全称为(Yet Another Resource negotiator)是hadoop目前内置的资源管理器。其实它的名字很好地描述了Yarn实际上是做什么的。从根本上上说Yarn是为工作在现有的和新的Hadoop集群上而设计的资源调度器。将资源调度从MapReduce数据流中分离出来。原创 2017-03-13 21:22:21 · 444 阅读 · 0 评论 -
Google Borg学习笔记
Google Borg简介Google是一个集群管理器,负责对成千上万个应用程序提交job进行接收、调试、启动、停止、重启、监控等。它可以同时管理者多个数据集群,每个集群上有成千上万台机器。Borg通过接入控制,高效的任务打包,超额的资源分配和进程级隔离的机器共享,来实现超高的资源利用率。它通过最小化故障恢复时间的运行时特性和减少相关运行时故障的调度策略来支持高可用的应用程序Borg通过提供一原创 2017-03-14 12:02:15 · 870 阅读 · 0 评论 -
docker:搭建单机redis主从集群
最近在学习docker和kubernetes,在看《docker容器与容器云》这本书的时候,就按照书中的教程搭建第一个docker应用栈,其中遇到了一些坑。现把搭建过程中遇到的困难记录下来。主要是在搭建redis主从集群时遇到的困难。1、获取redis镜像首先从Docker Hub中或者其他的镜像仓库中获取现有的可用镜像,在这些镜像的基础上启动镜像,这里我选择从docker官方镜像中获取redis镜原创 2017-11-24 21:58:59 · 2672 阅读 · 1 评论