大数据巧克力味区
艳阳如一
笨,不可怕。但“懒”足以废掉一个人。
展开
-
Hadoop的三种运行模式及区别
Hadoop的三种运行模式(1)本地模式(默认模式)不需要启用单独进程,直接可以运行,测试和开发时使用。(2)伪分布式模式等同于完全分布式,只有一个节点。需要配7个配置文件(待我后续整理后,会在此添加文章连接)(3)完全分布式模式多个节点一起运行。接下来我们来了解它的特点 单机模式(独立模式)(Local或Standalone Mode)-默认情况下,Hadoop即处于该模式...原创 2019-05-20 16:01:19 · 10788 阅读 · 0 评论 -
Flume入门(一)介绍
概述部分1.定义Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。2.为什么要用3.Flume组成架构4.Flume架构中的组件AgentAgent是一个JVM进程,它以事件的形式将数据从源头送至目的,是Flume数据传输的基本单元。Agent主要有3个部分组成,Source、Channel、Sin...原创 2019-05-25 16:01:49 · 280 阅读 · 0 评论 -
Zookeeper入门(二)安装-----本地模式安装
下载地址1.官网首页: https://zookeeper.apache.org/你可以在官网下载自己需要的版本我以zookeeper-3.4.10为例,演示安装。Zookeeper本地模式安装部署1.安装前准备(1)安装 Jdk(2)拷贝 Zookeeper 安装包到 Linux 系统下(3)解压到指定目录...原创 2019-05-26 15:41:11 · 266 阅读 · 0 评论 -
Zookeeper入门(一)介绍
1 概述Zookeeper 是一个开源的分布式的,为分布式应用提供协调服务的 Apache 项目。2 Zookeeper工作机制3 特点1)Zookeeper:一个领导者(Leader),多个跟随者(Follower)组成的集群。2)集群中只要有半数以上节点存活,Zookeeper集群就能正常服务。(如果有四台机器,挂掉两台,不能正常服务,因为存活机器没有达到半数以上)3)全局数据一致...原创 2019-05-23 10:43:49 · 259 阅读 · 0 评论