大数据巧克力味区
艳阳如一
笨,不可怕。但“懒”足以废掉一个人。
展开
-
Hadoop的三种运行模式及区别
Hadoop的三种运行模式 (1)本地模式(默认模式) 不需要启用单独进程,直接可以运行,测试和开发时使用。 (2)伪分布式模式 等同于完全分布式,只有一个节点。需要配7个配置文件(待我后续整理后,会在此添加文章连接) (3)完全分布式模式 多个节点一起运行。 接下来我们来了解它的特点 单机模式(独立模式)(Local或Standalone Mode) -默认情况下,Hadoop即处于该模式...原创 2019-05-20 16:01:19 · 10928 阅读 · 0 评论 -
Flume入门(一)介绍
概述部分 1.定义 Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。 2.为什么要用 3.Flume组成架构 4.Flume架构中的组件 Agent Agent是一个JVM进程,它以事件的形式将数据从源头送至目的,是Flume数据传输的基本单元。 Agent主要有3个部分组成,Source、Channel、Sin...原创 2019-05-25 16:01:49 · 298 阅读 · 0 评论 -
Zookeeper入门(二)安装-----本地模式安装
下载地址 1.官网首页: https://zookeeper.apache.org/ 你可以在官网下载自己需要的版本 我以zookeeper-3.4.10为例,演示安装。 Zookeeper本地模式安装部署 1.安装前准备 (1)安装 Jdk (2)拷贝 Zookeeper 安装包到 Linux 系统下 (3)解压到指定目录 ...原创 2019-05-26 15:41:11 · 282 阅读 · 0 评论 -
Zookeeper入门(一)介绍
1 概述 Zookeeper 是一个开源的分布式的,为分布式应用提供协调服务的 Apache 项目。 2 Zookeeper工作机制 3 特点 1)Zookeeper:一个领导者(Leader),多个跟随者(Follower)组成的集群。 2)集群中只要有半数以上节点存活,Zookeeper集群就能正常服务。(如果有四台机器,挂掉两台,不能正常服务,因为存活机器没有达到半数以上) 3)全局数据一致...原创 2019-05-23 10:43:49 · 272 阅读 · 0 评论