架构
文章平均质量分 92
谵忆南
哈哈啊哈哈哈哈哈啊哈哈哈哈哈哈啊哈
展开
-
ZooKeeper 简介与安装
先来一波介绍哈哈哈哈哈哈1 Zookeeper是什么?Zookeeper是一个个开发源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase重要的组件.他是一个为分布式应用提供一致性服务的软件,提供的功能有:配置维护 域名服务,分布式同步,组服务.在这次博客中,ZooKeeper主要的角色是充当 服务注册中心的存在,将我们编写好的服务注册到Zoo...原创 2019-06-23 23:51:23 · 302 阅读 · 0 评论 -
Hadoop 分布式计算框架之MapReduce
一、MapReduce是什么?MapReduce是一种分布式的离线阶段框架,是一种编程模型,分为MapTask和ReduceTask两部分,用于大规模数据(大于IT)的并行运算,将自己的程序运行在分布式系统上.MapReduce: Map(映射) Reduce(归纳)分布式计算:分布式计算将该应用分解成许多小的部分,分配给多台计算机节点进行处理。这样可以节约整体计算时间,大大提高计算效率移...原创 2019-07-11 23:23:56 · 723 阅读 · 0 评论 -
Hive的安装与优化
HIve:Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行,数据仓库使用来做查询数九分析的数据库,基本不用来做修改,删除操作,Hive架构原理:安装单用户模式Hive:1:安装mysql数据库:yum install mysql-server -y2:开启mysql服...原创 2019-07-23 21:52:36 · 599 阅读 · 0 评论