- 博客(4)
- 收藏
- 关注
RSS订阅原创 zookeeper
什么是Zookeeper，Zookeeper的作用是什么，它与NameNode及HMaster如何协作？在没有接触Zookeeper的同学，或许会有这些疑问。这里给大家总结一下。一、什么是ZookeeperZooKeeper 顾名思义 动物园管理员，他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig) 的管理员， Apache Hbase和 Apache Solr 以及LinkedIn sensei 等项目中都采用到了 Zookeeper。ZooKeeper是一个分布式的，开放源
2021-10-19 15:09:21
86
原创 数据仓库工具hive
1、Hive是什么1.概述.Apache Hive数据仓库软件提供对存储在分布式中的大型数据集的查询和管理，它本身是建立在Apache Hadoop之上，主要提供以下功能：（1）它提供了一系列的工具，可用来对数据进行提取/转化/加载 （ETL）；（2）是一种可以存储、查询和分析存储在HDFS（或者HBase）中的大规模数据的机制；（3）HQL查询是通过MapReduce来完成的[select *from 不会 ]2.数据仓库与数据区别 hive产生就是为了解决MR的结构数据分析问题,完成海量数据
2021-10-16 14:45:10
409
原创 开源代码框架hadoop
架构 - HDFS:数据存储 -NameNode：元数据（索引） -DataNode：具体的数据 -SeconDaryNameNode：不是NameNode的热备 - Yarn：资源调度 -ResourceManager：所有节点的老大（一个RM管理多个NM） -NodeManager：单个节点的老大（一个NM管理多个container） -container：每一个容器都是一个资源的集合（硬盘，内存，cpu，网络） ..
2021-10-16 14:28:16
148
原创 C语言中的运算符号
a!=b 逻辑判断，a不等于b，当ab不等时为真。a%=b 等效于 a=a%b 模除并赋值。a|=b 等效于 a=a|b 按位或并赋值。a&=b 等效于 a=a&b 按位与并赋值。a^=b 等效于 a=a^b 按位异或并赋值。&& 逻辑与，均为真时结果为真。|| 逻辑或，均为假时结果为假，否则为真。!a 逻辑非， a为真时结果为假，否则反。| 按位或^ 按位异或&按位与~ 按位取反...
2021-10-05 09:12:12
368
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人