![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据生态圈
文章平均质量分 95
大数据生态圈
YuZai_ovo
这个作者很懒,什么都没留下…
展开
-
Hadoop 三大组件调优
大数据平台管理与运维HDFS 调优Yarn 调优MapReduce调优集群权限管理开启集群原创 2022-06-20 14:30:29 · 540 阅读 · 0 评论 -
大数据基础环境搭建
大数据基础环境搭建修改主机名hostnamectl set-hostname masterbashhostnamectl set-hostname slave1bashhostnamectl set-hostname slave2bash配置hosts(三台机器都执行)vi /etc/hosts ip master ip slave1 ip slave2关闭防火墙(三台机器都执行)关闭防火墙 systemctl stop firewalld查看状态 systemctl sta原创 2022-06-20 14:29:44 · 135 阅读 · 0 评论 -
HBase
大数据_HBase框架一、HBase简介1、HBase定义HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。2、HBase数据模型逻辑上,HBase 的数据模型同关系型数据库很类似,数据存储在一-张表中,有行有列。但从HBase的底层物理存储结构(K-V) 来看,HBase 更像是一个multi-dimensional map。3、HBase逻辑结构......原创 2022-06-20 14:28:01 · 362 阅读 · 0 评论 -
Zookeeper
Zookeeper 入门1、概述Zookeeper是一个开源的分布式的,为分布式框架提供协调服务的Apache项目。2、Zookeeper工作机制Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负责通知已经在Zookeeper.上注册的那些观察者做出相应的反应。3、Zookeeper特点Zookeeper: 一个领导者(Leader) ,多个跟随者(原创 2022-06-20 14:27:24 · 172 阅读 · 0 评论 -
Scala
文章目录Scala安装Scala基础数据类型类和对象键盘标准输入to 和 untilcount+双重for循环yieldScala六大特性1.Java和Scala可以混编2.类型推测(自动推测类型)3.并发和分布式(Actor)4.特质,特征(类似java中interfaces和abstract结合)5.模式匹配(类似java中的switch…case)6.高阶函数一句话总结: Scala是一门以Jvm为运行环境的静态类型编程语言,具备面向对象及函数式编程的特性。Scala安装下载安装原创 2022-05-12 08:05:01 · 144 阅读 · 0 评论 -
Hadoop
Hadoop 极速搭建集群部署规划hadoop-3.1.3/etc/hadoop/core-site.xmlhadoop-3.1.3/etc/hadoop/hdfs-site.xmlhadoop-3.1.3/etc/hadoop/mapred-site.xmlhadoop-3.1.3/etc/hadoop/yarn-site.xmlhadoop-3.1.3/etc/hadoop/hadoop-env.shhadoop-3.1.3/etc/hadoop/workers常用命令常用端口集群部署规划NameN原创 2022-05-03 08:31:21 · 257 阅读 · 0 评论 -
Hive-
Hive原创 2022-05-03 08:30:46 · 1353 阅读 · 0 评论