![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop / 大数据 / 数据仓库
我家喵叫长生
加油加油再加油☺
展开
-
Hadoop的组件_HDFS核心概念_第二章
Hadoop_HDFS概念1.概念HDFS的核心工作机制1.概念HDFS是分布式文件系统 /(分布式文件管理系统)在多台机器上管理,(服务器上系统一般装的Linux)提供读取,写入,查看目录信息服务HDFS的核心工作机制HDFS是一套分布式软件系统,里面有很多种服务角色:namenode , secondary ,datanode , 客户端。文件在HDFS中是分块存储的,一个文件会被分成多个块,(默认按128M分块)每个块都有唯一的ID每个块在HDFS 的 datanode 中都可以存原创 2020-12-25 17:10:59 · 259 阅读 · 0 评论 -
Hadoop生态圈组件简介_第一章
Hadoop生态简介_第一章Hadoop 3大核心组件Hadoop 外围组件Hadoop 3大核心组件简介 :Hadoop 是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。Hadoop 的核心是 HDFS 和 Mapreduce,HDFS 还包括 YARN。1.HDFS :hadoop分布式文件系统(可直接下载配置使用)HDFS是GFS的一种实现,他的完整名字是分布式文件系统,类似于FAT32,NTFS,是一种文件格式,是底层的。Hive与Hbase的数据一般都存储原创 2020-12-22 21:21:08 · 367 阅读 · 0 评论