![](https://img-blog.csdnimg.cn/20190927151053287.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
HDFS
文章平均质量分 61
无
zhzsdiligence
这个作者很懒,什么都没留下…
展开
-
Hadoop _ HDFS进阶
1 HDFS 高阶优化方案1.1 短路本地读取1.1.1 概述1.1.2 解决方案1.1.3 配置使用1.1.4 检查是否配置成功转载 2021-05-15 11:14:17 · 99 阅读 · 0 评论 -
Hadoop 编译
创建编译后的目录mkdir -p /export/server安装依赖环境安装gccapt updateapt install build-essential原创 2021-12-17 01:10:10 · 907 阅读 · 0 评论 -
hadoop之HDFS
1. 场景:如何模拟实现分布式存储?1.1 如何解决海量数据存的下问题?传统方式:内存不够加内存,磁盘不够加磁 盘—单机纵向扩展。但是单机能够扩展的内存磁盘是有上限的,不能无限制下去。分布式存储方式:横向扩展。所谓横向指的是采用多台机器存储,一台 不够就多台一起存储,不够就加机器。理论上,可以横向无限制下去。因此海量数据如何存储的下的问题解决方式就是采 用多台机器存储—即分布式存储。1.2 如何解决数据查询便捷问题此可以借助于元数据记录来解决这 个问题。把文件和其存储的机器的位置信息转载 2021-04-01 10:21:43 · 579 阅读 · 1 评论 -
Hadoop_HDFS架构
1. 架构整体概述1.1 概述1.2 架构图1.3 角色1.3.1 NameNode1.3.2 DataNode1.3.3 SecondaryNameNode1.4 重要特征1.4.1 主从架构1.4.2 分块存储1.4.3 副本机制1.4.4 NameSpace1.4.5 元数据管理1.4.6 数据块存储...转载 2021-09-12 11:54:46 · 140 阅读 · 0 评论