![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
有关大数据
小新同学summer
既然选择了远方,便只顾风雨兼程。ᵎ(•̀㉨•́)و ̑̑
展开
-
大数据实践课02——HDFS分布式文件系统
大数据实践课02-HDFS分布式文件存储模型HDFS存储模型:偏移量:offset副本数:3个(可自行调整)/home/hadoop-2.7.5/etc/hadoop/hdfs-site.xml/home/hadoop-2.7.5/etc/hadoop/ 目录下面为配置文件HDFS架构模型:HDFS部署安装1、Java2、ssh 实现免密钥3、修改配置文件(官方文档有介绍) -$HADOOOP_HOME/etc/hadoop/core-site.xml http://192.原创 2020-06-17 18:22:39 · 483 阅读 · 0 评论 -
大数据实践课01——HDFS分布式文件系统
大数据实践课——HDFS分布式文件系统分布式存储Master主节点: 存放文件系统的目录树状结构,slave节点: 放真实的数据block块: 版本1:64m 版本2:128mreplication: 副本机制,3个namespace: 命名空间管理,管理着整个服务器集群的所有文件。传统解决方案: 移动数据:将数据向计算移动 移动计算:将计算向数据移动 1、任务分解 2、结果汇总ha原创 2020-06-17 17:13:55 · 362 阅读 · 0 评论