- 博客(2)
- 收藏
- 关注
RSS订阅原创 HDFS浅入了解
1.什么是hdfs？hdfs是什么是一种分布式的文件系统。简单的可以理解为由多台机器组成的一个文件系统。hdfs中有着三个重要的模块，client（客户端）对外统一提供的操作接口，datanode存储真实数据，namenode协调和管理数据。2hdfs的读写原理1.hdfs的读数据原理客户端向NameNode发送读数据请求，NameNode相应客户端，并向客户端返回真实数据的节点，客户端对不同的数据block块就近获取一份（仅一份），DateNode返回客户端真实数据的block块.
2021-09-17 14:00:35
368
原创 了解MapReduce
在认识了解MapReduce之前我们要先知道MapReduce是什么。什么是MapReduce？是一种解决海量数据如何计算的计算框架MapReduce的思想是基于Google的Map-Reduce这篇论文而来，在技术层面MapReduce是一个分布式的计算框架。那么什么又是框架呢？框架：软件框架（software framework）,通常指的是为了实现某个业界标准或者完成特定指标的软件组件规范，也指为了实现某个软件组件规范时，提供规范所要求的基础功能的软件产品。MapReduce是
2021-09-15 19:01:33
106
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人