- 博客(2)
- 收藏
- 关注
原创 hdfs 讲解
Hadoop分布式文件系统—HDFS什么是分布式文件系统所谓的分布式文件系统,我的个人理解是管理网络中把数据存储在不止一台机器上的系统,这样的存储方式被称为分布式存储。(管理网络中跨多台计算机存储的文件系统称为分布式文件系统。)分布式文件系统能干什么(1)分布式文件系统可以存储数据量较大的文件。 (GB,TB,PB级别的海量数据)(2)一次写入,多次夺取。(一个文件经过创建、写入和关闭之后就不需要改变。这一假设简化了数据一致性问题,并且使高吞吐量的数据访问成为可能。Map/Reduce应用
2020-10-27 16:59:59 1125
原创 hdfs讲义
Hadoop分布式文件系统—HDFSHDFS原理HDFS(Hadoop Distributed File System)是一个分布式文件系统。它具有高容错性并提供了高吞吐量的数据访问,非常适合大规模数据集上的应用,它提供了一个高度容错性和高吞吐量的海量数据存储解决方案。311…1 HDFS 的假设前提和设计目标HDFS在设计时已考虑硬件错误等情况,具有高容错性等特征。HDFS的假设前提术设计目标包括以下几个方面。1.硬件错误硬件错误是常态而不是异常。HDFS 可能由成百上千台服务器构成,
2020-10-26 22:17:08 574
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人