- 博客(3)
- 收藏
- 关注
RSS订阅原创 2020-11-17
HDFS体系结构HDFS由一个Namenode、一个Secondary NameNode、若干Datenodes和Client组成，采用主从结构，存储的基本单位是块。1.（1）HDFS把一个文件被分成多个块，以块为存储单位，默认一个块为64～128MB。（2）HDFS采用抽象的块概念可以带来以下几个明显的好处：支持大规模文件存储；简化系统设计；适合数据备份。2.NameNode（主节点）（1）储存元数据：文件、块与DateNode之间的映射。（2）元数据保存在内容。
2020-11-17 15:49:14
317
原创 2020-11-10
Hadoop生态系统Hadoop是一个由Apache基金会所开发的分布式系统基础架构。它可以使用户在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力进行告诉运算和储存。其具有高可靠性、高扩展性、高效性、高容错性、低成本等优势。hadoop的框架核心设计就是HDFS和MapReduce，HDFS为海量的数据提供了存储，MapReduce则是为海量的数据提供了计算，以下则是Hadoop生态系统。Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的应用、
2020-11-16 10:29:59
159
原创 2020-10-28
大数据概论这是我第一次接触大数据，之前对大数据的了解过于片面，时至今日，终于对大数据有了更深一步的解读。大数据（Big Date），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。注：度容量最小单位为bit，其中1B＝8bit，1KB=1024B，依照大小位将常用单位排序分别为：bit、B、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。其中从KB开始按照进率1024来计算。以上则是我与大数据初次见面的所感所获。...
2020-10-28 19:25:02
181
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人