- 博客(3)
- 收藏
- 关注
原创 了解HDFS知识
了解HDFSHDFSHadoop 由 HDFS Mapreduce 和zookeeper 三个主要核心下面为大家介绍一下 第一核心 HDFSHDFS是由一个Namenode ,一个Secondary NamrNode ,若干Datanodes和Client组成 ,采用主从结构,存储的基本单位是块 HDFS上的文件被划分为块大小的多个分块,作为独立的存储单元,称为数据块,默认大小是64MB。-一. HDFS的三个节点Namenode,Datanode,Secondary NamenodeN
2020-11-17 15:51:43 233
原创 大数据生态系统的认识
标题大数据生态系统加粗样式一.认识HadoopHadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),其中一个组件是HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(
2020-11-10 14:36:16 1741
原创 2020-10-27
我其实想谈谈我自己的感受作为一个大数据专业的一个新生其实我并不了解大数据 甚至我连大数据都不知道是啥但是我既然选择了这个专业就要学好他在今天的大数据理论基础课上 我学到了#4VVelocity 速度 速率 更快的处理数据value 价值 (价值密度低 ,过滤出有价值的信息)variety 类型 数据的结构(有结构的数据,半结构数据,无结构数据)volume 体积(非常大。)老师还普及了一下电脑的容量单位容量单位1 bit(字) 二进制中的一个1 or 一个0
2020-10-27 20:05:23 93
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人