大数据
不坠青云之志
这个作者很懒,什么都没留下…
展开
-
大数据技术与原理--大数据概述
大数据技术与原理--大数据概述 一、大数据时代: 历史上的三次信息化浪潮: 信息化浪潮 发生时间 标志 解决问题 代表企业 第一次信息化浪潮 1980年前后 个人计算机 信息处理 Intel、AMD、IBM、苹果、微软、联想、戴尔等 第二次信息化浪潮 1995年前后...原创 2019-06-17 21:17:21 · 683 阅读 · 0 评论 -
大数据技术与原理--大数据架构Hadoop
一:Hadoop简介 优点: 1:Hadoop是开源免费的。 2:屏蔽了很多底层的复杂的实现,提供了方便用户操作的接口。 3:支持在Hadoop上多种语言开发应用 两大核心:分布式文件存储:HDFS 分布式文件处理:MapReduce Hadoop成名原因:2008年4月利用910个结点的集群对1TB的数据进行排序,只用了209秒。引起大企业和高效对Hadoop进 行引入和研...原创 2019-06-25 21:10:55 · 777 阅读 · 0 评论 -
大数据技术与原理--分布式文件系统HDFS
大数据技术与原理--分布式文件系统HDFS 一:HDFS简介和相关概念: HDFS是Hadoop的核心组件之一,负责大数据的分布式存储。随着现代数据量的增大,单台计算机无法存储海量的数据, 需要集群来存储数据。 HDFS实现的目标: 1:兼容廉价的普通机器,利用分布式文件系统底层可以是性能比较低的机器。 2:实现数据的流式读写。一次读取比较数据...原创 2019-07-01 20:31:45 · 727 阅读 · 3 评论 -
大数据技术与原理--分布式数据库Hbase
大数据技术与原理--分布式数据库Hbase 一:Hbase简介 BigTable起初是为了解决google的大规模网页搜索的问题,现在BigTable已经用于google公司的搜索,地图,财经,打印。 Hbase是BigTable的开源实现,Hbase是高可靠,高性能,面向列,可伸缩,面向列存储的分布式数据库。Hbase擅长存储非结构化和...原创 2019-08-13 20:53:27 · 665 阅读 · 0 评论