大数据
文章平均质量分 76
与大数据技术相关知识点
汀沿河
共同学习
展开
-
hive上手操作
Hive Sql 大全(hive函数,hive表)-CSDN博客原创 2024-02-28 17:13:46 · 343 阅读 · 0 评论 -
2 MapReduce计算的流程-Hadoop
hdfs原创 2019-12-13 15:07:06 · 2214 阅读 · 1 评论 -
1 HADOOP-HDFS简述
1背景hdfs(hadoop distributed file system,简称hdfs)是高度容错的(有错误可恢复)分布式文件系统,其本身基于流数据模式访问和处理超大文件的需要开发的。具备高容错、高可靠、高可扩展、高获得性、高吞吐率;HDFS的架构hdfs是hadoop集群最重要的成员之一,采用Master-Slave(主从)架构;NameNode(主)-DateNode(从);...原创 2019-12-16 17:09:20 · 355 阅读 · 1 评论 -
2HADOOP之HBASE
背景随之数据的大规模的扩增,针对mysql无法对大数据背景下无法满足用户的实时查询以及修改的操作,在此hdfs基础之上提出满足用户需求的Hbase。为了更加体现Hbase提出的重要性,我们对Mysql与HBase做一个简单的比较。对比架构特点:我们知道Hbase完全分布式存储在hdfs之上,因此 数据分块存储,多备份的特点,弹性扩容; Hbase底层的计算与存储相互分离; My...原创 2023-10-09 14:23:21 · 107 阅读 · 1 评论