Hadoop大数据技术与应用
文章平均质量分 88
一只笨猫猫
大数据打工人
(23年5月开始更新博客!!!)
展开
-
HDFS分布式文件系统
HDFS分布式文件系统学习目标:1.1 了解HDFS的基本概念1.2 掌握HDFS特点1.3 掌握HDFS的构架和原理1.4 掌握HDFS的Shell和JavaApi操作学习内容:1.1 HDFS的基本概念HDFS(Hadoop Distributed File System)是一个易于扩展的分布式文件系统,运行在成百上千低成本的机器上。它与现有的分布式文件系统有许多相似之处,都是用来存储数据的系统工具,而区别在于HDFS具有高度容错能力,意在部署在低成本机器上。HDFS提供对应用程序数据的原创 2022-04-28 21:16:29 · 4523 阅读 · 0 评论 -
初步认识Hadoop
学习目的· 了解大数据的概念及其特征· 了解Hadoop发展· 掌握Hadoop的生态体系Hadoop作为一个能够对大量数据进行分布式处理的软件框架,用户可以利用Hadoop生态体系开发和处理海量数据。由于Hadoop可靠及高效的处理性能,逐渐称为分析大数据的领先平台。1.1 什么是大数据 从字面意思上看,大数据指的是巨量数据。但是,每个人对大数据的理解是不同的,难以有一个准确的定义。最早提出“大数据”这一概念的是全球知名咨询公司麦肯锡,它是这样定义大数据的:一种规模大...原创 2022-04-20 19:05:18 · 2557 阅读 · 2 评论