Hadoop
关注
分享
扫一扫
ikroal
无无
展开
-
Hadoop 基础之生态圈
前言 本文主要目的是介绍 Hadoop 的基本架构以及衍生出来的各种工具，以期对 Hadoop 有个整体的认识。 Hadoop 生态系统 Hadoop 生态系统是指以 分布式的文件系统 HDFS、分布式的计算框架 MapReduce 以及资源管理器 YARN为基础构成的分布式数据处理系统，其结构图如下图所示： 下面将对图中各项组件做一个介绍 HDFS HDFS 是 Google 于 2003 ...原创 2019-04-29 14:43:00 · 167 阅读 · 0 评论 -
Hadoop 基础之搭建环境
文章目录前言运行模式配置过程环境准备Standalone 模式Pseudo-Distributed 模式Fully-Distributed 模式错误Thanks 前言 本文主要介绍了 Hadoop 的三种运行模式以及配置的方式。 运行模式 Hadoop 的运行模式分为三种： Standalone（本地模式/单机模式/local模式） 该模式下没有任何守护进程，用户程序和 Hadoop 程序运行...原创 2019-05-05 11:14:44 · 227 阅读 · 0 评论 -
Hadoop 基础之 HDFS 入门
文章目录前言简介体系架构执行流程读文件写文件常用命令文件操作管理编程实例Thanks 前言 本文主要介绍了 HDFS 的体系架构以及其执行流程，并给出了读写操作的编程实例，希望对 HDFS 有个初步的认识。 简介 HDFS (Hadoop Distributed File System) 是一个运行在商业 PC 上的分布式文件系统，其设计思想源自于 Google 2003 年发布的论文 The...原创 2019-05-13 15:42:01 · 146 阅读 · 0 评论