Hadoop
Hadoop 的组成部分有哪些模块?
HDFS 分布式文件存储系统
MapReduce 分布式离线计算框架
Yarn 资源调度器
weixin_43563705
将自己的所学到的知识分析给大家
展开
-
如何搭建Hadoop分布式环境?我来教你怎么做![内含测试小案例]
絮叨两句:博主是一名数据分析实习生,利用博客记录自己所学的知识,也希望能帮助到正在学习的同学们人的一生中会遇到各种各样的困难和折磨,逃避是解决不了问题的,唯有以乐观的精神去迎接生活的挑战少年易老学难成,一寸光阴不可轻。最喜欢的一句话:今日事,今日毕Hadoop分布式目标:搭建基于CDH的Hadoop分布式集群第一步:上传压缩包并解压第二步:查看Hadoop支持的压缩方式以及本地库第三步:修改配置文件修改core-site.xml修改hdfs-site.xml修改Hadoop-env.sh修改m.原创 2020-10-16 10:58:41 · 378 阅读 · 2 评论 -
Hadoop详解以及历史版本介绍
Hadoop详解Hadoop的介绍以及发展历史Hadoop之父Doug Cutting Hadoop最早起源于lucene下的Nutch。Nutch的设计目标是构建一个大型的全网搜索引擎,包括网页抓取、索引、查询等功能,但随着抓取网页数量的增加,遇到了严重的可扩展性问题——如何解决数十亿网页的存储和索引问题。2003年、2004年谷歌发表的三篇论文为该问题提供了可行的解决方案。——分布...原创 2019-11-28 14:59:38 · 6043 阅读 · 2 评论