hadoop
文章平均质量分 69
测试猿温大大
这个作者很懒,什么都没留下…
展开
-
关于hdfs 你需要知道的10件事情
公众号:数据猿温大大 小猴&温大大对话 hdfs 角色简介 Client:通过 CLI 或 API 来操作 DataNode(读 / 写操作)和 NameNode(获取文件位置信息),就像图书馆的管理员一样负责书籍的借取/录入。 NameNode:管理整个文件系统的元数据,如命名空间、数据块(Block)映射信息、副本策略及处理客户端读写请求,就像图书馆的前台一样负责检索图书所在位置。 DateNode:管理每个数据块,如存储实际的数据块,处理客户端对数据块的读/写操作,就像.原创 2021-10-10 09:14:32 · 93 阅读 · 0 评论 -
一篇搞定hadoop安装,建议收藏
导语 之前后台小伙伴私信我想了解hadoop的单机环境安装,今天给大家安排上了,废话不多说,直接上干货。 目录 前置条件配置 SSH 免密登录Hadoop(HDFS)环境搭建Hadoop(YARN)环境搭建 1、前置条件 Hadoop 的运行依赖 JDK,需要预先安装,安装步骤见: 1.1 下载并解压 在官网 下载所需版本的 JDK,这里我下载的版本为JDK 1.8 ,下载后进行解压: [root@ java]# tar -zxvf jdk-8u201-linux-原创 2020-10-29 10:45:50 · 141 阅读 · 0 评论