Hadoop
文章平均质量分 94
Hadoop
Allen_lixl
这个作者很懒,什么都没留下…
展开
-
【大数据进阶第二阶段之Hadoop学习笔记】Hadoop 运行环境搭建
(1)使用 yum 安装需要虚拟机可以正常上网,yum 安装前可以先测试下虚拟机联网情况(2)安装epel-release(3)注意:如果Linux 安装的是最小系统版,还需要安装如下工具;如果安装的是Linux桌面标准版,不需要执行如下操作net-tool:工具包集合,包含ifconfig 等命令vim:编辑器。原创 2024-01-04 10:28:57 · 1616 阅读 · 0 评论 -
【大数据进阶第二阶段之Hadoop学习笔记】Hadoop 概述
简称HDFS,是一个分布式文件系统。(1)NameNode(nn):存储文件的元数据,如文件名,文件目录结构,文件属性(生成时间、副本数、文件权限),以及每个文件的块列表和块所在的DataNode等。(2)DataNode(dn):在本地文件系统存储文件块数据,以及块数据的校验和。(3)Secondary NameNode(2nn):每隔一段时间对NameNode元数据备份。原创 2024-01-04 10:28:17 · 1333 阅读 · 0 评论