![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
云计算
Mr.Ma.01
Java后端开发工程师
展开
-
Hadoop3.2.1笔记
Hadoop 整体概述 Hadoop是一个适合海量数据存储和计算的平台 主要基于谷歌的三驾马车:GoogleFS,MapReduce,BigTable而实现的 三大核心组件 HDFS 分布式存储,支持主从结构,支持多个NameNode,从节点支持多个DataNode **NameNode:**负责接收用户请求,是整个文件系统的管理节点,维护文件系统的文件目录树,文件/目录的元信息,每个文件...原创 2020-04-03 23:00:24 · 336 阅读 · 0 评论 -
HDFS操作常用的Shell命令;
向HDFS中上传任意本地文件 hadoop fs -copyFromLocal URI -f 如果文件存在,则覆盖 从本地文件系统考贝到集群上 向一个已经存在的HDFS中的文本文件中,追加本地文件的内容到HDFS原有文件末尾 hadoop fs -appendToFile … 将一个本地文件系统的源文件或多个源文件追加到目标文件系统 从HDFS中下载指定文件 hadoop fs ...原创 2019-11-14 21:42:39 · 1663 阅读 · 0 评论