![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
千鸟渡落日
小白进击史
展开
-
基于hadoop框架进行数据处理与分析的应用程序的开发
学习目的:掌握基于hadoop框架进行数据处理与分析的应用程序的开发 HDFS分布式文件存储系统 hdfs里面数据都是一块一块存储的 主从模式 一个N节点多个D节点 NameNode 管理文件系统的命名空间,管理目录,记录每个文件各个数据块节点的信息 DateNode 工作阶段 储存并检索数据块,把数据库列表发送给NameNode 注意:不适合并发写入,不支持文件随机修改,不支持随机读等低延...原创 2019-07-29 15:58:47 · 797 阅读 · 0 评论 -
通过Shell命令对HDFS操作上传和下载文件
通过Shell命令对HDFS操作 ls cat mkdir rm chmod chown copyFromLocal 从本地copy到HDFS copyToLocal 从HDFScopy到本地 get 下载 put 上传 实战要求,在本地搭建一个NameNode和多个DataNode 测试文件的上传和下载 1,打开终端 sbin$ 目录下启动文件 进入bin$目...原创 2019-07-29 22:29:58 · 5863 阅读 · 0 评论