HDFS
chipeize
这个作者很懒,什么都没留下…
展开
-
Hadoop_day04_HDFS的API操作
1、在 Windows 下配置 Hadoop 环境 1.1 未配置会产生的问题 缺少 winutils.exe Could not locate executable null \bin\winutils.exe in the hadoop binaries 缺少 hadoop.dll Unable to load native-hadoop library for your pl...原创 2019-08-20 19:29:51 · 128 阅读 · 0 评论 -
Hadoop_day03_HDFS重点概念(架构、读写过程、机架感知、NameNode、DataNode、SecondaryNameNode)
一、HDFS的架构: 1:Client(客户端) 文件切分。文件上传到HDFS的时候,Client将文件切分成一个个block,然后进行存储 与NameNode进行交互,获取文件的位置信息 与DataNode进行交互,读取或者写入数据 Client提供一些命令来管理和访问HDFS,比如启动或者关闭HDFS 2:NameNode(master,一个管理者) ...原创 2019-08-17 19:46:45 · 213 阅读 · 0 评论 -
Hadoop_day03_HDFS的命令行操作
--查看路径 hdfs dfs -ls -R path --查看内容 hdfs dfs -cat path --创建文件夹 hdfs dfs -mkdir -p path --本地上传到HDFS --拷贝 hdfs dfs -put localsrc dst --本地上传到HDFS --剪切 hdfs dfs -moveFromLocal local...原创 2019-08-17 19:48:04 · 110 阅读 · 0 评论