Linux上传本地文件到HDFS

最新推荐文章于 2024-07-27 16:32:54 发布

猪老大唯一官方认证

最新推荐文章于 2024-07-27 16:32:54 发布

阅读量6.1w

点赞数 13

分类专栏：学习笔记文章标签： HDFS 大数据文件上传 linux

本文链接：https://blog.csdn.net/tanqu9315/article/details/79065594

版权

学习笔记专栏收录该内容

8 篇文章 1 订阅

订阅专栏

上一篇文章记录了如何使用java代码将本地文件上传到HDFS中，之后我又尝试了直接使用Linux命令上传文件，过程如下。

su hdfs                 //切换到HDFS用户
cd /home/hdfs/files     //进入到服务器中文件所在目录
ls                      //查看此目录下的文件列表

vim test.txt    //若文件存在可显示文件中的内容，若不存在则新建文件

注：按“i”键可进入编辑器，可直接修改文件中的内容
test.txt文件中的内容：
1 15673830092 aaa
2 15837287388 bbb

3 15008378273 ccc （以Tab分割）

:wq!    //保存文件并退出
ls      //可看到目录中已添加好test.txt文件

hdfs dfs -put /home/hdfs/files/test.txt   /input    //将本地文件上传到HDFS中，前面为服务器中文件路径，后面为HDFS中文件路径
hdfs dfs -ls /input         //可发现HDFS路径中新增test.txt文件
hdfs dfs -cat   /input/test.txt     //显示文件中的内容

至此为止，服务器中文件的创建及上传到HDFS中已全部完成，下一篇文章中讲述如何将HDFS中的txt文件映射为Hive中的表。