Ubuntu启动集群测试文件(test.txt) ，hdfs dfs -ls后出现No such file or directory解决

最新推荐文章于 2022-11-26 20:18:51 发布
最新推荐文章于 2022-11-26 20:18:51 发布
阅读量1.2k 收藏 1
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_29680161/article/details/104711373
版权

第一步启动集群：start-all.sh

第二步将文件上分布式文件管理系统HDFS

2.1 在hdfs上创建文件

hdfs dfs -mkdir /user		(这一步就是创建一个文件夹)

↑ 路径为hdfs的路径

2.2 将txt导入进去		

hdfs dfs -put /Hdaoop/Hadoop/test.txt /user	(这里将txt上传进去了)

↑ -put为放入，第一个为本地路径（/Hdaoop/Hadoop/test.txt），第二个为HDFS路径（/user）

2.3 检测一下

hdfs dfs -ls /user
酸甜小龙虾
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
-bash: /bin/ls: No such file or directory
weixin_33834628的博客
09-11 3127
-bash: /bin/ls: No such file or directory今天有网友说遇到这个问题，我以前也遇到过，不知道怎么就解决了。也一直没有深究，今天我决定深究该问题！1，不同的命令由不同的软件包实现，一些常用的命令在所有的软件包中都有实现。还有一部分命令是bash 内置的，可以在 bash 的源码中找到。下面是几种情况和解决方法的分析：1，在windows下写...
hdfs-site.xml配置文件详解
10-22
hdfs-site.xml配置文件详解，有需要的可以下载哈哈哈哈哈
HDFS文件上传异常分析：put: `test.txt': No such file or directory
欢迎来到李奇峰的数据世界
05-09 1万+
问题描述 Linux上传本地文件到HDFS中时，出现“No such file or directory” 但是你发现当前文件夹下此文件是存在的 这个时候你也许担心会不会是文件权限的问题，因为我们在使用hdfs命令时，切换到了hdfs用户，但是当前文件所属的用户与用户组为root，于是我们在将此文件的用户与用户组修改为hdfs再试一下 可以看到，还是报同样的错误，然后又按照同样的方法将此文件所在文件夹的用户与用户组修改为了hdfs，还是不行 解决方法 将此文件所在文件夹的用户与用户组修改为hdfs后，
上传文件到hdfs时报错bash: ./bin/hdfs: 没有那个文件或目录解决方法
weixin_55501516的博客
10-20 1万+
原因：配置文件没有配置好 首先打开配置文件 1 sudovim/etc/profile 　　接着，在配置文件的最下面，追加三行配置，如下图所示 注意：前两行的=号后面填写的是你的JAVA和HADOOP的安装路径。 补充：可在终端下输入以下的命令来查看安装目录 1 2 echo$JAVA_HOME echo$HADOOP_HOME 　　配置文件保存好后，需通过如下命令使其生效。 ...
python 相对路径 无法打开文件 打开文件报错 No such file or directory
大石的博客
03-26 1万+
python基础学习的时候出现了No such file or directory问题 工具:vscode+终端调试 我的python文件和目标的text.txt文件在同一目录 def getText(path): f = open("text.txt","r") text =f.read() text = text.lower() for ch in "!\"#$...
linux ls file or directory,-bash: ls: No such file or directory 产生的原因及修改方法
weixin_35143166的博客
05-15 253
ubuntu出现如下错误：{Welcome to Ubuntu 16.04.5 LTS (GNU/Linux 4.15.0-42-generic x86_64)* Documentation: https://help.ubuntu.com* Management: https://landscape.canonical.com* Support: https://ubun...
python 零基础学习篇-04.HDFS集群搭建--服务器-网络配置准备.mp4
04-30
python 零基础学习篇-04.HDFS集群搭建--服务器-网络配置准备.mp4
现有student.txt和student-score.txt 将两个文件上传到hdfs上 使用Map/Reduce框架完成下面
最新发布
05-06
现有student.txt和student_score.txt。将两个文件上传到hdfs上。使用Map/Reduce框架完成下面
Hadoop 3.x（HDFS）----【HDFS 的 API 操作】---- 代码
09-10
Hadoop 3.x（HDFS）----【HDFS 的 API 操作】---- 代码 Hadoop 3.x（HDFS）----【HDFS 的 API 操作】---- 代码 Hadoop 3.x（HDFS）----【HDFS 的 API 操作】---- 代码 Hadoop 3.x（HDFS）----【HDFS 的 API 操作】--...
hdfs-over-ftp-hadoop-0.20.0.rar_ftp_ftpoverhdfs_hdfs文件传入ftp_java
09-14
在hadoop分布式文件系统上实现ftp 服务
关于报错：-put /home/hadoop/test.txt: No such file or directory
mmwf__的博客
10-24 8541
在学习hadoop时，有一个小实验是创建一个文件夹，并上传一个文件。 把本地文件系统的“/home/hadoop/ test.txt”上传到HDFS中的当前用户目录的a目录下，也就是上传到HDFS的“/user/hadoop/a/”目录下 ./bin/hdfs dfs -put /home/hadoop/test.txt /user/a 显示报错：-put /home/hadoop/test.txt: No such file or directory 解决办法：改为：./bin/hdfs dfs -put
cat 查看文件时报错No such file or directory
m0_46301437的博客
06-23 7988
在平台上生成一个文件，用ls 查看发现文件已经存在了，并且是可执行文件；为什么还是打不开呢？ --------->> 后面发现是使用的集群不一样，在大集群可以做上述的查看操作，但实际存储文件的是小集群，大集群可能是没有执行小集群文件的相关权限，这时候需要查看文件内容的话–切换为小集群就好了...
Linux报错：-bash: 路径xx: No such file or directory解决方法
Viperousaaa的博客
11-26 1万+
bash: no such file or directory的解决办法
hadoop多节点集群搭建过程中错误：No such file or directoryhdfs，logs提示出现出现^M的解决办法
moon_love_banana的博客
06-07 2510
声明：由于是在技术qq群里得到的答案，原创作者无从追溯，若有侵权，请mail285926969@qq.com告知，必定注明出处。 出现这个错误并不是代码问题，而是LINUX环境下用rz命令上传的文本格式为doc,需要更改为unix格式后系统才会正确读取代码，具体操作如截图：
hadoop fs -ls后出现No such file or directory解决
m0_67402236的博客
04-18 4729
原因是因为-ls默认目录是在hadoop的hdfs文件系统的/user/用户名（用户名就命令行@符号前面的那个东西），但是你hadoop的hdfs系统内没有这个文件夹，所以会显示No such file or directory。 所以你需要在hdfs文件系统中新建一个/user/用户名目录。 建好之后可以验证： 可以看出确实如此。 还有切记不要把hadoop fs -ls 与hadoop fs -ls /搞混了，两者查看的路径参数是不一样的！“/”表示的是根目录。 ...
Shell中判断HDFS中的文件或目录是否存在
storm_fury
12-20 5009
在Linux文件系统中，Shell脚本判断某个文件是否存在： # 这里的-f参数判断$file是否存在 if [ ! -f "$file" ]; then 　　echo "文件不存在!" fi Hadoop提供了test命令判断HDFS上某个文件或目录是否存在： [root@node00 ~]# hdfs dfs -help ... -test -[defsz] <path> : ...
hdfs dfs -ls命令显示No such file or directory
master_hunter的博客
09-29 3846
前言 本人大数据专业初入大三刚刚接触并开始学习Nosql数据库原理，当然初入一些算法和原理还不是很熟练掌握，有待提升自己的编程结合能力。在此领域本人有诸多不明确疑问，可能文章会有些许错误，望大家在评论区指正，本篇文章错误将会不断更正维护。 首先提示No such file or directory很容易联想到路径不对，当我们查看根路径时： hdfs dfs -ls / 会发现: 而在本地去whereis 找这些文件发现是与hdfs不同的，根据hdfs原理可知： HDFS的文件目录主要
Python Open()函数你想象不到的伪bug，FileNotFoundError:[Error 2] No such file or directory
qq_39039017的博客
06-24 2万+
Python Open()函数的用法，想必会有很多的坑，网上的也说的很明白了，但这个坑你是否遇到过呢？ 这个坑真的很有意思，连我自己都觉得好笑。 让我们来回顾下这个bug的情形吧： 看，简简单单的两行代码，文件路径都尝试过无数遍了（绝对路径，相对路径），结果还是一样，这咋整？ 此刻你可能会怀疑这个test.txt文本是否存在吧。答案是，存在的哈，请看： 注意：在电脑系统的绝对路径...
hdfs dfs -ls后出现No such file or directory解决
热门推荐
binbin_09_10的博客
10-25 2万+
原因是因为-ls默认目录是在hdfs文件系统的/user/用户名（用户名就命令行@符号前面的那个东西），但是你的hdfs系统内没有这个文件夹，所以会显示No such file or directory。 所以你需要在hdfs文件系统内创建 root1@ubuntu:~$ hdfs dfs -mkdir /user mkdir: Cannot create directory /user. ...
./bin/hdfs dfs -cat output2/* cat: `output2/*': No such file or directory怎么解决
05-11
2. 确认 `output2` 目录下存在文件或目录，可以在 HDFS 中使用 `hdfs dfs -ls output2` 命令查看。 3. 确认 `output2/*` 路径写法正确，应该是 `output2/*` 而不是 `output2/ *` 或者 `output2/* `。 如果以上步骤...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值