在hdfs上无法上传本地文件

最新推荐文章于 2024-05-22 16:48:28 发布
最新推荐文章于 2024-05-22 16:48:28 发布
阅读量921 收藏 6
点赞数 3
分类专栏： 大数据环境搭建 文章标签： hdfs hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_73483881/article/details/136665973
版权
文章讲述了在尝试上传filework.txt到HDFS时遇到的问题，由于IP和主机名不一致导致上传失败。作者提供了步骤，包括在C盘查找文件、修改权限、更新映射中的IP地址和主机名，最后成功解决问题。鼓励读者提出反馈。
摘要由CSDN通过智能技术生成

Couldn't upload the file work.txt.当出现这种错误时

是因为hdfs上的ip和主机名与映射中的不一样，所以会产生上传不了

（1）在C盘找到这些文件

（2）修改权限

添加权限

添加IP地址和主机名

关闭权限

后续一直确定

（3）把ip地址改为 主机名：9870

解决到最后给自己鼓鼓掌吧，你又解决了一个难题。欢迎大家给我提错误，嘻嘻

冉冉升起的小冉
关注
  • 3
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
专栏目录
hadoop无法上传hdfs方法解决
qq_56572867的博客
04-18 6503
首先，我遇到的是两种情况第一种是namenode没有开启，秒挂的情况，这个会出现这种提示 put: File /hdfsdata/NOTICE.txt._COPYING_ could only be written to 0 of the 1 minReplication nodes. There are 0 datanode(s) running and 0 node(s) are excluded in this operation. 注意就是下面提醒了datanode是0，通过jps查看，
HDFS无法下载和上传文件
hhhhhhhhhhhnb的博客
05-11 2199
下图表示一两个情况： 在linux操作系统下没有权限 ./hdfs dfs -chmod 777 / 在window操作系统下无法解析主机名（master返回的存储数据的slave主机列表，是使用主机名表示）修改windows下的hosts 修改这个文件，需要管理员权限 再通过浏览器上传： 再次通过浏览器上传： ...
解决Hadoop Browse Directory Couldn‘t upload the file 错误.无法上传文件
热门推荐
weixin_47127933的博客
04-10 1万+
1,错误如下 这里我们不能这样上传文件, 解决方案 1,首先上传文件到我们的Linux操作系统上, 文件上传( rz)下载( sz)工具 可以在xshell工具中通过 rz调出上传文件的窗口进行文件上传，也可以通过 sz文件名下载某一个文件，上传文件时可以通过拖拽文件到shell面板直接上传。【在node01第一个节点上安装即可】 直接拉过去就可以了, 接下来我们只需要输入命名 :hadoop fs -put /root/score.TXT /in 就可以了.这样可以上传到HDFS的/in目录下了.
【hadoop】hdfs web界面上传文件报Couldn‘t upload the file
qq_22744093的博客
04-26 3535
hosts文件路径：C:\Windows\System32\drivers\etc。F12打开控制台，看到上传文件接口用域名用的是node-1，解析不到对应的ip。解决办法：修改windows的hosts文件。修改hosts文件的权限，右键鼠标选择属性。然后添加hosts记录，保存。
Hadoop HDFS无法上传文件的异常处理
weixin_33725515的博客
01-24 1562
2019独角兽企业重金招聘Python工程师标准>>> ...
Hadoop本地操作HDFS不能上传文件问题
Xu_XiaoXiao_Ji的博客
08-05 8084
本地操作HDFS不能上传文件问题 问题描述 在本地使用JavaAPI客户端进行Hadoop集群HDFS操作时，只能够新建文件目录、删除目录、新建文件等操作，当上传文件时出错，上传文件内容为空；在shell终端中能够正常的进行文件上传等操作。 问题原因 1.NameNode节点存放的是文件目录，也就是文件夹、文件名称，本地可以通过公网访问 NameNode，所以可以进行文件夹的创建，当上传文件需...
关于hdfs突然无法上传下载文件的解决方法（Couldn‘t upload the file）
zywenmag的博客
10-11 6919
关于hdfs上传文件报Couldn't upload the file的解决方案
解决hdfs中没有权限上传文件的问题
最新发布
m0_63602484的博客
05-22 232
（在/usr/local/hadoop/etc/hadoop目录下,找到hdfs-site.xml文件，打开之后将下述代码写入<configuration> </configuration>代码块中）（这里我是要将class1.txt文件上传到/user/hadoop目录下，所以需要给/user/hadoop赋予权限，777代表最高权限）
HDFS不能上传文件，但可以上传目录问题
weixin_47023868的博客
04-23 1401
1.现象 HDFS datanode节点掉线，重启namenode后出现可以从HDFS上下载文件，可以把0 byte大小的文件或者目录上传目录至HDFS集群，不能put文件到hdfs上。 2.报错输出 2016-08-02 13:05:03,271 WARN org.apache.hadoop.ipc.Server: IPC Server handler 13 on 8020, call org.apache.hadoop.hdfs.protocol.ClientProtocol.addBlock from
Hadoop通过WEB上传文件到HDFS失败
Shion's bla bla blog
12-15 1万+
没想到WEB也需要知道内部的主机名，不科学啊……
HDFS文件的上传
05-21
hdfs 文件的上传，hdfs fs -put /文件名
HDFS上传文件报错org.apache.hadoop.fs.ChecksumException: Checksum error: file:/hyk/data/hyk.txt
01-07
当从本地上传文件到HDFS中时报错 fs.FSInputChecker: Found checksum error: b[0, 69]=6d6f77656968616861686168616868616686168616861686861680a org.apache.hadoop.fs.ChecksumException: Checksum error: file:/hyk/data/hyk.txt [root@node01 data]# hadoop fs -put hyk.txt /hyk/test 20/02/18 12:54:39 INFO fs.FSInputChecker: Fo
上传文件到HDFS
10-30
上传文件到HDFS的java代码实现。已经测试了，可以直接运行。
本地文件上传到HDFS的demo代码
03-26
从本地上传文件到HDFS上的代码！使用hadoop的API操作，使本地文件的代码上传到HDFS上！！！
Python连接HDFS实现文件上传下载及Pandas转换文本文件到CSV操作
09-16
- 上传本地文件到HDFS：`client.copy_from_local('local_path', '/hdfs_path')` 3. **Pandas转换文本文件到CSV**： - 首先，安装Pandas库：`pip install pandas` - 使用`pd.read_table()`读取HDFS上的文本文件，...
本地的文件传到服务器上的hdfs_HDFS文件上传下载步骤
weixin_29345939的博客
12-23 1455
先来了解下分布式文件系统(Distributed FileSystem)，它是跨越多台计算机或者服务器来管理文件或目录等数据。换句话说，分布式文件系统是允许我们在一个集群的多个节点或机器上存储数据，并允许多个用户访问这些数据的文件系统。1.当客户端要向HDFS文件系统上传文件时，第一步通过分布式文件系统先与NameNode建立连接，上传自己的元数据。(a)通过调用客户端的对象Distribute...
hadoop的hdfs文件操作实现上传文件到hdfs
09-04
在代码的 `sendFile` 方法中，我们实现了将本地文件上传到 HDFS 的功能。首先，通过 `FileSystem.getLocal(conf)` 创建一个本地文件系统的实例，然后使用 `FileSystem.get(conf)` 获取 HDFS 文件系统的实例。接下来...
利用JAVA代码将本地文件传入HDFS中
yanzhenjinghong的博客
06-28 2259
先创建hdfs存储路径作为输出流，然后把本地文件存储路径作为输入流，利用copyBytes方法将本地文件上传到hdfs输出流的路径就大功告成了！在 C:\Windows\System32\drivers\etc 中修改hosts文件，将虚拟机的hostname和ip写在文件底部。2.在系统变量里配置HADOOP_HOME和JAVA_HOME，并配置PATH。首先要下载hadoop_lib包，然后在IDEA里面导入这个包。要一次性上传完这些文件，需要循环读取文件名字，代码如下。hdfs中存在文件，上传成功！
HDFS通过put参数上传文件失败
qq_39939537的博客
04-28 1252
直接看错误 错误分许：大概是datanode拒绝与namenode的通信，因为无法解析主机名。可是自己已经在hosts文件中配置了域名解析，不知道为什么还会报这个错误。 解决方案：在hdfs-site.xml文件中配置如下信息 <property> <name>dfs.namenode.datanode.registration.ip-hostname-check</name> <value>false</value> &
上传本地文件到hdfs
05-27
要将本地文件上传到HDFS，可以使用以下命令： ``` hdfs dfs -put /path/to/local/file /path/to/hdfs/directory ``` 其中，`/path/to/local/file` 是本地文件的路径，`/path/to/hdfs/directory` 是要上传到的HDFS...
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值