关于hadoop putMerge 出错“wrong FS”问题

最新推荐文章于 2021-01-15 09:21:41 发布
最新推荐文章于 2021-01-15 09:21:41 发布
阅读量725 收藏
点赞数
分类专栏： hadoop 文章标签： putMerge 报错 path wrong fs hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhifengsun/article/details/29359455
版权

在Eclipse中直接提供上传的文件所在目录路径和目的文件路径名。

出错语句——获得FileSystem对象：

   Configuration conf = new Configuration;

    FileSystem hdfs = FileSystem.get(conf);  


修改语句——通过Path获得Hdfs：

    Configuration conf = new Configuration;

    FileSystem hdfs = new Path(arg[1]).getFileSystem(conf);//arg[1]为HDFS中的目的文件路径名

迈克尔摩峰
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hadoop学习笔记（四）Wrong FS报错
ptrdu的专栏
05-04 1402
Wrong FS  expected: file:/// 问题  对于一个简单的hadoop api调用问题，经常出现以下报错： Configuration conf = new  Configuration（）； FileSystem fs = FileSystem.get(conf); fs.copyFromLocalFile(new Path(“/home/ptrdu/inp
Hadoop fs命令详解.docx
08-19
Hadoop fs命令详解 Hadoop fs命令是Hadoop分布式文件系统（HDFS）的命令行接口，提供了丰富的文件操作命令，方便用户管理和维护HDFS文件系统。本文将详细介绍Hadoop fs命令的使用方法和实践操作。 基本命令 ...
Hadoop(1)：权限问题以及Wrong FS错误
Make My First Step
02-23 7467
记录一些问题。首先是权限的问题。在Eclipse下开发时候会遇到Permission Denied的状况。该权限即可(貌似不太安全，我看到有人是修改的配置文件，等我和大牛们讨论了再说) 1、权限的改法，以我的为例 ./hadoop fs -chmod -R 777 ~/hadoop/hadoop 2、关于使用java api上传文件。 在定义一个FileSystem变量的时候伪分
Wrong FS: hdfs://xxx/xxx expected: file:///
weixin_30535913的博客
04-08 316
Eclipse调用HDFS API上传文件时出现了如下错误： Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://master:9000/user/Administrator, expected: file:/// at org.apache.hadoop.fs.FileSy...
Wrong FS: hdfs://hadoop20:9000/word.txt, expected: file:///－－－异常解决方案
什么最重要？算法！！
07-01 4251
今天搭建了一个hadoop2.0(yarn集群平台)，首先在上面测试了一个FileSystem实例程序，代码如下：package IT0701;import java.io.IOException; import java.net.URISyntaxException;import org.apache.commons.compress.utils.IOUtils; import org.apach
Wrong FS: hdfs:, expected:file:///
yxdayd的专栏
10-24 5550
这是在对hdfs进行写入操作时发现的错误，最终解决了，给大家分享一下，希望对遇到同样问题的朋友
关于启动/配置hadoop时出现的问题
01-07
1.在启动 hadoop 时提示 “Could not resolve hostname” 首先应该立即停止启动（ctrl+c），之后打开~./bashrc，在这里面添加如下代码： export HADOOP_HOME=/usr/local/hadoop export HADOOP_COMMON_LIB_NATIVE_...
flink-hadoop-fs-1.12.7-API文档-中文版.zip
07-13
赠送jar包：flink-hadoop-fs-1.12.7.jar； 赠送原API文档：flink-hadoop-fs-1.12.7-javadoc.jar； 赠送源代码：flink-hadoop-fs-1.12.7-sources.jar； 赠送Maven依赖信息文件：flink-hadoop-fs-1.12.7.pom； 包含...
flink-hadoop-fs-1.14.3-API文档-中英对照版.zip
06-06
赠送jar包：flink-hadoop-fs-1.14.3.jar； 赠送原API文档：flink-hadoop-fs-1.14.3-javadoc.jar； 赠送源代码：flink-hadoop-fs-1.14.3-sources.jar； 赠送Maven依赖信息文件：flink-hadoop-fs-1.14.3.pom； 包含...
关于Hadoop集群配置当中的缺少文件
09-12
关于配置hadoop集群中利用jps查询相关进程的时候缺少文件节点解决方法。
hive SQL 查询报错Wrong FS
BertramLAU的专栏
01-15 536
错误信息 Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: Unable to determine if hdfs://master01.cdh:8020/user/hive/warehouse/acccore.db/t_sy_banks is encrypted: java.lang.IllegalArgumentException: Wrong FS: hdfs://master01.cdh:8020/user/hive/wareh
关于java.lang.IllegalArgumentException: Wrong FS: hdfs://master:9000/input/test2.txt, expected: file:/
叙话代码
03-25 2159
关于java.lang.IllegalArgumentException: Wrong FS: hdfs://master:9000/input/test2.txt, expected: file:///的错误 解决办法： conf.set("fs.defaultFS", "hdfs://192.168.XXX.XXX:9000");
hadoop报错Wrong FS: hdfs:/, expected: file:///
yangbosos的博客
04-04 4878
在hadoop-2.2.0版本中对hdfs进行简单的测试操作，代码如下所示 Configuration conf = new Configuration(); try { FileSystem fs = FileSystem.get(conf); Path f = new Path("hdfs:///...
Windows下 haoop下运行程序时出现错误：Hadoop HDFS Wrong FS: hdfs:/ expected file:///
王小明的专栏
08-22 2289
Windows下 haoop下运行程序时出现错误：Hadoop HDFS Wrong FS: hdfs:/ expected file:/// 贡献博客一篇：点击打开链接 很多坑，暂且记录 先看解决办法： 无非是两种方式： 1. 在 eclipse 工程 src 问价夹下加入三个文件 1)hdfs-site.xml 2)core-site.xml 3)m...
Wrong FS: hdfs://localhost:9000/home/hadoop/hadoop, expected: file:///
靖远CserRise的专栏
05-05 1036
查了很久，这位大神解决了问题：致谢http://blog.csdn.net/kurama_sai/article/details/8604640
java.lang.IllegalArgumentException: Wrong FS错误解决
lies_joker的专栏
01-14 2618
[size=large]在nutch爬取数据存放在hdfs时候报错： Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://192.168.130.54:19000/user/hmail/output/part-00000, expected: file:/// 把hadoop集群的配置...
Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://node1:9000/input/pia
wangxj_2017的博客
09-30 7904
在Windows本地开发时遇到这样的问题： Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://node1:9000/input/piao.txt, expected: file:/// at org.apache.hadoop.fs.FileSystem.checkPath(FileS
[初学hadoop]错误信息：hdfs://192.168.0.16:9000/report.bak, expected: file:///
menghuannvxia的专栏
03-24 2831
在本地运行hadoop Map/Reduce程序时，在涉及到hdfs文件操作的时候，往往会出现上面提到的错误，例如，下面这段代码： 1 Path clear_path = new Path(args[1]); 2 FileSystem fs = FileSystem.get(conf); 3 fs.delete(clear_path);   通过试验发现，在分布式ha
hadoop运行报错Wrong FS: hdfs:/, expected: file:///
aabb7654321的博客
04-12 362
内容源自：https://blog.csdn.net/u014470581/article/details/51480600 报错信息： Exception in thread "main" java.lang.reflect.InvocationTargetException at sun.reflect.NativeMethodAccessorImp...
hadoop fs -fs /
最新发布
06-07
当你看到命令 `hadoop fs -fs /`，这是在使用 Hadoop 的命令行工具（hadoop fs）来连接到 HDFS 文件系统。`-fs` 参数是用于指定 HDFS 的名称节点（NameNode），`/` 表示根目录。 具体来说，这个命令的作用通常是： ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值