DSS中linkis使用hadoop3.1.1版本,Python出现 hadoop 3 +的版本会报如下错:No FileSystem for scheme "hdfs"这个问题。
解决:下载hadoop-hdfs-client.jarcopy 到那个 enginemanager里面和public service 的lib 目录下,重启服务。
(这个是因为hadoop版本从2升级到3后,hdfsclient的包有做改变,在2的版本为hadoop-hdfs,到3后改为hadoop-hdfs-client开头,拷贝到对应的目录即可。另外hadoop3还需要在core-site.xml里面配置:fs.hdfs.impl=org.apache.hadoop.hdfs.DistributedFileSystem)
。
安装部署DataSphere Studio时出现的问题
最新推荐文章于 2024-08-08 07:06:01 发布