![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
JZ_CHIA
这个作者很懒,什么都没留下…
展开
-
读取minio文件
需引入以下jar <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-aws</artifactId> <version>2.7.7</version> </dependency> //配置configuration p.原创 2021-10-19 18:16:42 · 1492 阅读 · 0 评论 -
hdfs集群之间拷贝数据
distcp # 不同版本的hdfs之间拷贝,有master1拷贝到master2 hadoop distcp hftp://master1:50070:/data/1 hdfs:master:9000:/data原创 2019-11-07 10:53:58 · 531 阅读 · 0 评论 -
Hadoop Shell命令
Hadoop Shell命令 FS Shell 调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统,scheme是hdfs,对本地文件系统,scheme是file。其中scheme和authority参数都是可选的,如果未加指定,就会使用配...原创 2018-11-20 18:49:02 · 127 阅读 · 0 评论