Go语言按缓存读取下载HDFS大文件
1. 功能分析
HDFS Golang接口:https://github.com/vladimirvivien/gowfs
接口中已有Get函数,用于下载HDFS文件,我们可以使用如下代码进行下载操作
fs, err := gowfs.NewFileSystem(gowfs.Configuration{Addr: "localhost:50070", User: "root"})
shell := gowfs.FsShell{FileSystem:fs}
ok, err := shell.Get("
原创
2021-04-07 20:24:30 ·
1721 阅读 ·
1 评论