s3、s3a、s3n
s3://bucket/
s3a://bucket/
s3n://bucket/
URI 上字母的改变(-,a,n)带来的差距是很大的,因为不同的 url 会使用不同的软件与 S3 进行连接。这有点像 http 和 https 之间的区别——虽然只是一个字母的改变,但是它在行为上引起了很大的差异。
s3基于块, s3n / s3a 基于对象
s3 和 s3n / s3a 的区别在于 s3 是基于块的覆盖,它存在与Amazon s3 的顶部,而 s3n/s3a 是基于对象的。
s3a 是 s3n 的升级版
s3n 和 s3a 的区别在于 s3n 支持 5GB 以下的对象,s3a 支持 5TB 以下的对象,并且 s3a 具有更高的性能(是因为 s3n 使用多路上传)。 s3a 是 s3n 的升级版!
详情请阅读…
如果你是想了解应该在Amazon EMR中使用哪个S3文件系统,那么请阅读这篇文章(仅在wayback machine上可用)。 net 是:使用 s3:// ,因为 s3:// 和 s3n:// 在EMR上下文中在功能上是可互换的,而 s3a:// 与 EMR 不兼容。
附带 Amazon 详细文档 存储和文件系统。