DataX使用委托方式访问华为云对象存储OBS

本文档介绍了如何通过DataX以ECS委托方式访问华为云对象存储OBS,详细步骤包括参考官方文档配置、在ECS上设置委托、在统一身份认证服务中创建具有OBS和KMS权限的委托,以及验证配置的正确性。
摘要由CSDN通过智能技术生成

1. 参考官方文档配置DataX访问OBS

DataX对接OBS_对象存储服务 OBS_最佳实践_大数据场景下使用OBS实现存算分离_对接大数据组件_华为云

2. 使用ECS的委托的方式

修改官方文档里的如下配置

"hadoopConfig": {##此部分hadoop配置必须添加
					"fs.obs.impl": "org.apache.hadoop.fs.obs.OBSFileSystem",
					"fs.obs.access.key": "可访问OBS的ak",
					"fs.obs.secret.key": "可访问OBS的sk",
					"fs.obs.endpoint": "OBS桶所在region"
				}

"hadoopConfig": {

    "fs.obs.impl": "org.apache.hadoop.fs.obs.OBSFileSystem",

    "fs.obs.security.provider": "com.obs.services.EcsObsCredentialsProvider",

    "fs.obs.endpoint": "OBS桶所在region"

}

3. 配置ECS委托

在ECS服务器的详情界面,找到

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值