数据迁移服务参数说明

Aliyun OSS

Endpoint

OSS的Endpoint支持如下四种格式:

序号正确格式说明
1http://oss-cn-hangzhou.aliyuncs.com使用公网,以http方式上传/下载数据
2http://oss-cn-hangzhou-internal.aliyuncs.com使用内网,以http方式上传/下载数据
3https://oss-cn-hangzhou.aliyuncs.com使用公网,以https方式上传/下载数据
4https://oss-cn-hangzhou-internal.aliyuncs.com使用内网,以https方式上传/下载数据

当OSS作为数据源时,迁移服务会自动使用内网下载;其它数据源时,OSS会使用内网上传。以下格式均为非法

# 带存储空间名称
http://bucket.oss-cn-hangzhou.aliyuncs.com
# 带其它资源
http://oss-cn-hangzhou.aliyuncs.com/bucket
http://oss-cn-hangzhou.aliyuncs.com/bucket/object
# 带有其它限制条件
http://oss-cn-hangzhou.aliyuncs.com/
http://oss-cn-hangzhou.aliyuncs.com?
http://oss-cn-hangzhou.aliyuncs.com/?qs=
http://oss-cn-hangzhou.aliyuncs.com/?qs=val
# CDN域名、Cname等费OSS域名
http://d1.d2.d3.com
# 不携带指定协议
oss-cn-hangzhou.aliyuncs.com/

OSS的Endpoint详细列表,参见访问域名

Bucket

请填写正确的存储空间名称,前后不带空格、换行、制表符等非法字符。

Prefix

迁移指定“目录”下的文件,即指定前缀的文件,不包括文件名称为前缀的文件。请以 / 结尾,不要以 / 开头,如 docs/

AccessKeyId/SecretAccessKey

访问密钥,简称为AK/SK。迁移服务的AK/SK可以是主用户、子用户的密钥,不能是临时用户的密钥,上述概念的解释请参考访问控制。目前尚不支持服务费授权。
如果OSS做为迁移服务的数据源,子用户可以使用以下Policy授权:

{
  "Version": "1",
  "Statement": [
    {
      "Effect": "Allow",
      "Action": [
        "oss:GetObject",
        "oss:ListObjects"
      ],
      "Resource": [
        "acs:oss:*:*:mybucket"
      ],
      "Condition": {}
    }
  ]
}

如果OSS做为起迁移服务的目标,子用户可以使用以下Policy授权:

{
  "Version": "1",
  "Statement": [
    {
      "Effect": "Allow",
      "Action": [
        "oss:GetObject",
        "oss:PutObject",
        "oss:ListObjects",
        "oss:DeleteObject",
        "oss:AbortMultipartUpload"
      ],
      "Resource": [
        "acs:oss:*:*: mybucket"
      ],
      "Condition": {}
    }
  ]
}

你可以为迁移服务创建特定子用户,生成专用的AK/SK;迁移任务完成后相应的AK/SK。

迁移存储量/迁移文件个数

存储空间下的存储量和文件数可以通过OSS的控制台查看。

AWS S3

迁移服务尚不支持AWS S3的白名单访问。如果有白名单配置,请先暂时取消白名单或提工单

Endpoint

迁移服务支持以下区域及格式,其它的格式均不支持。协议支持HTTPS的域名还可以使用https。

RegionNameRegionEndpointProtocol
US East (Ohio)us-east-2 http://s3.us-east-2.amazonaws.com
http://s3-us-east-2.amazonaws.com
HTTP/HTTPS
US East (N. Virginia)us-east-1 http://s3.us-east-1.amazonaws.com
http://s3-us-east-1.amazonaws.com
HTTP/HTTPS
US West (N. California)us-west-1 http://s3.us-west-1.amazonaws.com
http://s3-us-west-1.amazonaws.com
HTTP/HTTPS
US West (Oregon)us-west-2 http://s3.us-west-2.amazonaws.com
http://s3-us-west-2.amazonaws.com
HTTP/HTTPS
Canada (Central)ca-central-1 http://s3.ca-central-1.amazonaws.com
http://s3-ca-central-1.amazonaws.com
HTTP/HTTPS
Asia Pacific (Seoul)ap-northeast-2 http://s3.ap-northeast-2.amazonaws.com
http://s3-ap-northeast-2.amazonaws.com
HTTP/HTTPS
Asia Pacific (Osaka-Local)ap-northeast-3 http://s3.ap-northeast-3.amazonaws.com
http://s3-ap-northeast-3.amazonaws.com
HTTP/HTTPS
Asia Pacific (Singapore)ap-southeast-1 http://s3.ap-southeast-1.amazonaws.com
http://s3-ap-southeast-1.amazonaws.com
HTTP/HTTPS
Asia Pacific (Sydney)ap-southeast-2 http://s3.ap-southeast-2.amazonaws.com
http://s3-ap-southeast-2.amazonaws.com
HTTP/HTTPS
Asia Pacific (Tokyo)ap-northeast-1 http://s3.ap-northeast-1.amazonaws.com
http://s3-ap-northeast-1.amazonaws.com
HTTP/HTTPS
China (Beijing)cn-north-1http://s3.cn-north-1.amazonaws.com.cnHTTP/HTTPS
China (Ningxia)cn-northwest-1http://s3.cn-northwest-1.amazonaws.com.cnHTTP/HTTPS
EU (Frankfurt)eu-central-1 http://s3.eu-central-1.amazonaws.com
http://s3-eu-central-1.amazonaws.com
HTTP/HTTPS
EU (Ireland)eu-west-1 http://s3.eu-west-1.amazonaws.com
http://s3-eu-west-1.amazonaws.com
HTTP/HTTPS
EU (London)eu-west-2 http://s3.eu-west-2.amazonaws.com
http://s3-eu-west-2.amazonaws.com
HTTP/HTTPS
EU (Paris)eu-west-3 http://s3.eu-west-3.amazonaws.com
http://s3-eu-west-3.amazonaws.com
HTTP/HTTPS
South America (São Paulo)sa-east-1 http://s3.sa-east-1.amazonaws.com
http://s3-sa-east-1.amazonaws.com
HTTP/HTTPS

Bucket

请填写正确的存储空间名称,前后不带空格、换行、制表符等非法字符。

Prefix

迁移指定“目录”下的文件,即指定前缀的文件,不包括文件名称为前缀的文件。请以 / 结尾,不要以 / 开头,如 docs/

AccessKeyId/SecretAccessKey

请在AWS控制台的IAM页面,创建用户并授予 AmazonS3ReadOnlyAccess 权限,然后再创建访问密钥。迁移完成后删除用户。

迁移存储量/迁移文件个数

请认真评估,确保与实际值相符。

Azure blob

存储账户/密钥/连接字符串

国际版,进入Azure的管理控制台,在路径 主页 > 存储帐户 > {存储帐户名称} > 访问密钥 中找到存储账户、密钥、连接字符串信息。如下图:

azure_blob

容器

容器即Azure中的container。

前缀

迁移指定“目录”下的文件,即指定前缀的文件,不包括文件名称为前缀的文件。请以 / 结尾,不要以 / 开头,如 docs/

迁移存储量/迁移文件个数

在路径 主页 > testbucket2018 - Blob > container - 属性计算大小 按钮可以
计算出容器大小。如下图:

azure_blob_2

Tencent cos

迁移服务支持V4版本的COS,采用V4版本的API访问COS。

所属地区

V4版本的COS可以地域如下表,所属地区请填写地域简称

地域地域简称说明
北京一区(华北)tj
北京bj
上海(华东)sh
广州(华南)gz
成都(西南)cd
新加坡sgp
香港hk
多伦多ca
法兰克福ger

Bucket

COS Bucket(存储桶)名称由 [自定义名称]-[开发商APPID] 构成。数据迁移服务的bucket配置项请填写自定义名称部分,比如 mingdi-1252883280,迁移服务的bucket项填 mingdi

Prefix

迁移指定目录下的文件,即指定前缀的文件。请以 / 开头,以 / 结尾,如 /docs/

APPID

请到控制台账号信息页面查看,如下图。

t_cos_1

SecretId/SecretKey

请从控制台 云产品 > 管理工具 > API密钥管理 进入访问控制页面,查看或新建密钥。推荐您为迁移服务新建密钥,迁移完成后删除。

迁移存储量/迁移存储量

请从控制台 云产品 > 存储 > 对象存储 进入对象存储页面,然后进入监控报表的基础数据统计页面,查看待迁移Bucket的存储量和
对象数量,如下图。

t_cos_2

七牛qiniu

Endpoint

七牛控制台进入对象存储页面,选择指定的存储空间后,在 融合CDN测试域名融合CDN加速域名 栏可以看到域名,如下图。

qiniu_0

Endpoint即http://域名,如

http://oy4jki81y.bkt.clouddn.com
http://78rets.com1.z0.glb.clouddn.com
http://cartoon.u.qiniudn.com

上面3个均为有效Endpoint,其它格式均无效。

Bucket

七牛对象存储的存储空间。

Prefix

迁移指定“目录”下的文件,即指定前缀的文件,不包括文件名称为前缀的文件。请以 / 结尾,不要以 / 开头,如 docs/

AccessKey/SecretKey

管理控制台 > 个人面板 > 密钥管理 页面可以看到AK/SK,即AccessKey/SecretKey。请使用状态为使用中的有效AK/SK。

迁移存储量/迁移文件个数

七牛控制台进入对象存储页面,选择指定的存储空间后,进入内容管理页面,可以看到文件数和存蔟量。如下图。

qiniu_1

Baidu bos

Endpoint

目前支持“华北-北京”、“华南-广州”和“华东-苏州”三个区域。迁移服务使用Endpoint如下表:

区域服务域名访问协议Endpoint
北京bj.bcebos.comhttp/httpshttp://bj.bcebos.com
广州gz.bcebos.comhttp/httpshttp://gz.bcebos.com
苏州su.bcebos.comhttp/httpshttp://su.bcebos.com

Bucket的区域请到控制台产品服务 / 对象存储BOS - Bucket管理 查看,如下图。

qiniu_0

Prefix

迁移指定“目录”下的文件,即指定前缀的文件,不包括文件名称为前缀的文件。请以 / 结尾,不要以 / 开头,如 docs/

AccessKeyID/SecretAccessKey

请到控制台安全认证 / Access Key 页面上查看,如下图。

qiniu_1

迁移存储量/迁移文件个数

控制台产品服务 / 对象存储BOS - Bucket管理 / Bucket概览 页面可以查看Bucket的存储量,文件个数请认真评估,尽量准确。

Http/https

列表地址

列表文件格式

列表文件有两列,第一列是http/https地址,地址中特殊字符请URL编码。迁移服务用该链接的Get请求下载文件内容,Head请求获取文件元数据;第二列是的文件名,迁移后的object name是prefix + 文件名,两列用制表符\t分割;每行之间换行\n分割。格式如下:

http://127.0.0.1/docs/my.doc    docs/my.doc
http://127.0.0.1/pics/my.jpg    pics/my.jpg
http://127.0.0.1/exes/my.exe    exes/my.exe
列表地址格式

迁移文件生成后,请上传到OSS。迁移服务会下载列表文件,并根据指定的地址迁移文件。列表地址的格式是 oss://{bucket}/{列表文件},示例如下:

oss://mybucket/httplist.txt

列表访问Endpoint

OSS的Endpoint支持如下四种格式:

序号正确格式说明
1http://oss-cn-hangzhou.aliyuncs.com使用公网,以http方式上传/下载数据
2http://oss-cn-hangzhou-internal.aliyuncs.com使用内网,以http方式上传/下载数据
3https://oss-cn-hangzhou.aliyuncs.com使用公网,以https方式上传/下载数据
4https://oss-cn-hangzhou-internal.aliyuncs.com使用内网,以https方式上传/下载数据

OSS的Endpoint详细列表,参见访问域名

列表访问AK/SK

迁移服务需要使用该AK/SK下载列表文件。该AK/SK可以是主账号的AK/SDK;也可以是子账号的AK/SK,需要授予GetObject权限。

迁移存储量/迁移文件个数

请认真评估,确保与实际值相符。

又拍youpai

地址

即对象存储SDK的接入点,REST API中的域名,如下表。如果您不能确定自己的网络类型,请使用 http://v0.api.upyun.com

网络类型地址说明
智能选路http://v0.api.upyun.com推荐
电信线路http://v1.api.upyun.com
联通(网通)线路http://v2.api.upyun.com
移动(铁通)线路http://v3.api.upyun.com

服务名称

请在控制台的云存储中查看。

迁移目录

迁移指定目录下的文件,请以 / 结尾,不要以 / 开头,如 docs/

操作员名/操作员密码

请在控制台的账号管理页面查看和添加操作员。添加您为迁移服务新建操作员,并授予 可读取 权限,如下图。

youpai_1

然后进入控制台的云存储页面,选择待迁移的服务名称,进入配置页面,选择内容管理,并授权操作员,如下图。

youpai_2

迁移存储量/迁移文件个数

请到控制台云存储的配置页面查看Bucket的存蔟量,文件个数请认真评估,尽量准确。

Kingsoft ks3

Endpoint

Region(区域)与Endpoint(域名)的对应关系如下,Bucket(存储空间)的Region请在控制台上的 存储与内容传输 > 对象存储 > 我的空间 > 空间详情 页面查看。

RegionEndpoint
中国(北京)ks3-cn-beijing.ksyun.com
中国(上海)ks3-cn-shanghai.ksyun.com
中国(香港)ks3-cn-hk-1.ksyun.com
中国(杭州)kss.ksyun.com
俄罗斯ks3-rus.ksyun.com
新加坡ks3-sgp.ksyun.com

Bucket

即金山云对象存储的空间。

Prefix

迁移指定“目录”下的文件,即指定前缀的文件,不包括文件名称为前缀的文件。请以 / 结尾,不要以 / 开头,如 docs/

AccessKey/SecretKey

请在控制台的身份与管理下的用户管理页面,创建用户并授予 KS3FullAccess 权限,然后在用户页面新建密钥。迁移完成后删除该用户。

迁移存储量/迁移文件个数

请到控制台存储与内容传输 > 对象存储 > 我的空间 > 空间详情 页面查看Bucket的存储量,文件个数请认真评估,尽量准确。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值