rgw分片上传对象组织形式

最新推荐文章于 2024-04-15 02:46:03 发布
最新推荐文章于 2024-04-15 02:46:03 发布
阅读量1.8k 收藏 1
点赞数
分类专栏： ceph
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_16327997/article/details/89635115
版权

定位rgw分片上传的对象

version:ceph13.2.4

确定分片上传的全部对象

利用s3cmd向mpbucket01上传了一个名为2.txt的对象(210M)

1.首先确定bucket的bucketindex

[root@sns-nvceph01 ~]# radosgw-admin bucket stats | grep mpbucket01 -A 50
        "bucket": "mpbucket01",
        "zonegroup": "9a4a7e5e-48c5-486c-8e80-ff2f384045ff",
        "placement_rule": "default-placement",
        "explicit_placement": {
            "data_pool": "",
            "data_extra_pool": "",
            "index_pool": ""
        },
        "id": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",#这是bucket.index的id
        "marker": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
        "index_type": "Normal",
        "owner": "client",
        "ver": "0#200",
        "master_ver": "0#0",
        "mtime": "2019-04-25 14:02:27.599200",
        "max_marker": "0#",
        "usage": {
            "rgw.main": {
                "size": 770683833,
                "size_actual": 770691072,
                "size_utilized": 770683833,
                "size_kb": 752621,
                "size_kb_actual": 752628,
                "size_kb_utilized": 752621,
                "num_objects": 10
            },
            "rgw.multimeta": {
                "size": 0,
                "size_actual": 0,
                "size_utilized": 0,
                "size_kb": 0,
                "size_kb_actual": 0,
                "size_kb_utilized": 0,
                "num_objects": 1
            }
        },
        "bucket_quota": {
            "enabled": false,
            "check_on_raw": false,
            "max_size": -1,
            "max_size_kb": 0,
            "max_objects": -1
        }
    }

------------

2.根据bucketindex的id拼属性对象的名字，查找uploadid

先找到含有manifest属性的对象

  保存整个对象的manifest的对象名字为：
  {bucketindexid}+_{objectname}
  对应的对象名字为:
  fa15df30-b48d-46a7-90bf-7b9212002005.4577.37_2.txt

获取manifest属性，利用dencoder可以解码出属性.用户上传的自定义属性（s3支持用户上传自定义属性）也会存放在对象的attr属性中.dencoder使用

[root@sns-nvceph01 tmp]# rados -p default.rgw.buckets.data listxattr fa15df30-b48d-46a7-90bf-7b9212002005.4577.37_2.txt
user.rgw.acl
user.rgw.content_type
user.rgw.etag
user.rgw.idtag
user.rgw.manifest
user.rgw.pg_ver
user.rgw.source_zone
user.rgw.tail_tag
user.rgw.x-amz-date
user.rgw.x-amz-meta-s3cmd-attrs
user.rgw.x-amz-storage-class

----------

rados -p default.rgw.buckets.data getxattr fa15df30-b48d-46a7-90bf-7b9212002005.4577.37_2.txt user.rgw.manifest > manifest.2.txt

----------

[root@sns-nvceph01 tmp]# ceph-dencoder import 'manifest.2.txt' type RGWObjManifest decode dump_json
{
  "objs": [],
  "obj_size": 220194451,
  "explicit_objs": "false",
  "head_size": 0,
  "max_head_size": 0,
  "prefix": "2.txt.2~c1vBz-e0_FGZehQmTHiaP1wuHSx-3oo",
  "rules": [
      {
          "key": 0,
          "val": {
              "start_part_num": 1,
              "start_ofs": 0,
              "part_size": 15728640,
              "stripe_max_size": 4194304,
              "override_prefix": ""
          }
      },
      {
          "key": 204472320,
          "val": {
              "start_part_num": 14,
              "start_ofs": 204472320,
              "part_size": 15722131,
              "stripe_max_size": 4194304,
              "override_prefix": ""
          }
      }
  ],
  "tail_instance": "",
  "tail_placement": {
      "bucket": {
          "name": "mpbucket01",
          "marker": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
          "bucket_id": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
          "tenant": "",
          "explicit_placement": {
              "data_pool": "",
              "data_extra_pool": "",
              "index_pool": ""
          }
      },
      "placement_rule": "default-placement"
  },
  "begin_iter": {
      "part_ofs": 0,
      "stripe_ofs": 0,
      "ofs": 0,
      "stripe_size": 4194304,
      "cur_part_id": 1,
      "cur_stripe": 0,
      "cur_override_prefix": "",
      "location": {
          "placement_rule": "default-placement",
          "obj": {
              "bucket": {
                  "name": "mpbucket01",
                  "marker": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
                  "bucket_id": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
                  "tenant": "",
                  "explicit_placement": {
                      "data_pool": "",
                      "data_extra_pool": "",
                      "index_pool": ""
                  }
              },
              "key": {
                  "name": "2.txt.2~c1vBz-e0_FGZehQmTHiaP1wuHSx-3oo.1",
                  "instance": "",
                  "ns": "multipart"
              }
          },
          "raw_obj": {
              "pool": "",
              "oid": "",
              "loc": ""
          },
          "is_raw": false
      }
  },
  "end_iter": {
      "part_ofs": 220194451,
      "stripe_ofs": 220194451,
      "ofs": 220194451,
      "stripe_size": 4194304,
      "cur_part_id": 15,
      "cur_stripe": 0,
      "cur_override_prefix": "",
      "location": {
          "placement_rule": "default-placement",
          "obj": {
              "bucket": {
                  "name": "mpbucket01",
                  "marker": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
                  "bucket_id": "fa15df30-b48d-46a7-90bf-7b9212002005.4577.37",
                  "tenant": "",
                  "explicit_placement": {
                      "data_pool": "",
                      "data_extra_pool": "",
                      "index_pool": ""
                  }
              },
              "key": {
                  "name": "2.txt.2~c1vBz-e0_FGZehQmTHiaP1wuHSx-3oo.15",
                  "instance": "",
                  "ns": "multipart"
              }
          },
          "raw_obj": {
              "pool": "",
              "oid": "",
              "loc": ""
          },
          "is_raw": false
      }
  }
}

查找到uploadid为2~c1vBz-e0_FGZehQmTHiaP1wuHSx-3oo
分片数为14

3.查找所有multipart和shadow文件

multipart:
{bucketindexid}+__multipart_+{objectname}+.+{uploadid}+.+{partnumber}
fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_2.txt.2~c1vBz-e0_FGZehQmTHiaP1wuHSx-3oo.2
shadow:
{bucketindexid}+__shadow_+{objectname}+.+{uploadid}+.+{partnumber}+_+{shardnum}
fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_2.txt.2~c1vBz-e0_FGZehQmTHiaP1wuHSx-3oo.2_1

multipart对象有14个，每个multipart对象有3个shadow对象
14 = 210/15（s3cmd切分对象的大小）
每个上传分片15m，由一个multipart对象（4M)+3个shadow对象（大小分别为4M，4M，3M）组成.

注意

如果分片上传失败，或者中途取消了分片上传，会有一些遗留下来的中间数据，需要手动进行删除.
1.bucket.index中的omap

形如:

[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.index listomapkeys .dir.fa15df30-b48d-46a7-90bf-7b9212002005.4577.37
1.txt ##这是上传成功的数据
2.txt
3.txt
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.1 ##这种数据就是临时omap数据,上传失败或者取消了会存留下来
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.2
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.3
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.4
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.5
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.6
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.7
_multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.meta
_multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1
_multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.2
_multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.3
_multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.4
_multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.meta

2.data_extra_pool(本例中为default.rgw.buckets.non-ec)

[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.non-ec ls
fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_12.txt.2~i9SNyI-A6Ry3G3aiMtPMjSKlgMh_Au-.meta
fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.meta
fa15df30-b48d-46a7-90bf-7b9212002005.80357.90__multipart_111.txt.2~_B94dfuXmOtkYHERcwRlZKHTPYBH5Ni.meta

3.multipart对象

以33.txt为例子，通过观察可以发现33.txt已经上传了4个分片

[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat 'fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.3'
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.3 mtime 2019-04-26 16:56:41.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat 'fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1'
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1 mtime 2019-04-26 16:56:40.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat 'fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.2'
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.2 mtime 2019-04-26 16:56:40.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat 'fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.3'
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.3 mtime 2019-04-26 16:56:41.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat 'fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.4'
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.4 mtime 2019-04-26 16:56:41.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat 'fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.5'
 error stat-ing default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__multipart_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.5: (2) No such file or directory

4.shadow对象
现在rgw单个分片大小为15M，可以由4个rados对象组成（4M），所以一个rgw分片由一个manifest和3shadow组成

[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_1
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_1 mtime 2019-04-26 16:56:40.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_2
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_2 mtime 2019-04-26 16:56:40.000000, size 4194304
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_3
default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_3 mtime 2019-04-26 16:56:40.000000, size 3145728
[root@sns-nvceph01 ~]# rados -p default.rgw.buckets.data stat fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_4
 error stat-ing default.rgw.buckets.data/fa15df30-b48d-46a7-90bf-7b9212002005.4577.37__shadow_33.txt.2~kNo4Tec-tNo4-aqdCdsd_D9MsGy2zj3.1_4: (2) No such file or directory

如果上传失败需要把这些失效对象删除

pyrl
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
rgw分片上传/下载分析
pyrl的博客
04-29 1716
rgw分片上传/下载分析 上传 1.客户端发送httppost请求，请求uploadid. 2.客户端收到uploadid后，按照上传不同的分片，url需要带上uploadid和分片数（partnumber）. 3.全部分片上传完成后发送http-post请求，标记上传完成. 1.请求上传 [root@sns-nvceph01 ~]# s3cmd put 111.txt s3://mpbuc...
Ceph RGW：分段上传和整体上传元数据详解
easonwx的博客
07-04 1527
Ceph的对象存储兼容s3协议，支持对象的整体上传和分段上传功能，详细可参考网上资料。本文主要是基于具体实践，观察整体上传和分段上传的差异。查询配置，其中rgw_max_chunk_size=2M，rgw_obj_stripe_size=8M。 创建一个bucket，名字为testbucket0 分段上传分析 创建一个100M的文件file_100M.bin，上传至testbucket0中，分段size为30M 获取testbucket0的id 查询manifest对象 bucketid = e839
Ceph优化系列（二）：Ceph主要配置参数详解_ceph参数，十位互联网一线高工手写软件测试高级知识
最新发布
2401_84247505的博客
04-15 893
filestore_commit_timeout = 3000 默认值 600 s FileStore::sync_entry() 里 new SyncEntryTimeout(m_filestore_commit_timeout)这样能很好的减少PG scrub时候占用PG lock的时间，避免过多影响PG正常的IO；filestore的fd cache是加速访问filestore里的file的，在非一次性写入的应用场景，增大配置可以很明显的提升filestore的性能；
ceph RGW Multipart 上传文件过程
qq_37517281的博客
09-21 1984
REST 请求的处理 init 用户，认证，权限，桶等参数 init 操作类型相关的初始化 检查权限 检查参数 返回头上加上操作的 bucket execute complete 返回 io 的完成状态 记录日志 POST （生成 multipart 的总对象） 检查参数和操作内部权限（user_policies） 为桶的 event_type 类型的 topic 预留用于 notification 的空间 分配操作上下文，放在 ObjectWriteOperation 中 （2pc_queue_rese
ceph rgw判断对象是否是分片对象的方法
YLX
11-18 202
ceph rgw判断对象是否是分片对象的方法 查看对象的etag 如果etag长度超过32位，且后缀为 -8 或者 #8字样（rgw版本不同有一定区别），则为分片的对象，数字8则为分片数量 注：分片最小大小为5mib
Ceph运维笔记
weixin_42340926的博客
01-11 648
查看ceph 读写i/o最好不要通过iostat查看 因为有可能会将内容写到缓存中，从而无法获得对于的真正读写i/o 可以通过ceph dashboard来查看，也可以通过ceph -s来查看 动态获取脚本： #!/bin/bash LANG=C PATH=/sbin:/usr/sbin:/bin:/usr/bin interval=1 length=86400 for i in $(seq 1 $(expr ${length} / ${interval}));do date=`date` echo -..
RGW 的GC深入解析与调优
06-20
GC 是以 thread 方式在 RGW 服务启动时候进行启动，对应的启动调用流程如下。每个 GC worker 启动的时候都会有一个数字 ID 标识，这个 ID 其实就是对应到 gc pool 里面的 Object 的 ID 名称，GC 的任务列表就存储在...
CEPH的对象存储RGW更新配额的源码跟踪
06-29
利用visio软件编写的CEPH的对象存储RGW更新配额的源码跟踪，从删除和上传的动作一直跟踪到具体更新配的代码位置
ceph rgw应用手册
03-14
ceph rgw应用部署手册，红帽官方出品，上手必备。
rgw nfs基于nfs-ganesha的实现
10-17
rgw nfs基于nfs-ganesha的实现总结
Ceph对象存储底层对象分布揭秘.docx
10-12
上传完成后，会生成一个内容为空的首部 Rados 对象，用于存储 RGW 对象的属性信，其中包含分段及分片信息。 Ceph 对象存储在 RGW 组件下提供了一套兼容 S3 及 Swift 协议的 API，提供了整体上传和分段上传两种文件...
Ceph RGW中各Pool的作用
chitun9294的博客
06-15 2052
Ceph RGW中各Pool的作用 1.引言 在使用Ceph的radosgw服务时，会通过create pool命令创建一系列的pool，服务于radosgw.我想在本文中分析出各个pool的作用。 2.pool信息罗列 POOLS: NAME ...
Ceph对象存储使用
梵修
05-07 1513
对象存储是无层次结构的数据存储方法，一般用于云计算环境。数据作为单独的对象进行存储数据并不存放在目录层次结构中，而是存在于平面地址结构的同一级别空间中应用通过唯一的地址来访问单个数据对象每个对象可以包含有助于数据检索的元数据对象是对象存储系统中数据存储的基本单位，每个对象是数据和数据属性集的综合体。数据属性可以根据应用需求而设置，包括数据分布、服务质量等。每个对象自我维护其属性，减轻了存储系统的管理任务对象的大小可以不同，甚至可以包括整个数据结构，比如：文件、数据库表项等。
对象存储
qq_42747099的博客
02-20 1520
对象存储介绍 简介 作为文件系统的磁盘，操作系统不能直接访问对象存储。相反，它只能通过应用程序级别的API访问。ceph是一种分布式对象存储系统，通过ceph对象网关提供对象存储接口，也称为RADOS网关（RGW）接口，它构建在ceph RADOS层之上。RGW使用librgw（RADOS Gateway library）和librados，允许应用程序与ceph对象存储建立连接。RGW为应用程序提供了一个RESTful S3/swift兼容的接口，用于在ceph集群中以对象的形式存储数据。ceph还支持多
rgw object read and write
weixin_33701294的博客
04-12 464
2019独角兽企业重金招聘Python工程师标准>>> ...
桶策略
QTM_Gitee的博客
10-07 847
Ceph对象网关支持应用于桶的Amazon S3策略语言的子集。 创建和删除 桶策略是通过标准S3操作而不是radosgw-admin管理的。 例如，可以使用s3cmd设置或删除策略，因此： $ cat > examplepol { "Version": "2012-10-17", "Statement": [{ "Effect": "Allow", "Principal": {"AWS": ["arn:aws:iam::usfolks:user/fred:subuser"]}
ceph关于multipart读取数据的总结
zrs19800702的博客
11-08 1913
ceph关于multipart读取数据的总结
Ceph RGW远程同步（multisite）配置
for_tech的博客
03-31 5286
ceph rgw的远程同步(multisite)配置
ceph系列二、数据布局
effort6的博客
05-22 1247
1、RGW中三种数据类型 data metadata bucket.index 2、metadata user：保存user信息 bucket：维护bucket name和bucket instance id的映射 bucket.instance：保存bucket instance信息 1.获取元数据列表 # radosgw-admin metadata list [ "bucket", "bucket.instance", "user" ] 2.获取指定类
ceph rgw对象存储
09-19
Ceph RGW（Rados Gateway）是Ceph存储系统中提供对象存储服务的组件。它允许用户通过HTTP协议以对象的形式存储和检索数据。 Ceph RGW是一个分布式的、高可用的存储解决方案，它将数据分散保存在多个物理节点上，提供了可靠的数据冗余和容错能力。通过数据的分散，RGW能够实现高并发的访问和高吞吐量的数据传输，从而满足大规模的存储需求。 在Ceph RGW中，数据以对象的形式存储，每个对象都有一个唯一的标识符和元数据信息，可以通过它们进行快速的检索和访问。对象可以以任意格式存储，如文本、图片、视频等。通过提供RESTful风格的API，RGW使得开发者能够方便地访问和操作存储在其中的对象。 RGW支持多租户的机制，可以为不同的用户或应用程序提供独立的存储空间和访问权限。它还提供了访问控制机制，可以通过身份验证、访问策略等方式，限制对象的访问权限，并保证数据的安全性。 另外，Ceph RGW还具有自动化的数据迁移和负载均衡功能，可以根据数据的访问模式和负载情况，自动调整数据的存储位置和副本数量，以实现最佳的性能和可用性。 综上所述，Ceph RGW是一款功能强大、可靠性高的对象存储服务，适用于大规模存储和分发数据的场景。它提供了高并发、高吞吐量的数据访问和传输能力，以及安全性、可扩展性等方面的优势，成为当今对象存储领域的一种重要解决方案。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值