Cluster02 - 集群LVS简介 LVS-NAT集群 LVS-DR集群

最新推荐文章于 2024-08-09 15:28:14 发布
最新推荐文章于 2024-08-09 15:28:14 发布
阅读量10w+ 收藏 2
点赞数 1
分类专栏： linux运维工程师 文章标签： CLUSTER
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/guhong888/article/details/82347227
版权

一、集群及LVS简介

1.1 集群简介

1.1.1 什么是集群

•  将很多服务器集中起来一起,提供同一种服务,在客
户端看来就象是只有一个服务器
•  可以在付出较低成本的情况下获得在性能、可靠性、
灵活性方面的相对较高的收益

•  一组通过高速网络互联的计算组,并以单一系统的模
式加以管理
•  任务调度是集群系统中的核心技术

1.1.2 集群目的

•  提高性能
–  如计算密集型应用,如:天气预报、核试验模拟
•  降低成本
–  相对百万美元级的超级计算机,价格便宜
•  提高可扩展性
–  只要增加集群节点即可
•  增强可靠性
–  多个节点完成相同功能,避免单点失败

1.1.3 集群分类

•  高性能计算集群HPC
–  通过以集群开发的并行应用程序,解决复杂的科学问题
•  负载均衡(LB)集群
–  客户端负载在计算机集群中尽可能平均分摊
•  高可用(HA)集群
–  避免单点故障,当一个系统发生故障时,可以快速迁移

二、LVS概述

2.1 LVS集群组成

•  前端:负载均衡层
–  由一台或多台负载调度器构成
•  中间:服务器群组层
–  由一组实际运行应用服务的服务器组成
•  底端:数据共享存储层
–  提供共享存储空间的存储区域

2.2 LVS术语

•  Director Server:调度服务器
–  将负载分发到Real Server的服务器
•  Real Server:真实服务器
–  真正提供应用服务的服务器
•  VIP:虚拟IP地址
–  公布给用户访问的虚拟IP地址
•  RIP:真实IP地址
–  集群节点上使用的IP地址
•  DIP:调度器连接节点服务器的IP地址

2.3 LVS工作模式

•  VS/NAT
–  通过网络地址转换实现的虚拟服务器
–  大并发访问时,调度器的性能成为瓶颈
•  VS/DR
–  直接使用路由技术实现虚拟服务器
–  节点服务器需要配置VIP,注意MAC地址广播
•  VS/TUN
–  通过隧道方式实现虚拟服务器

2.4 负载均衡调度算法

•  LVS目前实现了10种调度算法
•  常用调度算法有5种
–  轮询(Round Robin)

       –  将客户端请求平均分发到Real Server
–  加权轮询(Weighted Round Robin)

       –  根据Real Server权重值进行轮询调度
–  最少连接(Least Connections)

       –  选择连接数最少的服务器
–  加权最少连接( Weighted Least Connections )

      –  根据Real Server权重值,选择连接数最少的服务器

–  源地址散列(Source Hashing)
      –  根据请求的目标IP地址,作为散列键(Hash Key)从静态分配
的散列表找出对应的服务器

 •  其他调度算法
–  基于局部性的最少链接
–  带复制的基于局部性最少链接
–  目标地址散列(Destination Hashing)
–  最短的期望的延迟
–  最少队列调度

二、LVS-NAT集群

2.1 ipvsadm简介

•  LVS的IP负载均衡技术是通过IPVS模块实现的
•  IPVS模块已成为Linux组成部分

[root@svr1    ~]#    grep    -i    ‘ipvs’    /boot/config-3.10.0-327.el7.x86_64    

    IPVS    transport    protocol    load    balancing    support    

    IPVS    scheduler    

    IPVS    SH    scheduler    

    IPVS    applicaLon    helper

2.2 安装ipvsadm

•  使用yum命令安装ipvsadm

[root@node1 ~]# yum -y install ipvsadm.x86_64 

•  查看ipvsadm软件版本

[root@node4 ~]# ipvsadm -v
ipvsadm v1.27 2008/5/15 (compiled with popt and IPVS v1.2.1)

2.3 ipvsadm用法

2.3.1 创建虚拟服务器

–  -A –add-service 添加虚拟服务器
–  -t  –tcp-service  设置群集地址(VIP,Virtual IP)
–  -s  –scheduler    指定负载调度算法
[root@svr1    ~]#    ipvsadm        -A        -t            172.16.16.172:80    -s    rr

2.3.2 添加、删除服务器节点

–  -a  –add-server     添加真实服务器
–  -d  –delete-server 删除真实服务器
–  -r   –real-server     指定真实服务器(Real Server)的地址
–  -m –masquerading  使用NAT模式;-g、-i分别对应DR、TUN模式
–  -w –weight 为节点服务器设置权重,默认为1

    [root@svr1    ~]#    ipvsadm    -a    -t    172.16.16.172:80       -r    192.168.7.21:80    -m    
    [root@svr1    ~]#    ipvsadm    -d    -r    192.168.7.24:80        -t    172.16.16.172:80   -m

2.3.3 查看IPVS

[root@svr1    ~]#    ipvsadm    -Ln    
TCP        172.16.16.172:80    rr    
        ->    192.168.7.21:80                                                        Masq                1                        2                                        7     
        ->    192.168.7.24:80                                                        Masq                1                        4                                        6    

2.4 部署LVS-NAT集群

2.4.1 LVS-NAT集群拓扑

2.4.2 操作流程

•  Real Server:
–  配置WEB服务器   【ip为192.168.10.11、192.168.10.12 两台web服务器网关配为192.168.10.254。如果不配网关，数据包就传不到客户端】
•  Director Server:
–  在上安装并启用ipvsadm
–  创建虚拟服务器
–  向虚拟服务器中加入节点
•  Client:
–  连接虚拟服务器测试

2.4.3 部署LVS调度器

1.在lvs上打开ip_forward
[root@lvs    ~]#    vim    /etc/sysctl.conf    
net.ipv4.ip_forward    =    1    
[root@svr1    ~]#    sysctl    -p             //重新加载配置，这个文件是/proc/sys目录下的映射
2.启动ipvsadm
[root@svr1    ~]#    systemctl    start    ipvsadm    
[root@svr1    ~]#    systemctl    enable    ipvsadm

3.创建虚拟服务器,VIP为10.10.10.1,采用的调度算法为Round Robin
[root@svr1    ~]#    ipvsadm    -A    -t    10.10.10.1:80    -s    rr    
4.向虚拟服务器中加入节点,并指定权重分别为1和2   [这个时候指定权重不会生效，因为调度算法是round robin]
[root@svr1    ~]#    ipvsadm    -a    -t    10.10.10.1:80    -r    192.168.10.11    -m    -w    1    
[root@svr1    ~]#    ipvsadm    -a    -t    10.10.10.1:80    -r    192.168.10.12    -m    -w    2

4.查看配置
[root@svr1    ~]#    ipvsadm    -L    -n        //注意:这两个选项不写反
5.保存配置
[root@svr1    ~]#    ipvsadm-save    >    /etc/sysconfig/ipvsadm    
6.修改Director调度算法为WRR
[root@svr1    ~]#    ipvsadm    -E    -t    10.10.10.1:80    -s    wrr    

2.4.4 Client端验证

•  通过web浏览器访问
•  使用ab进行大并发测试
[root@client    ~]#    ab    -c    10    -n    1000    hhp://10.10.10.1/index.html    //模拟10个人访问1000次10.10.10.1主页
•  在Director上查看连接数
[root@svr1    ~]#    ipvsadm    -L    -n    

三、LVS-DR集群

3.1 LVS-DR集群拓扑

3.2 操作流程

•  Real Server:
–  配置WEB服务器
–  配置辅助IP地址、调整内核参数
•  Director Server:
–  在上安装并启用ipvsadm
–  配置辅助IP地址
–  创建虚拟服务器、向虚拟服务器中加入节点
•  Client:
–  连接虚拟服务器测试

3.3 ARP广播的问题

•  当客户端发起访问VIP 对应的域名的请求时,根据网
络通信原理会产生ARP 广播
•  因为负载均衡器和真实的服务器在同一网络并且VIP
设置在集群中的每个节点上
•  此时集群内的真实服务器会尝试回答来自客户端的
ARP广播,这就会产生问题,大家都说我是”VIP”     //ifup通过nmcli con up uuid ${uuid}来启用对应的网卡设备

3.4 内核参数说明

arp_ignore参数的作用是控制系统在收到外部的arp请求时，是否要返回arp响应。
0：响应任意网卡上接收到的对本机IP地址的arp请求（包括环回网卡上的地址），而不管该目的IP是否在接收网卡上。
1：只响应目的IP地址为接收网卡上的本地地址的arp请求。

arp_announce的作用是控制系统在对外发送arp请求时，如何选择arp请求数据包的源IP地址。
arp_announce参数常用的取值有0，1，2。
0：允许使用任意网卡上的IP地址作为arp请求的源IP。
1：尽量避免使用不属于该发送网卡子网的本地地址作为发送arp请求的源IP地址。
2：忽略IP数据包的源IP地址，选择该发送网卡上最合适的本地地址作为arp请求的源IP地址。

3.5 部署LVS-DR集群

3.5.1 配置后端Web服务器

1.在node2/node3的lo上配置VIP  【192.168.4.100/32 】
[root@node2 ~]# cp /etc/sysconfig/network-scripts/ifcfg-lo{,:0}  //在lo网卡上配置多个IP
[root@node2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.4.100
NETMASK=255.255.255.255
NETWORK=192.168.4.100
BROADCAST=192.168.4.100
ONBOOT=yes
NAME=lo:0 

2.在node2/node3上修改内核参数
[root@node2 ~]# sysctl -a | grep arp_ig   //查看运行时参数
[root@node2 ~]# echo “net.ipv4.conf.all.arp_ignore = 1” >> /etc/sysctl.conf 
[root@node2 ~]# echo “net.ipv4.conf.lo.arp_ignore = 1” >> /etc/sysctl.conf 
[root@node2 ~]# echo “net.ipv4.conf.all.arp_announce = 2” >> /etc/sysctl.conf
[root@node2 ~]# echo “net.ipv4.conf.lo.arp_announce = 2” >> /etc/sysctl.conf
[root@node2 ~]# sysctl -p    //重新加载运行时参数

3.5.2 部署LVS调度器

1.新建node1 （代理服务器） 192.168.4.4/24
2.在node1 的eth0上配置vip 192.168.4.100/24
[root@node1 ~]# cp /etc/sysconfig/network-scripts/ifcfg-eth0{,:0}
[root@node1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0:0
TYPE=Ethernet
BOOTPROTO=none
NAME=eth0:0
DEVICE=eth0:0
ONBOOT=yes
IPADDR=192.168.4.100
PREFIX=24
[root@node1 ~]# ifup eth0:0    //激活eth0:0网卡

3.在node1上配置lvs规则
[root@node1 ~]# yum install -y ipvsadm
[root@node1 ~]# ipvsadm -A -t 192.168.4.100:80 -s lc
[root@node1 ~]# ipvsadm -a -t 192.168.4.100:80 -r 192.168.4.2 -g
[root@node1 ~]# ipvsadm -a -t 192.168.4.100:80 -r 192.168.4.3
[root@node1 ~]# ipvsadm

3.5.3 Client端验证

•  通过web浏览器访问
•  使用ab进行大并发测试
[root@client    ~]#    ab    -c    10    -n    1000    http://192.168.4.100
•  在Director上查看连接数
[root@node1    ~]#    ipvsadm    -L    -n   

 

案例3：部署LVS-DR集群

3.1 问题

使用LVS实现DR模式的集群调度服务器，为用户提供Web服务：

  • 路由器对外公网IP地址为202.114.106.20
  • 路由器内网IP地址为192.168.0.254
  • 路由是需要设置SNAT及DNAT功能
  • LVS调度器真实IP地址为192.168.0.10
  • LVS调度器VIP地址设置为192.168.0.253
  • 真实Web服务器地址分别为192.168.0.1、192.168.0.2
  • 使用加权轮询调度算法，真实服务器权重与其IP地址末尾数一致

3.2 方案

使用4台虚拟机，1台作为Linux路由器、1台作为Director调度器、2台作为Real Server、物理机作为客户端，拓扑结构如图-2所示。

图-2                         

3.3 步骤

实现此案例需要按照如下步骤进行。

步骤一：配置网络环境

1）设置Web服务器网络参数

  1. [root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
  2. DEVICE=eth0
  3. ONBOOT=yes
  4. BOOTPROTO=static
  5. IPADDR=192.168.0.1
  6. NETMASK=255.255.255.0
  7. GATEWAY=192.168.0.254
  8. DNS1=202.106.0.20
  9. [root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0
  10. DEVICE=lo:0
  11. ONBOOT=yes
  12. BOOTPROTO=static
  13. IPADDR=192.168.0.253
  14. NETMASK=255.255.255.255
  15. [root@web1 ~]# vim /etc/sysctl.conf
  16. .. ..
  17. net.ipv4.conf.all.arp_ignore = 1
  18. net.ipv4.conf.lo.arp_ignore = 1
  19. net.ipv4.conf.lo.arp_announce = 2
  20. net.ipv4.conf.all.arp_announce = 2
  21. [root@web1 ~]# sysctl -p
  22. [root@web1 ~]# systemctl restart NetworkManager
  23. [root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
  24. DEVICE=eth0
  25. ONBOOT=yes
  26. BOOTPROTO=static
  27. IPADDR=192.168.0.2
  28. NETMASK=255.255.255.0
  29. GATEWAY=192.168.0.254
  30. DNS1=202.106.0.20
  31. [root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0
  32. DEVICE=lo:0
  33. ONBOOT=yes
  34. BOOTPROTO=static
  35. IPADDR=192.168.0.253
  36. NETMASK=255.255.255.255
  37. [root@web2 ~]# vim /etc/sysctl.conf
  38. .. ..
  39. net.ipv4.conf.all.arp_ignore = 1
  40. net.ipv4.conf.lo.arp_ignore = 1
  41. net.ipv4.conf.lo.arp_announce = 2
  42. net.ipv4.conf.all.arp_announce = 2
  43. [root@web2 ~]# sysctl -p
  44. [root@web2 ~]# systemctl restart NetworkManager

2）自定义Web页面

  1. [root@web1 ~]# echo “192.168.0.1” > /var/www/html/index.html
  2. [root@web2 ~]# echo “192.168.0.2” > /var/www/html/index.html

3）启动Web服务器软件

  1. [root@web1 ~]# systemctl start httpd; systemctl enable httpd
  2. [root@web2 ~]# systemctl start httpd; systemctl enable httpd

4)设置LVS调度器网络参数

  1. [root@lvs ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
  2. DEVICE=eth0
  3. ONBOOT=yes
  4. BOOTPROTO=static
  5. IPADDR=192.168.0.10
  6. NETMASK=255.255.255.0
  7. GATEWAY=192.168.0.254
  8. DNS1=202.106.0.20
  9. [root@lvs ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0:0
  10. DEVICE=eth0:0
  11. ONBOOT=yes
  12. BOOTPROTO=static
  13. IPADDR=192.168.0.253
  14. NETMASK=255.255.255.0
  15. GATEWAY=192.168.0.254
  16. DNS1=202.106.0.20
  17. [root@lvs ~]# systemctl restart NetworkManager

5）设置Linux路由器网络参数

  1. [root@router ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
  2. DEVICE=eth0
  3. ONBOOT=yes
  4. BOOTPROTO=static
  5. IPADDR=202.114.106.20
  6. DNS1=202.106.0.20
  7. [root@router ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1
  8. DEVICE=eth0
  9. ONBOOT=yes
  10. BOOTPROTO=static
  11. IPADDR=192.168.0.254
  12. NETMASK=255.255.255.0
  13. DNS1=202.106.0.20
  14. [root@router ~]# systemctl restart network

6）设置Linux路由器的SNAT、DNAT功能

  1. [root@router ~]# sed -i ‘/ip_forward/s/0/1/’ sysctl.conf //开启路由转发
  2. [root@router ~]# sysctl -p
  3. [root@router ~]# iptables -t nat -A POSTROUTING -s 192.168.0.0/24 -p tcp –j SNAT –to-source 202.114.106.20
  4. [root@router ~]# iptables -t nat -A PREROUTING -d 202.114.106.20 -p tcp –dport 80 –j DNAT –to-destination 192.168.0.253:80
  5. [root@router ~]# service iptables save

步骤二：调度器安装软件并启动服务

1）安装软件

  1. [root@lvs Packages]# rpm –ihv ipvsadm-1.25-10.el6.x86_64.rpm

2）启动服务

  1. [root@lvs Packages]# systemctl start ipvsadm
  2. [root@lvs Packages]# systemctl enable ipvsadm

步骤三：部署LVS-DR模式调度器

1）创建集群服务器

  1. [root@lvs ~]# ipvsadm -A -t 192.168.0.253:80 -s wrr

2）添加真实服务器

  1. [root@lvs ~]# ipvsadm -a -t 192.168.0.253:80 -r 192.168.0.1 -g -w 1
  2. [root@lvs ~]# ipvsadm -a -t 192.168.0.253:80 -r 192.168.0.2 -g -w 2

3）查看规则列表，并保存规则

  1. [root@lvs ~]# ipvsadm –Ln
  2. [root@lvs ~]# ipvsadm-save -n > /etc/sysconfig/ipvsadm

步骤四：客户端测试

客户端使用curl命令反复连接http://202.114.106.20，查看访问的页面是否会轮询到不同的后端真实服务器。

4.常见错误

4.1 服务无法启动

问题现象
•  启动LVS服务时,启动失败
•  尝试以restart方式启动服务,仍然失败

故障分析及排除
•  原因分析
–  检查服务状态和日志,提示没有/etc/sysconfig/ipvsadm文件
–  该文件是调度规则文件
•  解决办法
–  先将规则存盘,再重启服务

@谷哥
关注
专栏目录
Eighth1: Introduction to cluster and LVS & LVS-NAT cluster & LVS-DR cluster | Cloud computing
小饅頭的博客
12-30 70
集群及LVS简介 、 LVS-NAT集群 、 LVS-DR集群
lvs负载均衡之配置lvs-nat模式的httpd负载集群---http和https
哭的博客
09-26 1069
LVS（Linux Virtual Server）即Linux虚拟服务器，是由章文嵩博士主导的开源负载均衡项目，目前LVS已经被集成到Linux内核模块中。
集群及LVS简介 LVS-NAT集群 LVS-DR集群
weixin_42446876的博客
08-31 382
Top NSD CLUSTER DAY02 案例1：ipvsadm命令用法 案例2：部署LVS-NAT集群 案例3：部署LVS-DR集群 1 案例1：ipvsadm命令用法 1.1 问题 准备一台Linux服务器，安装ipvsadm软件包，练习使用ipvsadm命令，实现如下功能： 使用命令添加基于TCP一些的集群服务 在集群中添加若干台后端真实服务器 实现同一客户端访问，调度器...
全网最最最全的LVS详解！！！
最新发布
2201_75580114的博客
08-09 2335
LVS（Linux Virtual Server）集群，即Linux虚拟服务器集群，是一个在Unix/Linux平台下实现负载均衡集群功能的系统。它由国人章文嵩博士在1998年开发，是中国国内最早出现的自由软件项目之一，现在LVS已经是Linux内核标准的一部分。LVS集群通过将多台服务器组织起来，共同对外提供服务，以提高系统的整体性能、可扩展性和高可用性。
LVS-NAT集群
行走的皮卡丘
08-31 245
文章目录1、实验规划2、配置基础环境3、部署LVS-NAT模式调度器 1、实验规划 使用4台虚拟机，1台作为Director调度器、2台作为Real Server、1台客户端 使用LVS实现NAT模式的集群调度服务器，为用户提供Web服务： 集群对外公网IP地址为192.168.4.5 调度器内网IP地址为192.168.2.5 真实Web服务器地址分别为192.168.2.100、192.168.2.200 使用加权轮询调度算法，真实服务器权重任意 主机名 网络配置 client
LVS-NAT集群,LVS-DR集群
何志强的博客
06-15 295
集群及LVS简介 集群的概述: LVS不是代理服务器但是具有调度的功能，是一款调度器。集群的核心是调度的功能。 集群的目的：提高性能，降低成本 提高可扩展性 增强可靠性 集群的分类：高性能集群 HPC 负载均衡集群 LB集群（客户端负载在计算机中分摊） 高可用集群 HA（避免单点故障） LVS处于内核中，具有较好的调度中。性能高 功能少 不支持正则 nginx :性能中 功能多 ...
cluster_02
03-21
cluster_02 cluster_02 cluster_02 cluster_02 cluster_02
sery-lvs-cluster.rar_cluster_lvs_sery-lvs-cluster
09-14
在"**sery-lvs-cluster.rar_cluster_lvs_sery-lvs-cluster**"这个压缩包中，包含的文件是"sery-lvs-cluster.pdf"，这是一份关于LVS集群的中文详细指南，非常适合LVS的初学者。这份文档可能会涵盖以下几个关键知识点...
负载均衡集群-集群LVS
w1206507055的博客
06-08 941
LVS负载均衡
LVS-DR集群
JinLu_的博客
06-08 383
LVS配置集群，vip等
LVS--NAT模式集群搭建
weixin_46686835的博客
01-09 184
LVS–NAT模式集群搭建 配置RS 所有的RS配置相同 1.修改默认网关 echo "GETEWAY=DIP" >> /etc/sysconfig/network-scripts/ifcfg-eth0 #修改RS的默认网关为DIP ifdown eth0 && ifup eth0 #重启eth0 2.安装服务 这里安装的是apache yum install -y httpd #安装服务 service httpd start #启动服务 echo "192.
使用LVS-NAT搭建集群
菜鸟、上路
07-14 624
一、 集群概述 1、 什么是集群 一组各自相互独立且又相互依赖的,通过高速网络互联的计算机组成的一个计算机组, 以单一的系统模式加以管理, 为用户提供服务, 对用户来说, 用户只会认为对方是一个服务. 这个里面, 一组计算机的一台计算机就是集群的一个节点 2、 集群的特性 可伸缩性, 可靠性, 可管理性 3、 应用场景 例： 一台服务器，如果能够响应10000个并发，返回的状态码全部是200 ...
LVS负载均衡集群之LVS-NAT集群
m0_71888825的博客
07-08 707
LVS，全称 Linux Virtual Server，即Linux虚拟服务器。是一个虚拟的服务器集群系统，使用负载均衡技术将多台服务器组成一个虚拟的服务器集群。在众多解决高并发问题的方案中，这是一个易于扩展并且价格相对低廉的方案。是在1998年时，由章文嵩博士成立的，是中国最早出现的自由软件项目之一。LVS现在已成为Linux内核的一部分，默认编译为ip_ vs模块，必要时能够自动调用。在CentOS 7系统中，以下操作可以手动加载ip_ vs模块，并查看当前系统中ip_ vs模块的版本信息。
LVS集群
巅峰产生虚伪的拥护，黄昏见证虞城的信徒。
10-15 704
LVS1. LVS介绍LVS工作模式 1. LVS介绍 LVS，Linux Virtual Server LVS是章文嵩博士发起的自由软件项目，它的官方站点是http://www.linuxvirtualserver.org。LVS工作在内核空间，实现TCP/IP协议群的四层路由，在Linux2.4内核以前，使用LVS时必须要重新编译内核以支持LVS功能模块，但从Linux2.4内核以后已经完全内置了LVS的各个功能模块，无需给内核打任何补丁，可以直接使用LVS提供的各种功能。 LVS采用三层结构：调度器、
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值