高可用集群KEEPALIVED

已于 2024-08-19 14:44:22 修改
阅读量1.3k 收藏 28
点赞数 29
文章标签： 网络
于 2024-08-18 22:38:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_66122897/article/details/141304787
版权

一、高可用集群


1、集群类型


LB：Load Balance 负载均衡 LVS/HAProxy/nginx（http/upstream, stream/upstream）
HA：High Availability 高可用集群 数据库、Redis
SPoF: Single Point of Failure，解决单点故障
HPC：High Performance Computing 高性能集群


2、系统可用性


SLA：Service-Level Agreement 服务等级协议（提供服务的企业与客户之间就服务的品质、水准、性能 等方面所达成的双方共同认可的协议或契约）

A = MTBF / (MTBF+MTTR）

99.95%:(60*24*30)*(1-0.9995)=21.6分钟 #一般按一个月停机时间统计


3、系统故障


硬件故障：设计缺陷、wear out（损耗）、非人为不可抗拒因素

软件故障：设计缺陷 bug

4、实现高可用


提升系统高用性的解决方案：降低MTTR- Mean Time To Repair(平均故障时间)

解决方案：建立冗余机制

active/passive 主/备
active/active 双主
active --> HEARTBEAT --> passive
active HEARTBEAT active


5、VRRP：Virtual Router Redundancy Protoco

虚拟路由冗余协议,解决静态网关单点风险物理层:路由器、三层交换机
软件层:keepalived

二、keepalived部署及其实验

准备四台主机

ka1ip:172.25.254.10
ka2ip:172.25.254.20
realserver1ip:172.25.254.110
realserver2ip:172.25.254.120

1、全局配置

[root@KA1 ~]# vim /etc/keepalived/keepalived.conf

 Configuration File for keepalived
 
global_defs {
    notification_email {
        1062949354@qq.com      
        timiniglee-zln@163.com
    }
    notification_email_from keepalived@KA1.timinglee.org      
    smtp_server 127.0.0.1                                     
    smtp_connect_timeout 30                                   
    router_id KA1.timinglee.org                             
                                                       
 
    vrrp_skip_check_adv_addr                           
                                             
                                                       
 
    vrrp_strict                                         
                                                        
                                                        
                                                         
                                                         
                                                        
    vrrp_garp_interval 0                                 
    vrrp_gna_interval 0                                  
    vrrp_mcast_group4 224.0.0.18                         

}

三、配置虚拟路由

vrrp_instance VI_1 {
    state MASTER
    interface eth0           
 
    virtual_router_id 51    
                             
                             
                            
 
priority 100                 
                            
 
    advert_int 1            
    authentication {        
        auth_type AH|PASS     
        uth_pass 1111         
                              
    }
    virtual_ipaddress {         
 
        <IPADDR>/<MASK> brd <IPADDR> dev <STRING> scope <SCOPE> label <LABEL>
        172.25.254.100            
        172.25.254.10/24 dev eth1
        172.25.254.20/24 dev eth2 label eth2:1
    }
}
3.1配置master
[root@KA1 ~]# vim /etc/keepalived/keepalived.conf


! Configuration File for keepalived
 
global_defs {
    notification_email {
       1062949354@qq.com
    }
    notification_email_from keepalived@KA1.timinglee.org
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id KA1.timinglee.org
    vrrp_skip_check_adv_addr
    #vrrp_strict     
    #nft list ruleset
    vrrp_garp_interval 0
    vrrp_gna_interval 0
    vrrp_mcast_group4 224.0.0.18
}
 
vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 20
    priority 100
    advert_int 1
    authentication {
    auth_type PASS
    auth_pass 1111
}
    virtual_ipaddress {
       172.25.254.100/24 dev eth0 label eth0:0
    }
}
3.2 配置slave
[root@KA2 ~]# vim /etc/keepalived/keepalived.conf


! Configuration File for keepalived
 
global_defs {
    notification_email {
     1062949354@qq.com
}
    notification_email_from keepalived@timinglee.org
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id KA2.timinglee.org
    vrrp_skip_check_adv_addr
    #vrrp_strict
    vrrp_garp_interval 0
    vrrp_gna_interval 0
    vrrp_mcast_group4 224.0.0.18
}
 
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20 #相同id管理同一个虚拟路由
    priority 80 #低优先级
    advert_int 1
    authentication {
    auth_type PASS
    auth_pass 1111
}
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }
}
3.3 测试
[root@KA2 ~]# tcpdump -i eth0 -nn host 224.0.0.18
dropped privs to tcpdump
tcpdump: verbose output suppressed, use -v[v]... for full protocol decode
listening on eth0, link-type EN10MB (Ethernet), snapshot length 262144 bytes
22:48:23.294894 IP 192.168.178.20 > 224.0.0.18: VRRPv2, Advertisement, vrid 20,prio 100, authtype none, intvl 1s, length 20
22:48:24.084793 IP 192.168.178.30 > 224.0.0.18: VRRPv2, Advertisement, vrid 30,prio 80, authtype none, intvl 1s, length 20
22:48:24.295075 IP 192.168.178.20 > 224.0.0.18: VRRPv2, Advertisement, vrid 20,prio 100, authtype none, intvl 1s, length 20
22:48:25.085256 IP 192.168.178.30 > 224.0.0.18: VRRPv2, Advertisement, vrid 30,prio 80, authtype none, intvl 1s, length 20
22:48:25.296296 IP 192.168.178.20 > 224.0.0.18: VRRPv2, Advertisement, vrid 20,prio 100, authtype none, intvl 1s, length 20
22:48:26.085843 IP 192.168.178.30 > 224.0.0.18: VRRPv2, Advertisement, vrid 30,prio 80, authtype none, intvl 1s, length 20

四、Keepalived日志功能

在以下配置中进行添加

ka2也是一样

[root@ka1 ~]# cat /etc/sysconfig/keepalived
KEEPALIVED_OPTIONS="-D -S 6"
 
[root@ka1 ~]#cat /etc/rsyslog.conf
local6.* /var/log/keepalived.log

重启服务

[root@ka1 ~]#systemctl restart keepalived.service

查看日志

4.1 实现独立子配置文件 

把之前的文件注释掉，添加新的配置文件

[root@ka1 ~]# vim /etc/keepalived/conf.d/172.25.254.100.conf

 
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 100
    priority 80
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:1
    }
}


[root@ka2 ~]# vim /etc/keepalived/conf.d/172.25.254.100.conf
 
 
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 100
    priority 80
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:1
    }
}

然后重启服务

[root@ka1 ~]#systemctl restart keepalived.service


[root@ka2 ~]#systemctl restart keepalived.service

五、实现master/slave的 Keepalived 单主架构

ka1

[root@KA1 ~]# vim /etc/keepalived/keepalived.conf

! Configuration File for keepalived
 
global_defs {
    notification_email {
       1062949354@qq.com
    }
    notification_email_from keepalived@KA1.timinglee.org
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id KA1.timinglee.org
    vrrp_skip_check_adv_addr
    #vrrp_strict 
    vrrp_garp_interval 0
    vrrp_gna_interval 0
    vrrp_mcast_group4 224.0.0.18
}
 
vrrp_instance VI_1 {
    state MASTER 
    interface eth0
    virtual_router_id 20
    priority 100
    advert_int 1
    authentication {
    auth_type PASS
    auth_pass 1111
}
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }
}

ka2

[root@KA2 ~]# vim /etc/keepalived/keepalived.conf


! Configuration File for keepalived
 
global_defs {
    notification_email {
        1062949354@qq.com
    }
    notification_email_from keepalived@timinglee.org
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id KA2.timinglee.org
    vrrp_skip_check_adv_addr
    #vrrp_strict
    vrrp_garp_interval 0
    vrrp_gna_interval 0
    vrrp_mcast_group4 224.0.0.18
}
 
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20 
    priority 80 
    advert_int 1
    authentication {
    auth_type PASS
    auth_pass 1111
    }
    virtual_ipaddress {
       172.25.254.100/24 dev eth0 label eth0:0
    }
}

5.1非抢占模式

        默认为抢占模式preempt，即当高优先级的主机恢复在线后，会抢占低先级的主机的master角色， 这样会使vip在KA主机中来回漂移，造成网络抖动

        建议设置为非抢占模式 nopreempt ，即高优先级主机恢复后，并不会抢占低优先级主机的master角色非抢占模块下,如果原主机down机, VIP迁移至的新主机, 后续也发生down时,仍会将VIP迁移回原主机

ka1

[root@KA1 ~]# vim /etc/keepalived/keepalived.conf

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20
    priority 100 
    nopreempt 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }

ka2

[root@KA2 ~]# vim /etc/keepalived/keepalived.conf

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20
    priority 80 
    nopreempt 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }

5.2抢占延迟模式 

ka1

[root@KA1 ~]# vim /etc/keepalived/keepalived.conf

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20
    priority 100 
    preempt_delay 5s 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }
}

ka2

[root@KA2 ~]# vim /etc/keepalived/keepalived.conf

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20
    priority 80 
    preempt_delay 5s 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }
}

 测试结果

ka1停止服务时，ka2才会有

5.3组播变单播 

启用单播时， vrrp_strict 需要注释

ka1

[root@KA1 ~]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived
 
global_defs {
    notification_email {
        1062949354@qq.com
    }
    notification_email_from keepalived@KA1.timinglee.org
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id KA1.timinglee.org
    vrrp_skip_check_adv_addr
    #vrrp_strict 
    vrrp_garp_interval 0
    vrrp_gna_interval 0
    vrrp_ipsets keepalived
}

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20
    priority 100 
    #preempt_delay 5s 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }
}
        unicast_src_ip 172.25.254.10 
        unicast_peer {
            172.25.254.20     
                             
    }
}

ka2

[root@KA2 ~]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived
 
global_defs {
    notification_email {
        1062949354@qq.com
    }
    notification_email_from keepalived@KA1.timinglee.org
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id KA1.timinglee.org
    vrrp_skip_check_adv_addr
    #vrrp_strict 
    vrrp_garp_interval 0
    vrrp_gna_interval 0
    vrrp_ipsets keepalived
}

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 20
    priority 80 
    #preempt_delay 5s 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:0
    }
}
        unicast_src_ip 172.25.254.20 
        unicast_peer {
            172.25.254.10     
                             
    }
}

测试结果

停掉ka1中的服务，去ka2中测试

六、发送邮箱

ka1

[root@KA1 ~]# vim /etc/mail.rc

set from=1062949354@qq.com
set smtp=smtp.qq.com
set smtp-auth-user=1062747354@qq.com
set smtp-auth-password=123
set smtp-auth=login
set ssl-verify=ignore

安装邮件服务

[root@ka1 ~]# yum install mail* -y

然后编写脚本

[root@ka1 ~]# cat /etc/keepalived/mail.sh

#!/bin/bash
mail_dst="1062949354@qq.com"
send_message()
{
    mail_sub="$HOSTNAME to be $1 vip move"
    mail_msg="`date +%F\ %T` : vrrp move $HOSTNAME chage $1"
    echo $mail_msg | mail -s "$mail_sub" $mail_dst
}
 
case $1 in
    master)
    send_message master
    ;;
    backup)
    send_message backup
    ;;
    fault)
    send_mesage fault
    ;;
    *)
    ;;
esac

给权限

[root@ka1 ~]# chmod +x /etc/keepalived/mail.sh

查看测试结果

六 实现 master/master 的 Keepalived 双主架构

ka1

vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 100
    priority 100
    advert_int 1
    #preemt_delay 5s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.10
    unicast_peer {
        172.25.254.20
    }
    track_script {
        check_haproxy
    }
}
vrrp_instance VI_2 {
    state BACKUP
    interface eth0
    virtual_router_id 200
    priority 80
    advert_int 1
    #preemt_delay 5s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.200/24 dev eth0 label eth0:2
    }
    unicast_src_ip 172.25.254.10
    unicast_peer {
        172.25.254.20
    }

ka2

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 100
    priority 80
    advert_int 1
    #preemt_delay 5s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.20
    unicast_peer {
        172.25.254.10
    }
}
vrrp_instance VI_2 {
    state MASTER
    interface eth0
    virtual_router_id 200
    priority 100
    advert_int 1
    #preemt_delay 5s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.200/24 dev eth0 label eth0:2
    }
    unicast_src_ip 172.25.254.20
    unicast_peer {
        172.25.254.10
    }
}

关闭ka1服务，开启ka2服务

6.1 keepalived实现haproxy高可用

下载haproxy

ka1

[root@ka1 ~]# yum install haproxy
[root@ka1 ~]# systemctl restart --enable haproxy

ka2

[root@ka2 ~]# yum install haproxy
[root@ka2 ~]# systemctl restart --enable haproxy

修改内核参数并生效

ka1

[root@ka1 ~]# vim /etc/sysctl.conf

[root@ka1 ~]sysctl -p

ka2

[root@ka2 ~]# vim /etc/sysctl.conf

[root@ka2 ~]sysctl -p
net.ipv4.ip_nonlocal_bind=1

修改主配置文件
ka1和ka2

[root@ka1 ~]# vim /etc/haproxy/haproxy.cfg
[root@ka2 ~]# vim /etc/haproxy/haproxy.cfg
listen webcluster
        bind 172.25.254.100:80
        mode http
        server web1 172.25.254.110:80 check inter 3 fall 2 rise 5
        server web2 172.25.254.120:80 check inter 3 fall 2 rise 5

创建脚本并给予权限

ka1

[root@ka1 ~]# vim /etc/keepalived/test.sh
 
#!/bin/bash
killall -0 haproxy
 

[root@ka1 ~]# chmod +x /etc/keepalived/test.sh

ka2

[root@ka2 ~]# vim /etc/keepalived/test.sh
 
#!/bin/bash
killall -0 haproxy

[root@ka2 ~]# chmod +x /etc/keepalived/test.sh

在ka1中配置keepalived

[root@ka1 ~]#cat /etc/keepalived/keepalived.conf


vrrp_script check_haproxy {
    script "/etc/keepalived/scripts/haproxy.sh"
    interval 1
    weight -30
    fall 2
    rise 2
    timeout 2
}

测试

qq_66122897
关注
【高可用集群】
weixin_67965630的博客
08-31 1067
高可用集群
HAProxy+keepalived高可用集群
huming720的博客
11-10 213
简介 haproxy是一个开源的，高性能的，负载均衡组件，借助haproxy可以快速，可靠的构建一个负载均衡集群。 优点如下： 可靠性和稳定性非常好，可以和硬件级的负载均衡F5相媲美。 最高可同时维护40000-50000个并发连接。 支持多种负载均衡算法，会话保持 支持连接拒绝，全透明代理并且有一个功能强大的服务器状态监控。 用haproxy构建的时候，比如后方代理两个http，如果haproxy宕机，后方的http正常运行也是瘫痪状态，这就造成了单点故障。 这个时候就需要keepalived了，ke
集群之高可用集群
weixin_34217711的博客
11-24 116
 什么是高可用集群呢？以前我不知道的时候感觉这东西很高端的说，等明白了以后发现高可用集群也就是当一台主机出现故障（包括物理故障和服务故障）后，在很短时间内有其它服务器来接替它的工作，代它响应客户请求，就这么简单。显然我们只知道这个是不够的，我们必须得从内部原理上来理解高可用集群的实现机制。     信息层：有两个节点的webserver集群,RS1平时响应客户请求，RS2做备用在RS1节点故...
高可用集群
L*YUE的博客
10-13 803
目录
Keepalived热备 、 Keepalived+LVS 、 HAProxy服务器
qq_41593779的博客
02-07 476
KeepAlived高可用集群 keepalived用于实现高可用集群 它的工作原理就是VRRP（虚拟冗余路由协议） 配置高可用的web集群 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-IQYEdu5T-1644237248080)(…/imgs/image-20211103094124024.png)] 环境说明： web1：eth0->192.168.4.100/24 web2：eth0->192.168.4.200/24 配置keepali
高可用集群（HAC）
Liang_GaRy的博客
02-18 850
高可用集群（HAC）
Keepalived+Nginx+Tomcat 高可用集群搭建实战记录
04-02
Keepalived+Nginx+Tomcat 高可用集群搭建实战记录 Keepalived 是一种高可用性解决方案，可以与 Nginx 和 Tomcat 配合使用来实现高可用集群。下面是 Keepalived+Nginx+Tomcat 高可用集群搭建的实战记录。 ...
高可用之Keepalived+Nginx实现高可用Web负载均衡
最新发布
11-07
Nginx 的高可用集群问题可以通过 Keepalived 来解决。 Keepsalived 可以防止 Nginx 的单点故障的发生，实现高可用的 Web 负载均衡。 在实现高可用 Web 负载均衡时，需要规划 VIPIP 主机名、Nginx 端口、默认主从...
高可用集群—实现方案一：Keepalived
weixin_50426792的博客
03-17 669
高可用集群实现方案 一、Keepalived环境专为LVS 和 HA 设计的一款健康检查工具，使用成熟的 VRRP 协议 支持故障自动切换（ Failover ） 支持节点健康状态检查（ Health Checking ） 官方网站：http://www.keepalived.org/ 高可用集群：尽可能提高服务可用性 宕机标准：15个9标准：99%99.999% 原理：心跳检测 问题：脑分裂 解决方案： 心跳线冗余 多次间歇心跳检测 电源交换机 检测脚本：针对服务的可用性进行探测 切换 Master 以及
Linux高可用集群之keepalived详解1
08-04
在探讨Linux高可用集群之Keepalived之前，我们需要回顾一下之前涉及的一些技术。我们已经讲解了LVS（负载均衡器）的基础知识，它作为网络层负载均衡工具，用于分散网络流量。此外，还讨论了Heartbeat和Corosync，...
Redis高可用集群
长沙老码农
02-03 684
目录 1、 前言 2、初识TwemProxy 2.1 什么是TwemProxy 2.2 安装TwemProxy 2.3 配置TwemProxy 2.4 测试TwemProxy 3、初识Keepalived 3.1 什么Keepalived 3.2 安装keepalive 3.3 配置keepalive启动测试 3.4 启动测试 4 、高可用多哨兵集群 4.1 哨兵监控脚本配置 4.2 哨兵集群启动 1、 前言 本章节我们使用：Sentinel+Twemproxy+..
Hadoop生态圈-高可用集群
热门推荐
未昔的博客
07-29 6万+
Hadoop生态圈-高可用集群 Hadoop生态圈即全部组件 - 原创wnagwei（qq：140691703@qq.com） 转载复制请联系作者，未经允许擅自操作，将追究法律责任 高可用集群自动故障转移工作 机制 1） 故障检测： 故障检测：集群中的每个 NameNode 在 ZooKeeper 中维护了一个持久会话，如果 机器崩溃，ZooKeeper 中的会话将终止，ZooKeeper 通知另一个 NameNode 需要触发故障转 移。 2）现役 NameNode 选择： 现役 Name
Hadoop高可用集群
千锋教育
06-02 1133
当发生故障的时候, Active节点挂掉, 此时Standby节点在成为新的Active节点之前, 会将读取到的EditLog文件在自己的内存中进行推演, 得到最新的目录树结构. 此时再升为Active节点, 可以无缝的继续对外提供服务.当有任何的操作发生在Active节点上的时候, JN会记录这些操作到半数以上的节点中. Standby节点检测JN中的log日志文件发生了变化, 会读取JN中的数据到自己的内存中, 维护最新的目录树结构与元数据信息。要是有一个能监视Active节点的服务功能就好了。
数据库高可用集群
xianrenqiu1234的博客
04-15 483
linux高可用集群(HA)原理详解
weixin_34410662的博客
01-10 2103
高可用集群一、什么是高可用集群高可用集群就是当某一个节点或服务器发生故障时，另一个节点能够自动且立即向外提供服务，即将有故障节点上的资源转移到另一个节点上去，这样另一个节点有了资源既可以向外提供服务。高可用集群是用于单个节点发生故障时，能够自动将资源、服务进行切换，这样可以保证服务一直在线。在这个过程中，对于客户端来说是透明的。二、高可用集群的衡量标准高可用...
高可用集群介绍
shenql_的博客
08-31 537
快速了解高可用集群的概念以及心跳检测和漂移IP地址
使用Keepalived构建Nginx高可用集群
Keepalived 是一个开源项目，主要用于构建高可用性集群。它利用VRRP协议，监控Web服务器的状态，实现负载均衡和故障转移。在Nginx高可用场景中，Keepalived会在两台服务器之间分配一个虚拟IP（VIP），当主服务器...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值