LVS 调度器 nat和DR模式

已于 2024-08-08 13:59:13 修改
阅读量1k 收藏 17
点赞数 20
文章标签： lvs 服务器 linux
于 2024-08-08 10:22:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Fish_1112/article/details/140987436
版权

lvs-nat 

修改请求报文的目标IP,多目标IP的DNAT

配置网络

LVS主机 注意网卡的顺序 （nat和主机模式）

[root@lvs ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160
​
[ipv4]
address1=192.168.136.100/24,192.168.136.2
method=manual
dns=114.114.114.114;
​
[root@lvs ~]# cat /etc/NetworkManager/system-connections/ens224.nmconnection 
[connection]
id=ens224
type=ethernet
interface-name=ens224
​
[ipv4]
address1=192.168.0.100/24
method=manual
dns=114.114.114.114;

打开内核路由功能 让两个网卡通讯

[root@lvs ~]# sysctl -a | grep ip_forward
net.ipv4.ip_forward = 
net.ipv4.ip_forward_update_priority = 1
net.ipv4.ip_forward_use_pmtu = 0
​
[root@lvs ~]# vim /etc/sysctl.conf 
net.ipv4.ip_forward=1
# 生效
[root@lvs ~]# sysctl -p
net.ipv4.ip_forward = 1

server1

[root@server1 ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160
​
[ipv4]
address1=192.168.0.10/24,192.168.0.100
method=manual

server2

[root@server2 ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160
​
[ipv4]
address1=192.168.0.20/24,192.168.0.100
method=manual

配置httpd服务

server1

yum install httpd -y
echo webserver1 - 192.168.0.10 > /var/www/html/index.html
systemctl enable --now httpd

server2

yum install httpd -y
echo webserver1 - 192.168.0.20 > /var/www/html/index.html
systemctl enable --now httpd

在lvs主机中测试

[root@lvs ~]# curl 192.168.0.10
webserver1 - 192.168.0.10
[root@lvs ~]# curl 192.168.0.20
webserver2 - 192.168.0.20

LVS中 下载安装LVS  添加策略

dnf install ipvsadm -y

lvsadm的相关命令

管理集群服务 ipvsadm -A|E -t（tcp）|u（udp）|f（防护墙标签） \

-A #添加

-E #修改

-t #tcp服务

-u #udp服务

-s #指定调度算法，默认为WLC

-p #设置持久连接超时，持久连接可以理解为在同一个时间段同一个来源的请求调度到同一Realserver

-f #firewall mask 火墙标记，是一个数字

管理集群中的real server

ipvsadm -a|e -t|u|f service-address -r server-address [-g | -i| -m](工作模式) [-w weight](权重)

-a #添加realserver

-e #更改realserver

-t #tcp协议 -u #udp协议

-f #火墙 标签

-r #realserver地址

-g #直连路由模式

-i #ipip隧道模式

-m #nat模式

-w #设定权重

-Z #清空计数器

-C #清空lvs策略

-L #查看lvs策略

-n #不做解析

--rate ：输出速率信息

看策略的命令

ipvsadm -Ln

 添加策略

ipvsadm -A 添加一个集群服务，需要使用选项 rr 轮询 静态算法 -s 指定集群服务使用的调度算法   -m是nat模式

ipvsadm -A -t 192.168.136.100:80 -s rr
ipvsadm -a -t 192.168.136.100:80 -r 192.168.0.10:80 -m
ipvsadm -a -t 192.168.136.100:80 -r 192.168.0.20:80 -m

查看策略 

[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.136.100:80 rr
  -> 192.168.0.10:80              Masq    1      0          0         
  -> 192.168.0.20:80              Masq    1      0          0    

测试

[root@server ~]# for i in {1..10}
> do
> curl 192.168.136.100
> done
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10

保存策略

[root@lvs ~]# ipvsadm-save

保存进文件

[root@lvs ~]# ipvsadm-save > /etc/sysconfig/ipvsadm

ps: 最好把解析做好 否则很慢

不做解析的化，可以加-n选项

[root@lvs ~]# ipvsadm-save -n > /etc/sysconfig/ipvsadm

将策略清空，重新导入

[root@lvs ~]# ipvsadm -C
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
[root@lvs ~]# ipvsadm-restore < /etc/sysconfig/ipvsadm

以上用的是rr算法  接下来介绍wrr算法 （加权轮询）  

WRR：Weighted RR，加权轮询根据RS的配置进行加权调度，性能差的RS被调度的次数少

清空策略
[root@lvs ~]# ipvsadm -C
重新添加策略  -w 2 既10的主机访问两次  -w 1 既20的主机访问一次
[root@lvs ~]# ipvsadm -A -t 192.168.136.100:80 -s wrr
[root@lvs ~]# ipvsadm -a -t 192.168.136.100:80 -r 192.168.0.10 -m -w 2
[root@lvs ~]# ipvsadm -a -t 192.168.136.100:80 -r 192.168.0.20 -m -w 1

测试

[root@client ~]# curl 192.168.136.100
webserver2 - 192.168.0.20
[root@client ~]# curl 192.168.136.100
webserver1 - 192.168.0.10
[root@client ~]# curl 192.168.136.100
webserver1 - 192.168.0.10

lvs-DR

DR：Direct Routing，直接路由，LVS默认模式,应用最广泛,通过为请求报文重新封装一个MAC首部进行 转发，源MAC是DIP所在的接口的MAC，目标MAC是某挑选出的RS的RIP所在接口的MAC地址；源 IP/PORT，以及目标IP/PORT均保持不变

根本：解决nat模式中的VS压力问题

 实验图

 网络配置

lvs主机

client

[root@client ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160

[ipv4]
address1=192.168.136.128/24,192.168.136.100
method=manual
dns=114.114.114.114;

[root@lvs ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.136.100   0.0.0.0         UG    100    0        0 ens160
192.168.136.0     0.0.0.0         255.255.255.0   U     100    0        0 ens160

router主机 一个nat 一个仅主机

[root@router ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160
​
[ipv4]
address1=192.168.136.100/24,192.168.136.2
method=manual
dns=114.114.114.114;
​
[root@router ~]# cat /etc/NetworkManager/system-connections/ens224.nmconnection 
[connection]
id=ens224
type=ethernet
interface-name=ens224
​
[ipv4]
address1=192.168.0.100/24
method=manual
​
[root@router ~]# vim /etc/sysctl.conf 
net.ipv4.ip_forward=1

lvs主机

[root@lvs ~]# ip a a 192.168.0.200/32 dev lo
[root@lvs ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet 192.168.0.200/32 scope global lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
3: ens224: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 00:0c:29:96:71:57 brd ff:ff:ff:ff:ff:ff
    altname enp19s0
    inet 192.168.0.50/24 brd 192.168.0.255 scope global noprefixroute ens224
       valid_lft forever preferred_lft forever
    inet6 fe80::e57b:8655:5c22:2be8/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever
       
[root@lvs ~]# cat /etc/NetworkManager/system-connections/ens224.nmconnection 
[connection]
id=ens224
type=ethernet
interface-name=ens224

[ipv4]
address1=192.168.0.50/24,192.168.0.100
method=manual
dns=114.114.114.114;

[root@lvs ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.0.100   0.0.0.0         UG    100    0        0 ens224
192.168.0.0     0.0.0.0         255.255.255.0   U     100    0        0 ens224

server1 仅主机 记得配httpd 上面已经配置过了

[root@server1 ~]# ip a a 192.168.0.200/32 dev lo
[root@server1 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet 192.168.0.200/32 scope global lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens160: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 00:0c:29:8a:ae:0e brd ff:ff:ff:ff:ff:ff
    altname enp3s0
    inet 192.168.0.10/24 brd 192.168.0.255 scope global noprefixroute ens160
       valid_lft forever preferred_lft forever
    inet6 fe80::efbe:acf4:b525:3659/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever
       
[root@server1 ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160
​
[ipv4]
address1=192.168.0.10/24,192.168.0.100
method=manual

rs主机中 使VIP不对外响应 禁用arp
[root@server1 ~]# echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore 
[root@server1 ~]# echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce 
[root@server1 ~]# echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce 
[root@server1 ~]# echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore

 server2 与server1类似    记得配httpd

[root@server2 ~]# ip a a 192.168.0.200/32 dev lo
[root@server2 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet 192.168.0.200/32 scope global lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens160: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 00:0c:29:69:ad:c8 brd ff:ff:ff:ff:ff:ff
    altname enp3s0
    inet 192.168.0.20/24 brd 192.168.0.255 scope global noprefixroute ens160
       valid_lft forever preferred_lft forever
    inet6 fe80::661e:8965:208d:b9b3/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever
       
[root@server2 ~]# cat /etc/NetworkManager/system-connections/ens160.nmconnection 
[connection]
id=ens160
type=ethernet
interface-name=ens160
​
[ipv4]
address1=192.168.0.20/24,192.168.0.100
method=manual
dns=114.114.114.114;

rs主机中 使VIP不对外响应  禁用arp协议
[root@server2 ~]# echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore 
[root@server2 ~]# echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce 
[root@server2 ~]# echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce 
[root@server2 ~]# echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore

如果永久禁用arp那么写进配置文件

 LVS主机写策略

测试

防火墙标记解决轮询问题

当我们使用https服务时，RS安装mod_ssl模块 https

[root@server1 ~]# yum install mod_ssl -y
[root@server1 ~]# systemctl restart httpd
[root@server1 ~]# curl -k https://192.168.0.10  -k不用证书

 假设我们的策略是这样写的

ipvsadm -A -t 192.168.0.200:443 -s rr
ipvsadm -a -t 192.168.0.200:443 -r 192.168.0.10:443 -g 
ipvsadm -a -t 192.168.0.200:443 -r 192.168.0.20:443 -g 
ipvsadm -A -t 192.168.0.200:443 -s rr
ipvsadm -a -t 192.168.0.200:443 -r 192.168.0.10:443 -g 
ipvsadm -a -t 192.168.0.200:443 -r 192.168.0.20:443 -g

问题：只会访问同一台

[root@client ~]# curl 192.168.0.200; curl -k https://192.168.0.200
webserver2 - 192.168.0.10
webserver1 - 192.168.0.10
[root@client ~]# curl 192.168.0.200; curl -k https://192.168.0.200
webserver2 - 192.168.0.20
webserver1 - 192.168.0.20

 怎么解决呢？？

防火墙标记解决轮询问题

[root@lvs ~]# iptables -t mangle -nL
# lvs主机中为端口做标记
[root@lvs ~]# iptables -t mangle -A PREROUTING -d 192.168.0.200 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 66
[root@lvs ~]# iptables -t mangle -nL
[root@lvs ~]# ipvsadm -C
​
[root@lvs ~]# ipvsadm -A -f 66 -s rr
[root@lvs ~]# ipvsadm -a -f 66 -r 192.168.0.10 -g    
[root@lvs ~]# ipvsadm -a -f 66 -r 192.168.0.20 -g

测试

[root@client ~]# curl 192.168.0.200; curl -k https://192.168.0.200
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10
[root@client ~]# curl 192.168.0.200; curl -k https://192.168.0.200
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10
[root@client ~]# curl 192.168.0.200; curl -k https://192.168.0.200
webserver2 - 192.168.0.20
webserver1 - 192.168.0.10

大功告成！！！

Fish_1112
关注
LVS三种工作模式 、NAT模式和DR模式详细搭建过程
CSDN_xt_peng的博客
06-29 1018
一、lvs三种工作模式 1.NAT模式：通过网络地址转换实现的虚拟服务器。Director Server将用户请求报文的目的地址改成选定的Real Server地址后，转发给Real Server，大并发访问时，Director Server的性能成为瓶颈 2.TUN模式：通过隧道模式实现虚拟服务器。Director Server采用隧道技术将请求发至Real Server后，Real Server直接相应客户端。 3.DR模式：直接使用路由技术是心啊虚拟服务器。通过改写请求报文的MAC地址，将请求发至Re
Linux集群--简单实现LVS-DNAT及LVS-DR
shinfocom
09-11 246
LVS-DNAT 工作原理： 在数据包进入本机内部之前，就改变它的目的地址（需要在内核实现） LVS的工作机制类似iptables，一部分工作在用户空间（ipvsadm），一部分工作在内核空间 安装ipvsadm软件就足以实现LVS的功能 使用ipvsadm，早期需要重新编译内核，不过现在版本的redhat默认直接做进内核 # 查看内核是否含有ipvs grep –I –...
LVS负载均衡群集之NAT与DR模式
MCB134的博客
03-06 1144
LVS：Linux Virtual Server，负载调度器，内核集成，章文嵩（花名正明）, 阿里的四层SLB(Server Load Balance)是基于LVS+keepalived实现LVS 官网：http://www.linuxvirtualserver.org/阿里SLB和LVS：整个SLB系统由3部分构成: 四层负载均衡，七层负载均衡 和 控制系统，如下图所示;①四层负载均衡，采用开源软件LVS (linux virtual server) ，并根据云计算需求对其进行了定制化。
lvs集群、NAT模式和DR模式、keepalive
Hai990218的博客
07-09 1369
为了维护系统的可用性，可靠性，容错性。DS：director server lvs集群中的主服务器，也就是调度器（即nginx的代理服务器），是集群的核心，调度器就是用来接受客户端的请求转发到后端的服务器。好处在于，对于客户端来说，请求的目标地址始终不变，客户端的配置不需要做特殊修改，只是调度器在对ip和端口进行转换，后端的服务器也不需要更改任何配置。在NAT模式下，lvs会将来自客户端的请求报文中的目标ip地址和端口，修改为lvs内部的ip地址和端口，然后把请求转发到后端服务器。
LVS的NAT模式和DR模式实验
QDX_CK的博客
08-12 631
LVS全称是Linux Virtual Server，即Linux虚拟服务器。是章文嵩开发的一个国产开源负载均衡软件。LVS主要用于多服务器的负载均衡，工作在网络层，可以实现高性能、高可用的服务器集群技术。增删选项：-A：添加-E：修改-D ：删除服务选项：-t ：tcp服务-u：udp服务其它选项：-s：指定调度算法，在此次实验中使用rr（轮询调度算法），wrr（带权重的轮询调度算法）-p：设置持久连接超时，持久连接可以理解为在同一个时间段同一个来源的请求调度到同一Realserver。
LVS详解及其NAT模式与DR模式部署（全网最详细！！！）
搞运维的
08-08 907
LVS详解及其NAT模式与DR模式部署
LVS中NAT模式和DR模式实战讲解
m0_62977692的博客
08-07 790
1.客户端发送访问请求，请求数据包中含有请求来源（cip），访问目标地址（VIP）访问目标端口 （9000port）2.VS服务器接收到访问请求做DNAT把请求数据包中的目的地由VIP换成RS的RIP和相应端口3.RS1相应请求，发送响应数据包，包中的相应保温为数据来源（RIP1）响应目标（CIP）相应端口 （9000port）4.VS服务器接收到响应数据包，改变包中的数据来源（RIP1-->VIP）,响应目标端口（9000-->80）5.VS服务器把修改过报文的响应数据包回传给客户端。
LVS集群的NAT模式和DR模式
2301_80982539的博客
08-12 971
LVS（Linux Virtual Server）是一个用于负载均衡的开源软件项目，旨在通过集群技术实现高性能、高可用的服务器系统。它运行在Linux操作系统上，并且可以利用内核级的资源来提高性能和稳定性。
一篇文章教会你 LVS———NAT模式和DR模式部署配置
HUHUD521的博客
08-11 1129
LVS-DR模式，即直接路由模式，是一种通过二层网络（数据链路层）直接转发数据包到后端真实服务器的负载均衡技术。在这种模式下，客户端的请求直接路由到后端真实服务器，而不是先经过负载均衡服务器。这种模式可以减少负载均衡服务器的负载，提高系统的整体性能。
LVS/NAT与LVS/DR模式集群的概述与配置
10-11
LVS支持三种主要的工作模式：VS/NAT（Network Address Translation）、VS/DR（Direct Routing）和VS/TUN（Tunneling）。 - **VS/NAT**： - 通过网络地址转换实现虚拟服务器。 - 这种模式下，所有的数据包都会经过...
4.LVS--NAT模式+DR模式.docx
06-30
本文将详细介绍 LVS 的两种主要工作模式——NAT 模式和 DR 模式，以及这两种模式下的具体操作流程。 #### 二、LVS 架构 LVS 主要包括三个组成部分： 1. **负载调度层**：由一台或多台调度器组成，负责接收来自...
LVS负载均衡集群——NAT模式——DR模式
鸡汤的博客
05-30 1235
LVS负载均衡--nat模式--DR模式一、负载均衡集群（1）集群的含义集群的含义（2）企业集群的分类1、负载均衡集群（Load Balance Cluster）2、高可用群集（High Availability Cluster）3、高可用运算群集（High Performance Computer Cluster）（3）负载均衡集群架构1、负载均衡的结构（4）负载均衡集群工作模式分析二、NAT模式（1）地址转换三、TUN模式IP隧道IP隧道四、DR模式直接路由关于LVS虚拟服务器(1) 概况(2) LVS
keepalived+lvs集群
qq_73990369的博客
09-24 1063
在两台机器（RS）上，添加一个路由：route add -host 192.168.229.100 dev lo 确保如果请求的目标IP是$VIP，那么让出去的数据包的源地址也显示为$VIP。192.168.229.11 dr1 负载均衡器 ----(master)192.168.229.12 dr2 负载均衡器 ----(backup)master上 查询 # ipvsadm -Ln。对四台虚拟机分别修改主机名。ipvsadm安装并不启动。ipvsadm安装并不启动。重新启动network。
keepalived+lvs集群，实现高可用
2201_75556224的博客
09-23 816
环境准备：两台虚拟机，关闭防火墙，selinux,配置阿里云仓库，配置epel192.168.88.21 dr1 负载均衡器 master192.168.88.22 dr2 负载均衡器 backup实验说明：给主机配置一个虚拟IP192.168.88.100 当访问虚拟IP时，可以访问到nginx服务器下的项目。当主机服务器宕机时，备用机可以代替主机工作。当主机nginx服务挂掉后，实现自动启动nginx服务，保持项目可以随时访问。
跑lvs出现soft connect怎么处理？
Albert66666的博客
09-24 759
如果有soft connect的话，lvs是没法pass的，会发现很多一堆std cell连接了错误的ground信号。那么这个时候，如果设计中涉及2个以上ground时，便可以往这个方向来debug。这里小编提供2种解决方法。第一种，按照图1所示，如果VSS和AVSS最终就是要接到一起的。为了过lvs，可以在VSS或者AVSS下方打上PSUB2，将这两个net的soft connect断开，如图2所示。如图1所示，VSS和AVSS都接到了p+上，它们通过psub便有了soft connect。
统信服务器操作系统【Cron定时任务服务】
RZer的博客
09-23 1179
Cron定时任务服务服务介绍、服务管理、服务配置
IPEmotion 2024 R2现支持Amazon S3和Windows SMB服务器
最新发布
WINDHILL风丘科技
09-27 305
新版IPEmotion 2024 R2软件推出了许多新功能，其中的一大功能是支持Amazon S3、Windows SMB服务器以及新的IPE-CAM-007 USB摄像头。IPEmotion 2024 R2还支持直接写入TEDS数据和配置可装载电池的新款IPE833记录仪。
LVS集群详解：NAT与DR模式配置与优化
“LVS/NAT与LVS/DR模式集群的概述与配置”...LVS/NAT和LVS/DR模式提供了灵活的负载均衡策略，能够应对不同规模和需求的服务场景。理解并掌握这些模式的配置和原理，对于构建和维护高可用、高性能的服务器集群至关重要。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Fish_1112

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值