【LVS + Keepalived 群集】

最新推荐文章于 2024-05-06 18:40:49 发布
最新推荐文章于 2024-05-06 18:40:49 发布
阅读量1.1k 收藏
点赞数 1
文章标签： lvs 智能路由器 网络
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dikl_y/article/details/131155146
版权

目录

一、Keepalived 案列分析

企业应用中，单台服务器承担应用存在单点故障的危险

单点故障一旦发生，企业服务将发送中断，造成极大的危害
在这里插入图片描述

二、Keeoalived 工具介绍

专门为LVS 和 HA 设计的一款健康检查工具

支持故障自动切换
支持节点的健康状态检查

1、keepalived 实现原理剖析

keepalived 采用VRRP热备份协议实现Linux 服务器的多机热备功能
在这里插入图片描述

2、VRRP （虚拟路由冗余协议）是指对路由器的一种备份解决方案

由多台路由器组成一个热备组，通过共用的虚拟IP地址对外提供服务

每个热备组内同时只有一台主路由器提供服务，其他路由器处于几余状态

若当前在线的路由器失效，则其他路由器会根据设置的优先级自动接替虚拟IP地址，继续提供服务

3、keepalived 案例讲解

双机热备的故障切换是由虚拟IP地址的飘逸来实现，使用于各种应用服务器

实现基于web 服务的双机热备

飘移地址：192.168.10.72
主，备服务器：192.168.10.73、192.168.10.74
提供的应用服务：web

在这里插入图片描述

4、keepalived 的安装与启动

在LVS 群集环境中应用时，也需要ipvsadm 管理工具

使用yum 进行安装 keepalived

启动keepalived 服务

5、Keepalived及其工作原理

Keepalived 是一个基于VRRP协议来实现的LVS服务高可用方案，可以解决静态路由出现的单点故障问题。

在一个LVS服务集群中通常有主服务器（MASTER）和备份服务器（BACKUP）两种角色的服务器，但是对外表现为一个虚拟IP（VIP），主服务器会发送VRRP通告信息给备份服务器，当备份服务器收不到VRRP消息的时候，即主服务器异常的时候，备份服务器就会接管虚拟IP，继续提供服务，从而保证了高可用性。

Keepalived体系主要模块及其作用

keepalived体系架构中主要有三个模块，分别是core、check和vrrp。

●core模块：为keepalived的核心，负责主进程的启动、维护及全局配置文件的加载和解析。

●vrrp模块：是来实现VRRP协议的。（调度器之间的健康检查和主备切换）

●check模块：负责健康检查，常见的方式有端口检查及URL检查。（节点服务器的健康检查）

三、LVS+Keepalived 高可用群集

主DR 服务器：192.168.102.50
备DR 服务器：192.168.102.40
Web 服务器1：192.168.102.10
Web 服务器2：192.168.102.20
vip：192.168.102.188
客户端：192.168.102.200

1.配置负载调度器（主、备相同）

关闭防火墙

systemctl stop firewalld.service
setenforce 0

安装服务

yum -y install ipvsadm keepalived

开启ipvsadm服务

modprobe ip_vs
cat /proc/net/ip_vs

（1）配置keeplived 主DR服务器

进入keepalived 目录，给里面的内容备份

cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak

进入配置文件里修改

vim keepalived.conf

global_defs {						#定义全局参数
--10行--修改，邮件服务指向本地
	smtp_server 127.0.0.1
--12行--修改，指定服务器（路由器）的名称，主备服务器名称须不同，主为LVS_01，备为LVS_02
	router_id LVS_01
--14行--注释掉，取消严格遵守VRRP协议功能，否则VIP无法被连接
	#vrrp_strict
}

vrrp_instance VI_1 {				#定义VRRP热备实例参数
--20行--修改，指定热备状态，主为MASTER，备为BACKUP
    state MASTER
--21行--修改，指定承载vip地址的物理接口
    interface ens33
--22行--修改，指定虚拟路由器的ID号，每个热备组保持一致	
    virtual_router_id 10
	#nopreempt		#如果设置非抢占模式，两个节点state必须为BACKUP，并加上配置 nopreempt
--23行--修改，指定优先级，数值越大优先级越高，这里设置主为100，备为90
    priority 100
    advert_int 1					#通告间隔秒数(心跳频率)
    authentication {				#定义认证信息,每个热备组保持一致
		auth_type PASS				#认证类型
--27行--修改，指定验证密码，主备服务器保持一致
        auth_pass abc123
    }
    virtual_ipaddress {				#指定群集vip地址
        192.168.102.188
    }
}
--36行--修改，指定虚拟服务器地址(VIP)、端口，定义虚拟服务器和Web服务器池参数
virtual_server 192.168.102.188 80 {
    delay_loop 6					#健康检查的间隔时间(秒)
    lb_algo rr						#指定调度算法，轮询(rr)
--39行--修改，指定群集工作模式，直接路由(DR)
    lb_kind DR
    persistence_timeout 0			#连接保持时间(秒)
    protocol TCP					#应用服务采用的是 TCP协议
--43行--修改，指定第一个Web节点的地址、端口
    real_server 192.168.102.10 80 {
        weight 1					#节点的权重
--45行--删除，添加以下健康检查方式		
        TCP_CHECK {
			connect_port 80			#添加检查的目标端口
			connect_timeout 3		#添加连接超时(秒)
			nb_get_retry 3			#添加重试次数
			delay_before_retry 3	#添加重试间隔
		}
	}

	real_server 192.168.102.20 80 {		#添加第二个 Web节点的地址、端口
        weight 1
        TCP_CHECK {
			connect_port 80
			connect_timeout 3
			nb_get_retry 3
			delay_before_retry 3
		}
	}
##删除后面多余的配置##
}

在这里插入图片描述

在这里插入图片描述

修改完后重新启动服务

systemctl start keepalived
systemctl enable keepalived.service

查看虚拟网卡 vip

ip addr

查看到在主的上面增加了一个虚拟网卡 vip
在这里插入图片描述

（2）配置keeplived 备DR服务器

关闭防火墙

systemctl stop firewalld.service
setenforce 0

安装服务

yum -y install ipvsadm keepalived

开启ipvsadm服务

modprobe ip_vs
cat /proc/net/ip_vs

进入keepalived 目录，给里面的内容备份

cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak

进入配置文件里修改

vim keepalived.conf

在这里插入图片描述在这里插入图片描述

修改完后重新启动服务

systemctl start keepalived
systemctl enable keepalived.service

查看虚拟网卡 vip

ip addr

在这里插入图片描述

（3）启动 ipvsadm 服务

192.168.102.50 主调度器

ipvsadm-save > /etc/sysconfig/ipvsadm
systemctl start ipvsadm

ipvsadm -ln
#如没有VIP 的分发策略，则重启 keepalived 服务，systemctl restart keepalived

在这里插入图片描述

192.168.102.40 备调度器

ipvsadm-save > /etc/sysconfig/ipvsadm
systemctl start ipvsadm

ipvsadm -ln

在这里插入图片描述

（4）调整 proc 响应参数，关闭Linux 内核的重定向参数响应

vim /etc/sysctl.conf

加入配置文件

net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

重新加载

sysctl -p

2.配置节点服务器（192.168.102.10,192.168.102.20）

配置节点服务器1

关闭防火墙

systemctl stop firewalld
setenforce 0

安装一个服务器

yum -y install httpd
systemctl start httpd

在节点服务器1 上写入网页内容

echo 'this is benet web!' > /var/www/html/index.html

在这里插入图片描述
创建一个虚拟网卡

cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0		

vim ifcfg-lo:0

DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.102.188
NETMASK=255.255.255.255

注意：子网掩码必须全为1

启动虚拟网卡，并添加路由，将发送给vip地址的包从虚拟网卡回环地址发送（将访问vip的数据限制在本地以免arp混乱）
单独启动网卡设置

ifup lo:0
ifconfig lo:0

添加到rc.local 开机自动加载上面的限制命令 （永久添加）

vim /etc/rc.d/rc.local

route add -host 192.168.102.188 dev lo:0

在这里插入图片描述

加入权限

chmod +x /etc/rc.d/rc.local

调整内核的 ARP 响应参数以阻止更新 VIP 的 MAC 地址，避免发生冲突

vim /etc/sysctl.conf

net.ipv4.conf.lo.arp_ignore = 1			#系统只响应目的IP为本地IP的ARP请求
net.ipv4.conf.lo.arp_announce = 2		#系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2

net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2

刷新配置

sysctl -p

配置节点服务器2

关闭防火墙

systemctl stop firewalld
setenforce 0

安装一个服务器

yum -y install httpd
systemctl start httpd

在节点服务器2 上写入网页内容

echo 'this is dai web!' > /var/www/html/index.html

在这里插入图片描述
创建一个虚拟网卡

cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0		

vim ifcfg-lo:0

DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.102.188
NETMASK=255.255.255.255

注意：子网掩码必须全为1

启动虚拟网卡，并添加路由，将发送给vip地址的包从虚拟网卡回环地址发送（将访问vip的数据限制在本地以免arp混乱）
单独启动网卡设置

ifup lo:0
ifconfig lo:0

添加到rc.local 开机自动加载上面的限制命令 （永久添加）

vim /etc/rc.d/rc.local

route add -host 192.168.102.188 dev lo:0

在这里插入图片描述

加入权限

chmod +x /etc/rc.d/rc.local

调整内核的 ARP 响应参数以阻止更新 VIP 的 MAC 地址，避免发生冲突

vim /etc/sysctl.conf

net.ipv4.conf.lo.arp_ignore = 1			#系统只响应目的IP为本地IP的ARP请求
net.ipv4.conf.lo.arp_announce = 2		#系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2

net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2

刷新配置

sysctl -p

使用浏览器进行测试

在客户端访问 http://192.168.102.188/
再在主服务器关闭 keepalived 服务后再测试， systemctl stop keepalived
在这里插入图片描述

Keepalived通过什么判断哪台主机为主服务器,通过什么方式配置浮动IP？

答案:
Keepalived首先做初始化先检查state状态，master为主服务器，backup为备服务器。
然后再对比所有服务器的priority，谁的优先级高谁是最终的主服务器。
优先级高的服务器会通过ip命令为自己的电脑配置一个提前定义好的浮动IP地址。

四、keepalived的抢占与非抢占模式

抢占模式即MASTER从故障中恢复后，会将VIP从BACKUP节点中抢占过来。非抢占模式即MASTER恢复后不抢占BACKUP升级为MASTER后的VIP
非抢占式俩节点state必须为bakcup，且必须配置nopreempt。
注意：这样配置后，我们要注意启动服务的顺序，优先启动的获取master权限，与优先级没有关系了。

五、nginx 的keepalived配置

1、配置调度器1 （192.168.102.50）

安装nginx

vim /etc/yum.repos.d/nginx.repo

[nginx-stable]
name=nginx stable repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
enabled=1

yum install -y nginx

进入nginx的配置文件里添加内容，实现4层代理

cd /etc/nginx
vim nginx.conf

stream{
    upstream backend{
         server 192.168.102.10:80;
         server 192.168.102.20:80;

    }
        server{
             listen 8080;
             proxy_pass backend;
         }
}

在这里插入图片描述

配置完后重新启动服务，并查看端口有没有打开
在这里插入图片描述

使用别的客户端主机访问 192.168.102.50 看有没有实现转发
在这里插入图片描述
在keepalived 的目录里写下一个脚本

#!/bin/bash
if !  killall -0 nginx
then
    systemctl stop keepalived
fi

给脚本加上权限

chmod +x nginx.sh

进入 keepalived 的配置文件里修改

vim keepalived.conf

! Configuration File for keepalived

global_defs {
   notification_email {
     acassen@firewall.loc
     failover@firewall.loc
     sysadmin@firewall.loc
   }
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id LVS_01
   #vrrp_skip_check_adv_addr
   #vrrp_strict
   #vrrp_garp_interval 0
   #vrrp_gna_interval 0
}

vrrp_script chk_nginx {
      script "/etc/keepalived/nginx.sh"
      interval 2
      weight 2
}

vrrp_instance VI_1 {
    state MASTER
    interface ens33
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.102.188
    }
   track_script {
          chk_nginx
     }

}

2、配置调度器2 （192.168.102.40）

安装nginx

vim /etc/yum.repos.d/nginx.repo

[nginx-stable]
name=nginx stable repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
enabled=1

yum install -y nginx

进入nginx的配置文件里添加内容，实现4层代理

cd /etc/nginx
vim nginx.conf

stream{
    upstream backend{
         server 192.168.102.10:80;
         server 192.168.102.20:80;

    }
        server{
             listen 8080;
             proxy_pass backend;
         }
}

在这里插入图片描述

配置完后重新启动服务，并查看端口有没有打开
在这里插入图片描述

使用别的客户端主机访问 192.168.102.40 看有没有实现转发
在这里插入图片描述

在keepalived 的目录里写下一个脚本

#!/bin/bash
if !  killall -0 nginx
then
    systemctl stop keepalived
fi

给脚本加上权限

chmod +x nginx.sh

进入nginx的配置文件里添加内容，实现4层代理

cd /etc/nginx
vim nginx.conf

stream{
    upstream backend{
         server 192.168.102.10:80;
         server 192.168.102.20:80;

    }
        server{
             listen 8080;
             proxy_pass backend;
         }
}

进入 keepalived 的配置文件里修改

vim keepalived.conf

! Configuration File for keepalived

global_defs {
   notification_email {
     acassen@firewall.loc
     failover@firewall.loc
     sysadmin@firewall.loc
   }
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id LVS_02
   #vrrp_skip_check_adv_addr
   #vrrp_strict
   #vrrp_garp_interval 0
   #vrrp_gna_interval 0
}

vrrp_script chk_nginx {
      script "/etc/keepalived/nginx.sh"
      interval 2
      weight 2

}

vrrp_instance VI_1 {
    state BACKUP
    interface ens33
    virtual_router_id 51
    priority 90
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.102.188
    }
   track_script {
          chk_nginx
     }

}

使用客户机访问 192.168.102.188 看有没有通过脚本的模式来实现负载均衡
在这里插入图片描述

桦皪
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
基于LVS+keepalived群集
09-25
这个文档时本人亲自编写的··· 经过本人测试KEEPALIVED的实验后 编写的实验报告！利用本文档可以理解到LVS的搭建方式
(带目录版)MySQL LVS+Keepalived+MHA 高可用群集 应用部署操作手册
04-07
(带目录版)MySQL LVS+Keepalived+MHA 高可用群集 应用部署操作手册
LVS+Keepalived群集
一两风的博客
09-11 290
当MASTER节点出现网络堵塞等现象时，BACKUP节点因无法及时检测到MASTER节点的heartbeat而认为MASTER节点已经挂掉了，就抢来了MASTER节点的VIP，并接管了MASTER节点的资源。而MASTER节点认为自己还是正常的，这就出现了同一个服务集群中，同一个VIP地址同时飘在两个节点上的现象，即产生了两个MASTER节点，正常情况下是一个节点对外提供服务，现在也变成了两个节点能同时被用户访问到，对于一个集群同时存在两个MASTER状态的现象，我们称之为脑裂。
LVS+Keepalived 群集及搭建
Katie_ff的博客
07-06 1150
keepalived的作用是解决单点故障、在调度器上配置keepalived即可相当于ARRP的主备份，主挂了，数据流就会转到备主机，keepalived可以用在组件中：mysql、nginx、Tomcat），高可用，实现故障转移。 主要的模块有三个： （1）core模块:为keepalived的核心 ，负责主进程启动，维护全局配置文件，加载和解析 （2）VRRP 模块:来实现VRRP协议 （3）check 模块:负责健康检查 常见的检查方式， 比如：端口 URL
LVS+Keepalived群集实验
m0_54594153的博客
09-06 3093
keeplived 软件起初是专门为LVS 负载均衡 软件设置的，用来管理并监控LVS集群中各个服务节点的状态，后来加入了可以实现高可用的VRRP 功能。因此，keepalived除了能管理LVS 集群以外，还可以为其它服务（如：Nginx、Haproxy、Mysql等）实现高可用。keepalived 软件主要是通过 VRRP 协议 实现高可用的功能。
LVS+Keepalived 群集部署
yunxi115的博客
05-04 319
keepalived 软件起初是专为 LVS 负载均衡软件设计的，用来管理并监控 LVS集群中各个服务节点的状态，后来又加入了可以实现高可用的 VRRP 功能。因此，keepalived 除了能够管理 LVS集群外，还可以为其他服务（例如：Nginx、Haproxy、MySQL等）实现高可用。keepalived 软件主要是通过 VRRP 协议实现高可用功能的。
LVS + Keepalived群集
zmac111的博客
06-17 256
LVS + Keepalived群集一、概述二、Keepalived实现原理三、LVS+Keepalived 高可用群集配置及实操配置负载调度器（主、备相同）配置节点服务器验证 一、概述 Keepalived工具 （1）支持故障自动切换（Failover） （2）支持节点健康状态检查（Health Checking） 判断LVS负载调度器、节点服务器的可用性，当master主机出现故障及时切换到backup节点保证业务正常，当 master 故障主机恢复后将其重新加入群集并且业务重新切换回 master 节
LVS+Keepalived高可用群集部署
m0_71593537的博客
09-20 973
LVS+Keepalived高可用群集部署
LVS+Keepalived高可用群集
Yusheng9527的博客
02-09 803
LVS+Keepalived高可用群集 应用环境Keepalived工具介绍Keepalived工作原理剖析Keepalived体系主要模块及作用部署LVS+Keepalived高可用群集部署准备配置负载调度器（主、备类似）关闭防火墙和安全功能加载ip_vs模块调整proc响应参数配置keepalived（主、备都要设置）配置节点服务器（192.168.80.13/14）配置虚拟IP地址（VIP：192.168.80.100）添加路由调整内核的ARP响应参数部署web共享服务客户端访问 应用环境 1.企业应
LVS+keepalived群集
2301_76352247的博客
12-20 1456
在一个LVS服务集群中通常有主服务器（MASTER）和备份服务器（BACKUP）两种角色的服务器，但是对外表现为一个虚拟IP（VIP），主服务器会发送VRRP通告信息给备份服务器，当备份服务器收不到VRRP消息的时候，即主服务器异常的时候，备份服务器就会接管虚拟IP，继续提供服务，从而保证了高可用性。原因：因为主服务器和备服务器之间的通信链路中断，导致备服务器无法收到主服务器发送的VRRP通告消息，备服务器误认为主服务器故障了并通过IP命令生成VIP。主服务器挂了，备服务器正常使用，并且脚本运行成功。
Lvs+keepalived群集
2302_79748698的博客
12-19 983
在一个LVS服务集群中通常有主服务器（master）和备份服务器（backup）两种服务器，但是对外表现为一个虚拟IP（VIP），主服务器会发送VRRP通告信息给备份服务器，当备份服务器收不到VRRP消息的时候，即主服务器异常的时候，备份服务器就会接管虚拟IP，继续提供服务，从而保证了高可用性。原因：因为主服务器和备服务器之间的通信链路中断，导致备服务器无法收到主服务发送的VRRP消息，备服务器误认为主服务器故障，并通过ip命令生成VIP。在网络不好的情况下，主备服务器会来回切换，会导致数据的丢失。
LVS+keepalived群集教程（原创）
06-06
这份文档是本人 原创 经过实验 按照此文档 可以成功搭建 LINUX 下的 LVS群集
keepalived+lvs搭建web群集
04-23
搭建多台lvs使用keepalived的优先级实现lvs的高可用性，并通过lvs自带的算法与权重来决定由哪台web处理该网页请求
lvs+keepalived的配置
12-14
lvs+keepalived的配置 是linux最常用也是最实用的技术 达到群集负载均衡 本文比较详细
Keepalived实现LVS高可用
weixin_72583321的博客
05-06 791
Keepalived和LVS共同构建了一个高效的负载均衡和高可用性解决方案：LVS作为负载均衡器，负责在集群中的多个服务器间分配流量，以其高性能和可扩展性确保应用程序能够处理大量的并发请求；而Keepalived则作为高可用性保证，通过VRRP协议监控LVS服务的状态并在主服务器发生故障时自动进行故障转移，确保服务的持续可用性和无感知切换。这种结合利用了两者的优势，为关键的网络服务提供了一个稳定、可靠且高效的运行环境。
OSPF邻居邻接关系
qq_70985855的博客
05-06 747
OSPF网络中，路由器在发送任何链路状态信息之前，必须先建立起正确的OSPF邻居邻接关系。OSPF路由器是使用Hello报文来建立邻居关系的。OSPF路由器会检查所收到的Hello报文中各种参数，如Router-ID、Area-ID、认证信息、网络掩码、Hello时间间隔等。如果这些参数和接收接口上配置的对应参数都一一保持一致，则邻居关系就会建立起来，否则就无法建立起邻居关系。OSPF路由器的邻居建立完成之后，下一步才是建立邻接关系。
Dragonfly 拓扑的路由算法
Messiah___的博客
05-05 1038
John Kim, William J. Dally 等人在 2008 年的 ISCA 中提出技术驱动、高度可扩展的 Dragonfly 拓扑。而文章中也提到了 针对 Dragonfly 拓扑的路由算法。本文对其中提到的路由算法进行汇总归纳。主要是讨论蜻蜓拓扑的最小和非最小路由算法。
（网络初识）
最新发布
weixin_73775528的博客
05-06 750
协议分层类似于打电话时，
解决网络ping不通问题
明静致远
05-05 869
如果你的网络中使用了NAT，可以尝试配置端口转发或者端口映射来将ping请求从外部网络转发到内部网络中的目标设备。在路由器的管理界面或者设置页面中，可以找到相应的端口转发或者端口映射设置，并将ping请求转发到目标设备的IP地址。：防火墙设置可能阻止ping请求通过，如果设备上启用了防火墙并且设置不正确，ping请求可能会被阻止。：如果设备的IP地址配置错误，包括IP地址冲突或子网掩码设置错误，可能导致ping不通。：路由器或交换机上的ACL设置可能阻止特定类型的流量通过，包括ping请求。
lvs+keepalived
04-25
1. 在LVS+Keepalived架构中，有一个或多个前端负载均衡器（Load Balancer），它们负责接收客户端请求并将请求转发给后端真实服务器。 2. 前端负载均衡器使用LVS技术进行请求的分发，根据一定的负载均衡算法（如轮询...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值