7.Nginx keepalived部署高可用、原理

最新推荐文章于 2024-07-01 10:50:35 发布
最新推荐文章于 2024-07-01 10:50:35 发布
阅读量1.1k 收藏 1
点赞数
分类专栏： Nginx
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Stubborn_bull/article/details/118892079
版权

1、什么是nginx高可用

在这里插入图片描述

2、体系架构

  Keepalived是基于vrrp协议的一款高可用软件。Keepailived有一台主服务器和多台备份服务器，在主服务器和备份服务器上面部署相同的服务配置，使用一个虚拟IP地址对外提供服务，当主服务器出现故障时，虚拟IP地址会自动漂移到备份服务器。

  在Keepalived + Nginx高可用负载均衡架构中，keepalived负责实现High-availability (HA) 功能控制前端机VIP（虚拟网络地址），当有设备发生故障时，热备服务器可以瞬间将VIP自动切换过来，实际运行中体验只有2秒钟切换时间，DNS服务可以负责前端VIP的负载均衡。

  nginx负责控制后端web服务器的负载均衡，将客户端的请求按照一定的算法转发给后端Real Server处理，而Real Server将响应直接返回给客户端。

3、配置高可用的准备工作

  1、需要两台服务器192.168.3.3 和192.168.3.4

  2、在两台服务器安装nginx

  3、在两合服务器安装keepalived

4、keepalived主从配置、测试

  （1）修改（主）keepalived的配置文件keepalived.conf为：

global_defs {
        notification_email {
          acassen@firewall.loc
          failover@firewall.loc
          sysadmin@firewall.loc
        }
        notification_email_from Alexandre.Cassen@firewall.loc
        smtp_ server 192.168.3.3
        smtp_connect_timeout 30
        router_id LVS_DEVEL     # LVS_DEVEL这字段在/etc/hosts文件中看；通过它访问到主机
}

vrrp_script chk_http_ port {
        script "/etc/keepalived/nginx_check.sh"
        interval 2   # (检测脚本执行的间隔)2s
        weight 2  #权重，如果这个脚本检测为真，服务器权重+2
}

vrrp_instance VI_1 {
        state MASTER   # 备份服务器上将MASTER 改为BACKUP
        interface enp0s3  #  网卡名称
        virtual_router_id 51 # 主、备机的virtual_router_id必须相同
        priority 100   #主、备机取不同的优先级，主机值较大，备份机值较小
        advert_int 1    #每隔1s发送一次心跳
        authentication {        # 校验方式， 类型是密码，密码1111
        auth type PASS
        auth pass 1111
    }
        virtual_ipaddress { # 虛拟ip
                192.168.3.50 # VRRP H虛拟ip地址
        }
}

  （2）修改（从）keepalived的配置文件keepalived.conf为：

global_defs {
        notification_email {
          acassen@firewall.loc
          failover@firewall.loc
          sysadmin@firewall.loc
        }
        notification_email_from Alexandre.Cassen@firewall.loc
        smtp_ server 192.168.3.4
        smtp_connect_timeout 30
        router_id LVS_DEVEL     # LVS_DEVEL这字段在/etc/hosts文件中看；通过它访问到主机
}

vrrp_script chk_http_ port {
        script "/etc/keepalived/nginx_check.sh"
        interval 2   # (检测脚本执行的间隔)2s
        weight 2  #权重，如果这个脚本检测为真，服务器权重+2
}

vrrp_instance VI_1 {
        state BACKUP   # 备份服务器上将MASTER 改为BACKUP
        interface enp0s3  #  网卡名称
        virtual_router_id 51 # 主、备机的virtual_router_id必须相同
        priority 90   #主、备机取不同的优先级，主机值较大，备份机值较小
        advert_int 1    #每隔1s发送一次心跳
        authentication {        # 校验方式， 类型是密码，密码1111
        auth type PASS
        auth pass 1111
    }
        virtual_ipaddress { # 虛拟ip
                192.168.3.50 # VRRP H虛拟ip地址
        }
}

  （3）在两台（主从）的/etc/keepalived/下新建检测脚本 nginx_check.sh

  脚本说明：当nginx进程不存在时，会自动重启docker服务，docker服务启动时会自动启动nginx容器；再次检查nginx进程，如果不存在，就停止keepalived服务，然后NGINX_BACKUP主机会自动接替NGINX_MASTER的工作。

[root@localhost /]# cd etc/keepalived/
[root@localhost keepalived]# ls
keepalived.conf  nginx_check.sh
[root@localhost keepalived]# more nginx_check.sh 
#!/bin/bash
#version 0.0.1
#
A=`ps -C nginx --no-header |wc -l`
if [ $A -eq 0 ];then
     systemctl restart docker
      sleep 3
            if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then
                  systemctl stop keepalived
fi 
fi

  (4) 把两台服务器上nginx和keepalived启动

   启动nginx并访问：http://192.168.3.3/，http://192.168.3.4/
在这里插入图片描述

$ systemctl start keepalived.service #keepalived启动
$ ps -ef I grep keepalived #查看keepalived是否启动
$ service keepalived status #查看状态
$ systemctl stop keepalived.service #keepalived关闭

   查看主keepalived状态，虚拟ip已绑定192.168.17.50

[root@localhost keepalived]# systemctl start keepalived.service
[root@localhost keepalived]# service keepalived status
Redirecting to /bin/systemctl status keepalived.service
● keepalived.service - LVS and VRRP High Availability Monitor
   Loaded: loaded (/usr/lib/systemd/system/keepalived.service; disabled; vendor preset: disabled)
   Active: active (running) since Mon 2020-11-16 08:13:01 EST; 15s ago
  Process: 2977 ExecStart=/usr/sbin/keepalived $KEEPALIVED_OPTIONS (code=exited, status=0/SUCCESS)
 Main PID: 2978 (keepalived)
    Tasks: 3
   Memory: 1.4M
   CGroup: /system.slice/keepalived.service
           ├─2978 /usr/sbin/keepalived -D
           ├─2979 /usr/sbin/keepalived -D
           └─2980 /usr/sbin/keepalived -D

Nov 16 08:13:03 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:03 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:03 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:03 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: VRRP_Instance(VI_1) Sending/queueing gratuitous ARPs on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50

   查看备用：backup却没有绑定

[root@localhost keepalived]# systemctl start keepalived.service
[root@localhost keepalived]# service keepalived status
Redirecting to /bin/systemctl status keepalived.service
● keepalived.service - LVS and VRRP High Availability Monitor
   Loaded: loaded (/usr/lib/systemd/system/keepalived.service; disabled; vendor preset: disabled)
   Active: active (running) since Mon 2020-11-16 08:15:17 EST; 11s ago
  Process: 2355 ExecStart=/usr/sbin/keepalived $KEEPALIVED_OPTIONS (code=exited, status=0/SUCCESS)
 Main PID: 2356 (keepalived)
    Tasks: 3
   Memory: 1.4M
   CGroup: /system.slice/keepalived.service
           ├─2356 /usr/sbin/keepalived -D
           ├─2357 /usr/sbin/keepalived -D
           └─2358 /usr/sbin/keepalived -D

Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: Registering gratuitous ARP shared channel
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: Opening file '/etc/keepalived/keepalived.conf'.
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: Unknown keyword 'smtp_'
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: WARNING - default user 'keepalived_script' for script execution does not exist - please create.
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: Unknown keyword 'auth'
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: Unknown keyword 'auth'
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: VRRP_Instance(VI_1) removing protocol VIPs.
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: Using LinkWatch kernel netlink reflector...
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: VRRP_Instance(VI_1) Entering BACKUP STATE
Nov 16 08:15:17 localhost.localdomain Keepalived_vrrp[2358]: VRRP sockpool: [ifindex(2), proto(112), unicast(0), fd(10,11)]
Hint: Some lines were ellipsized, use -l to show in full.

   通过浏览器访问测试：http://192.168.3.50/可正常访问网站
在这里插入图片描述
  (5) 最终测试

  把主服务器(192.168.3.3) nginx和keealived停止

[root@localhost keepalived]# systemctl stop keepalived.service
[root@localhost keepalived]#  service keepalived status 
Redirecting to /bin/systemctl status keepalived.service
● keepalived.service - LVS and VRRP High Availability Monitor
   Loaded: loaded (/usr/lib/systemd/system/keepalived.service; disabled; vendor preset: disabled)
   Active: inactive (dead)

Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: VRRP_Instance(VI_1) Sending/queueing gratuitous ARPs on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:13:08 localhost.localdomain Keepalived_vrrp[2980]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:13 localhost.localdomain Keepalived[2978]: Stopping
Nov 16 08:21:13 localhost.localdomain systemd[1]: Stopping LVS and VRRP High Availability Monitor...
Nov 16 08:21:13 localhost.localdomain Keepalived_vrrp[2980]: VRRP_Instance(VI_1) sent 0 priority
Nov 16 08:21:13 localhost.localdomain Keepalived_vrrp[2980]: VRRP_Instance(VI_1) removing protocol VIPs.
Nov 16 08:21:14 localhost.localdomain systemd[1]: Stopped LVS and VRRP High Availability Monitor.
[root@localhost keepalived]# docker stop 802047bd7530
802047bd7530
[root@localhost keepalived]# docker ps
CONTAINER ID        IMAGE               COMMAND             CREATED             STATUS              PORTS               NAMES
[root@localhost keepalived]#

  查看从服务器（192.168.3.4）的keealived状态，已成功绑定虚拟ip

[root@localhost keepalived]# service keepalived status
Redirecting to /bin/systemctl status keepalived.service
● keepalived.service - LVS and VRRP High Availability Monitor
   Loaded: loaded (/usr/lib/systemd/system/keepalived.service; disabled; vendor preset: disabled)
   Active: active (running) since Mon 2020-11-16 08:15:17 EST; 10min ago
  Process: 2355 ExecStart=/usr/sbin/keepalived $KEEPALIVED_OPTIONS (code=exited, status=0/SUCCESS)
 Main PID: 2356 (keepalived)
    Tasks: 3
   Memory: 1.4M
   CGroup: /system.slice/keepalived.service
           ├─2356 /usr/sbin/keepalived -D
           ├─2357 /usr/sbin/keepalived -D
           └─2358 /usr/sbin/keepalived -D

Nov 16 08:21:15 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:15 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:15 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:15 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:20 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:20 localhost.localdomain Keepalived_vrrp[2358]: VRRP_Instance(VI_1) Sending/queueing gratuitous ARPs on enp0s3 for 192.168.3.50
Nov 16 08:21:20 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:20 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:20 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50
Nov 16 08:21:20 localhost.localdomain Keepalived_vrrp[2358]: Sending gratuitous ARP on enp0s3 for 192.168.3.50

  再输入http://192.168.3.50/访问，发现从服务器成功接替主服务器的工作
在这里插入图片描述

5、Nginx & keepalived高可用原理

  两台服务器均通过keepalived软件把enp0s3网卡绑上一个虚拟IP（VIP）地址192.168.2.242，此VIP当前由谁承载着服务就绑定在谁的enp0s3上，当NGINX_MASTER发生故障时，NGINX_BACKUP会通过/etc/keepalived/keepalived.conf文件中设置的心跳时间advert_int 1检查，无法获取NGINX_MASTER正常状态的话，NGINX_BACKUP会瞬间绑定VIP来接替nginx_master的工作，当NGINX_MASTER恢复后keepalived会通过priority参数判断优先权将虚拟VIP地址192.168.2.242重新绑定给NGINX_MASTER的ens32网卡。

使用此方案的优越性：

  1.实现了可弹性化的架构，在压力增大的时候可以临时添加web服务器添加到这个架构里面去;

  2.upstream具有负载均衡能力，可以自动判断后端的机器，并且自动踢出不能正常提供服务的机器；

  3.相对于lvs而言，正则分发和重定向更为灵活。而Keepalvied可保证单个nginx负载均衡器的有效性，避免单点故障；

  4.用nginx做负载均衡，无需对后端的机器做任何改动。

  5.nginx部署在docker容器里，即大量地节约开发、测试、部署的时间，又可以在出现故障时通过镜像快速恢复业务。

九宫格输入法
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
keepalived：简介、nginx+keepalived集群、nginx+keepalived双主架构
lichunliang的博客
08-15 3630
keepalived：简介、nginx+keepalived集群、nginx+keepalived双主架构 keepalived：简介、nginx+keepalived集群、nginx+keepalived双主架构 一、keepalived高可用简介 二、nginx+keepalived集群 1、原理及环境 2、安装配置 3、测试 三、nginx+keepalived双主架构 1、原...
nginx+keepalived实现高可用网站架构
weixin_44972135的博客
08-24 396
在负载均衡网站架构中，当负载均衡服务器（调度器）宕机之后，那所有经过调度器的网站全部崩了，所以构建一个高可用网站架构是必不可少的。架构图如下： Keepalived高可用故障切换转移原理 Keepalived高可用服务对之间的故障切换转移，是通过VRRP来实现的。在keepalived服务工作时，主Master节点会不断地向备节点发送（多播的方式）心跳消息，用来告诉备Backup节...
JAVAEE——宜立方商城03：Nginx负载均衡高可用、Keepalived+Nginx实现主备
depiaozhanyou66348的博客
07-22 233
1nginx负载均衡高可用 1.1什么是负载均衡高可用 nginx作为负载均衡器，所有请求都到了nginx，可见nginx处于非常重点的位置，如果nginx服务器宕机后端web服务将无法提供服务，影响严重。 为了屏蔽负载均衡服务器的宕机，需要建立一个备份机。主服务器和备份机上都运行高可用（High Availability）监控程序，通过传送诸如“I am alive”这样的信...
Keepalived介绍、安装和简单使用
dl_11的博客
06-14 910
​ Keepalived是一个基于VRRP协议来实现LVS服务高可用方案，可以利用其来避免单点故障。一个LVS服务会使用2台服务器运行Keepalived，一台为主服务器MASTER，另一台为备份服务器BACKUP，但是对外表现为一个虚拟IP，主服务器会发送特定的消息给备份服务器，当备份服务器收不到这个消息的时候，即主服务器宕机的时候，备份服务器就会接管虚拟IP，继续提供服务，从而保证高可用性。Keepalived是VRRP的完美实现。
【Linux】Nginx+Keepalive实现高可用的简单工作原理
Ariel_欢
12-30 2316
问题： 1.高可用解决什么问题？ 解决单点故障的问题------keepalived. （1）要有备份，从而当一个出现问题时，可以切换到另一个，解决单点故障的问题。 （2）要能够自动切换。 2.为什么要用keepalived? 1>安装和配置都简单，只有一个配置文件 2>keepalived可以实现自动切换，实现主从切换 keepalive缺点：但是如果是大规模的分布式项目的话，...
Nginx-03- Nginx+Keepalived高可用集群和基本原理
苍煜
08-22 1170
在浏览器访问虚拟IP192.168.66.99时即可访问到主Nginx服务器中的服务，即使主Nginx服务器挂了，也会自动连接到从Nginx服务器上，从而保证了Nginx的高可用，当主Nginx恢复正常时，会再次自动连接到主Nginx服务器上继续服务。我们知道使用nginx的反向代理和负载均衡可以解决tomcat服务器的单点故障问题，如，其中一台tomcat服务挂掉之后，nginx可以把全部的请求分配到其他服务器上，这样保证了高可用；当然，这里说的是最大连接数，对于。数相等是最为适宜的。
nginx+keepalived
zuo84526076的博客
01-05 127
基本概念+nginx+keepalived 什么是jre？ Java运行环境（Java Runtime Environment，简称JRE）的一个软件，JRE的内部有一个Java虚拟机（Java Virtual Machine，JVM）以及一些标准的类别函数库（Class Library）。 包含Java虚拟机，Java核心类库，支持文件 但是不包含开发工具JDK，调试器，和其他工具。 什么是jdk？ jdk（Java Development Kit），从字面意思翻译过来就是java开发的工具。可以这样理解
Nginx+keepalived实现高可用集群
江晓龙的博客
05-21 672
回顾部分 1.图解Nginx七层与四层 大型企业架构一般是用户先访问到四层负载均衡，在由四层负载均衡转发至七层服务在均衡，七层负载均衡再转发至后端服务器，四层负载均衡只起到一个分流的作用，根据用户访问的端口，比如说80端口就会跳转至七层的对应的集群，两台四层负载均衡配置是一模一样的，形成高可用，七层的配置也是一模一样的，当有1500个请求需要响应时，四层负载均衡就会平均将1500个请求分给急群中的lb，每个lb响应500个请求，减轻单点的压力。 负载均衡的选择 Nginx 四层和七层 LV
Nginx教程(4)—Keepalived
qq_43456605的博客
05-03 569
Keepalived
【 keepalive + Nginx实现高可用性及负载均衡原理介绍】
07-13 441
keepalive，是在TCP中一个可以检测死连接的机制。 keepalive原理： TCP会在空闲了一定时间后发送数据给对方： 1.如果主机可达，对方就会响应ACK应答，就认为是存活的。 2.如果可达，但应用程序退出，对方就发RST应答，发送TCP撤消连接。 3.如果可达，但应用程序崩溃，对方就发FIN消息。 4.如果对方主机不响应ack, rst，继续发送直到超时，就撤消连接。...
Nginx+Keepalived究根结底篇
qq_38226564的博客
06-26 1044
快速了解keepalive的使用原理和解决方案，在完全理解的情况下去运用技术做你想做的事情
Nginx+Keepalived实现站点高可用.pdf
05-17
Nginx+Keepalived实现站点高可用，内有详细操作步骤和解释
Nginx入门 -- 解析Nginx中的基本概念：Keepalive
qq_41586251的博客
04-08 1441
Keepalive是一种功能，用于在网络连接中保持持久的连接状态。通常，网络连接在完成请求-响应周期后会立即关闭，但Keepalive机制可以使连接保持打开状态，以便在后续的请求中重用。
nginx keepalived 高可用原理和实操
weixin_44834554的博客
05-17 1571
使用nginx-keepalived双机热备机制，vip主机可以进行漂移，这样当一台主机挂掉了，还有备用机可以使用，保证了服务的可靠性。通过本文的讲解应该对高可用方案有了较深刻的理解，希望能够对你有所帮助。
Nginx+Keepalived高可用集群
java面试笔试
07-25 393
Java面试笔试面经、Java技术每天学习一点Java面试关注不迷路作者：10pcm来源：https://blog.51cto.com/superpcm1. Keepalived高可用软...
nginx+keepalived负载均衡可用框架（补一 keepalived安装配置-热备-（服务器层和应用层））
motian06的专栏
01-08 5870
keepalived实现热备 互备 应用层互备 服务器层热备 调用检测脚本来实现MASTER与BACKUP（主备切换）
nginx+keepalived高可用
最新发布
qq_61314298的博客
07-01 916
两台服务器上的keepalive是靠相互通讯来判断的，如果一台服务器上keepalived挂掉了,keepalived就会把虚拟的ip就会转移到备用的nginx服务器上，实现服务转移。keepalive只能相互检查对方的进程是否还存活，所以对nginx没有任何一点监控作用，当nginx宕机后，keepalived进程还存活着就会导致web项目无法访问，所以后续需要编写一个shell脚本来完成对nginx进程的判断。在高可用架构中，Nginx 常用作前端的负载均衡器，将流量分发到多个后端服务器上。
（转载）Nginx——Nginx主从，双主高可用架构实战
ganjing222的博客
01-02 621
vrrp_script模块参数告诉 keepalived 在什么情况下切换，所以尤为重要。可以有多个 vrrp_scriptscript ： 自己写的检测脚本。也可以是一行命令如killall -0 nginxinterval 2： 每2s检测一次weight -5 ： 检测失败（脚本返回非0）则优先级 -5fall 2： 检测连续 2 次失败才算确定是真失败。会用weight减少优先级（1-255之间）rise 1 ： 检测 1 次成功就算成功。
Linux_Keepalived 安装笔记
zhiguoliu11的专栏
05-24 2229
环境：Vmware Workstation 10，CentOS-7-x86_64-DVD-1511.iso，Xshell 4.0，ip1：192.168.216.140. [root@localhost ~]# yum list ipvsadm* 可安装的软件包 ipvsadm.x86_64
Keepalived+Nginx+Tomcat 高可用集群搭建实践教程
本文档详细记录了在Linux环境下使用Keepalived配置Nginx和Tomcat实现高可用集群的实战过程。首先，作者从Tomcat高可用集群的准备工作开始，包括软件环境的设置，如在CentOS 7.7系统上安装必要的依赖软件，如GCC、...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值