Nacos+ApiSix docker 集群环境搭建(docker-compose方式)

已于 2023-01-11 09:07:26 修改
阅读量3.3k 收藏 7
点赞数 2
文章标签： docker 运维 容器
于 2023-01-10 18:02:18 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013480019/article/details/128633596
版权

Nacos ApiSix docker集群环境搭建(docker-compose方式)

集群流程（我采用SLB做负载均衡，也可自行配置nginx做负载）：

nginx负载均衡的配置参考如下（仅供参考）：


#user  nobody;
worker_processes  1;

#error_log  logs/error.log;
#error_log  logs/error.log  notice;
#error_log  logs/error.log  info;

#pid        logs/nginx.pid;


events {
    worker_connections  1024;
}


http {
    include       mime.types;
    default_type  application/octet-stream;

	log_format  main  '$remote_addr - $remote_user [$time_iso8601] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';
					  

    #access_log  logs/access.log  main;


    sendfile        on;
    #tcp_nopush     on;

    #keepalive_timeout  0;
    keepalive_timeout  65;

    #gzip  on;
	upstream apisix{
			ip_hash;
			server 12.10.8.92:9000 weight=1;
			server 12.10.8.93:9000 weight=2;
			server 12.10.8.93:9000 weight=3;

			}
	upstream nacos{
			ip_hash;
			server 12.10.8.92:8848 weight=1;
			server 12.10.8.93:8848 weight=2;
			server 12.10.8.94:8848 weight=3;

			}
	
    server {
        listen       8080;
        server_name  localhost;

        #charset koi8-r;
		if ($time_iso8601 ~ '(\d{4}-\d{2}-\d{2})') {
                set $time $1;
		}
		access_log  logs/$time.access.log  main;
        #access_log  logs/host.access.log  main;
		


        location / {
			proxy_pass http://apisix/;
            #proxy_set_header Host $host;
			proxy_set_header Host $host:$server_port;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        }
		

        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }


    }

    server {
        listen 8082 ;
        client_max_body_size 20M;
        proxy_read_timeout 600s;


		
        #charset koi8-r;
		if ($time_iso8601 ~ '(\d{4}-\d{2}-\d{2})') {
                set $time $1;
		}
		access_log  logs/$time.access.log  main;
        #access_log  logs/host.access.log  main;
		


        location / {
			proxy_pass http://nacos/;
		
		}
        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }


    }



}

环境安装：

IP地址

需安装服务（仅限docker方式）

备注

12.10.8.92

Docker+docker-compose+Apisix+nacos，etcd, dashboard, Grafana, prometheus

红色为必装服务

12.10.8.93

Docker+docker-compose+Apisix+nacos，etcd,dashboard,Grafana, prometheus等

红色为必装服务

12.10.8.94

Docker+docker-compose+Apisix+nacos，etcd,dashboard,Grafana, prometheus等

红色为必装服务

安装docker：https://blog.csdn.net/BThinker/article/details/123358697

安装docker-compose: https://blog.csdn.net/pushiqiang/article/details/78682323

Docker 配置：

mkdir -p /etc/docker/

vim /etc/docker/daemon.json

#需要配置docker和docker-compose的默认网段,避免网段冲突，daemon.json添加以下内容。

{ "registry-mirrors": ["https://hub-mirror.c.163.com"],

  "bip": "192.168.0.1/24",

  "default-address-pools": [{"base":"10.10.0.0/16","size":24}]

}

docke-compose方式安装APISIX：

创建安装目录：

mkdir -p /data/soft/

cd  /data/soft/

通过 git 命令克隆 apisix-docker 仓库：

git clone https://github.com/apache/apisix-docker.git

cd apisix-docker/example

vim docker-compose.yml

然后在docker-compose.yml里配置etcd集群（由于网上无任何docker安装方式的apisix集群配置，下面配置都是自行研究而来，如有错误还请指正）。

这里遇到一个问题，官方配置apache/apisix:latest拉取的版本和etcd版本由冲突，需要修改docker-compose.yml下APISIX镜像的版本，如：apache/apisix:3.0.0-centos

  apisix:
    image: apache/apisix:3.0.0-centos
    restart: always
    volumes:
      - ./apisix_log:/usr/local/apisix/logs
      - ./apisix_conf/config.yaml:/usr/local/apisix/conf/config.yaml:ro
    depends_on:
      - etcd
    ##network_mode: host
    ports:
      - "9180:9180/tcp"
      - "9080:9080/tcp"
      - "9091:9091/tcp"
      - "9443:9443/tcp"
      - "9092:9092/tcp"
    networks:
      apisix:

节点1 ETCD集群配置：  

etcd:

    image: bitnami/etcd:3.4.15

    restart: always

    volumes:

      - etcd_data:/bitnami/etcd

    environment:

      ETCD_NAME: "etcd1"

      ETCD_ENABLE_V2: "true"

      ALLOW_NONE_AUTHENTICATION: "yes"

      ETCD_INITIAL_CLUSTER_STATE: "new"

      ETCD_ADVERTISE_CLIENT_URLS: "http://12.10.8.92:2379"

      ETCD_INITIAL_ADVERTISE_PEER_URLS: "http://12.10.8.92:2380"

      ETCD_LISTEN_CLIENT_URLS: "http://0.0.0.0:2379"

      ETCD_INITIAL_CLUSTER_TOKEN: "etcd-cluster"

      ETCD_LISTEN_PEER_URLS: "http://0.0.0.0:2380"

      ETCD_INITIAL_CLUSTER: "etcd1=http://12.10.8.92:2380,etcd2=http://12.10.8.93:2380,etcd3=http://12.10.8.94:2380"

    ports:

      - "2379:2379/tcp"

      - "2380:2380/tcp"

    networks:

      apisix:

节点2 ETCD集群配置：

  etcd:

    image: bitnami/etcd:3.4.15

    restart: always

    volumes:

      - etcd_data:/bitnami/etcd

    environment:

      ETCD_NAME: "etcd2"

      ETCD_ENABLE_V2: "true"

      ALLOW_NONE_AUTHENTICATION: "yes"

      ETCD_INITIAL_CLUSTER_STATE: "new"

      ETCD_ADVERTISE_CLIENT_URLS: "http://12.10.8.93:2379"

      ETCD_INITIAL_ADVERTISE_PEER_URLS: "http://12.10.8.93:2380"

      ETCD_LISTEN_CLIENT_URLS: "http://0.0.0.0:2379"

      ETCD_INITIAL_CLUSTER_TOKEN: "etcd-cluster"

      ETCD_LISTEN_PEER_URLS: "http://0.0.0.0:2380"

      ETCD_INITIAL_CLUSTER: "etcd1=http://12.10.8.92:2380,etcd2=http://12.10.8.93:2380,etcd3=http://12.10.8.94:2380"

    ports:

      - "2379:2379/tcp"

      - "2380:2380/tcp"

    networks:

      apisix:

节点3 ETCD集群配置：

  etcd:

    image: bitnami/etcd:3.4.15

    restart: always

    volumes:

      - etcd_data:/bitnami/etcd

    environment:

      ETCD_NAME: "etcd3"

      ETCD_ENABLE_V2: "true"

      ALLOW_NONE_AUTHENTICATION: "yes"

      ETCD_INITIAL_CLUSTER_STATE: "new"

      ETCD_ADVERTISE_CLIENT_URLS: "http://12.10.8.94:2379"

      ETCD_INITIAL_ADVERTISE_PEER_URLS: "http://12.10.8.94:2380"

      ETCD_LISTEN_CLIENT_URLS: "http://0.0.0.0:2379"

      ETCD_INITIAL_CLUSTER_TOKEN: "etcd-cluster"

      ETCD_LISTEN_PEER_URLS: "http://0.0.0.0:2380"

      ETCD_INITIAL_CLUSTER: "etcd1=http://12.10.8.92:2380,etcd2=http://12.10.8.93:2380,etcd3=http://12.10.8.94:2380"

    ports:

      - "2379:2379/tcp"

      - "2380:2380/tcp"

    networks:

      apisix:

注意：各个节点etcd的2379和2380需要互通。ETCD_LISTEN_PEER_URLS和ETCD_LISTEN_CLIENT_URLS的IP最好是0.0.0.0如果按网上或者官方的配置会导致启动失败。

配置APISIX的配置文件（三个节点都需要修改）：

/data/soft/apisix-docker/example/apisix_conf/config.yaml

修改config.yaml的etcd如下：  

etcd:

    host:

      - "http://12.10.8.92:2379"

      - "http://12.10.8.93:2379"

      - "http://12.10.8.94:2379"

        # multiple etcd address

    prefix: "/apisix"               # apisix configurations prefix

timeout: 30                     # 30 seconds

配置dashboard的配置文件（三个节点都需要修改）：

/data/soft/apisix-docker/example/dashboard_conf/conf.yaml 

  etcd:

    endpoints:

      - "http://12.10.8.92:2379"

      - "http://12.10.8.93:2379"    

      - "http://12.10.8.94:2379"    

配置完成，启动APISIX（三个节点都需要启动）：

cd /data/soft/apisix-docker/example

docker-compose -p docker-apisix up -d

安装完成后，你可以在运行 Docker 的宿主机上执行 curl 命令访问 Admin API，根据返回数据判断 APISIX 是否成功启动。X-API-KEY在apisix_conf/config.yaml配置文件里可找到。

# 注意：请在运行 Docker 的宿主机上执行 curl 命令。

curl "http://127.0.0.1:9180/apisix/admin/services/" -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1'

如果返回数据如下所示，则表示 APISIX 成功启动：

{
  "count":0,
  "node":{
    "key":"/apisix/services",
    "nodes":[],
    "dir":true
  }
}

验证etcd集群：

  1. 进入etcd 容器内：
  2. docker exec -it *****  /bin/bash
  3. 运行下面命令查看节点状态
  4. etcdctl member list

  5. 显示以下内容etcd集群成功：

b99e84a8f163a77, started, etcd1, http://12.10.8.92:2380, http://12.10.8.92:2379, false

78d14fd665ac2577, started, etcd2, http://12.10.8.93:2380, http://12.10.8.93:2379, false

d72f728605b522c2, started, etcd3, http://12.10.8.94:2380, http://12.10.8.94:2379, false

验证APISIX集群：

1.后台查看docker服务日志看看是否有报错

Docker logs docker-apisix_apisix_1

2.登录：http://12.10.8.92:9000/serverinfo 三个节点能正常显示则代表集群安装成功。

3.停止其中一个节点的容器服务:

docker-compose -p docker-apisix  stop

查看其它容器的etcd日志,发现已经在重新选举：

#集群测试验证（停止其中一台node后会重新选举主席）

raft2023/01/09 00:50:52 INFO: b99e84a8f163a77 [term: 18] received a MsgVote message with higher term from d72f728605b522c2 [term: 19]

raft2023/01/09 00:50:52 INFO: b99e84a8f163a77 became follower at term 19

raft2023/01/09 00:50:52 INFO: b99e84a8f163a77 [logterm: 18, index: 80, vote: 0] cast MsgVote for d72f728605b522c2 [logterm: 18, index: 80] at term 19

raft2023/01/09 00:50:52 INFO: raft.node: b99e84a8f163a77 lost leader 78d14fd665ac2577 at term 19

raft2023/01/09 00:50:52 INFO: raft.node: b99e84a8f163a77 elected leader d72f728605b522c2 at term 19

2023-01-09 00:50:52.680807 W | rafthttp: lost the TCP streaming connection with peer 78d14fd665ac2577 (stream MsgApp v2 reader)

2023-01-09 00:50:52.681175 W | rafthttp: lost the TCP streaming connection with peer 78d14fd665ac2577 (stream Message reader)

2023-01-09 00:50:52.683499 E | rafthttp: failed to dial 78d14fd665ac2577 on stream MsgApp v2 (peer 78d14fd665ac2577 failed to find local node b99e84a8f163a77)

2023-01-09 00:50:52.683509 I | rafthttp: peer 78d14fd665ac2577 became inactive (message send to peer failed)

启动刚刚停止的容器。

APISIX集群搭建完成。

Nacos集群搭建：

官网的集群搭建步骤不适合我们本地，所以我自己写了docker-compose.yml。官网的配置步骤不够明确，所以不作为参考。我是直接把nacos 的docker-compose配置写在了 apisix 的docker-compose.yml里面，为了方便不再重新创建新的docker-compose。

修改config.yaml，把nacos集成到apisix（三个节点都需要配置）

在文件 /data/soft/apisix-docker/example/apisix_conf/config.yaml

中添加以下配置（域名下来后host只需要配置一个，如：https://nacos.qx.com）：

discovery:

  nacos:

    host:

       - "http://12.10.8.92:8848"

       - "http://12.10.8.93:8848"

       - "http://12.10.8.94:8848"

    prefix: "/nacos/v1/"

    fetch_interval: 30    # default 30 sec

    weight: 200           # default 100

    timeout:

      connect: 3000       # default 2000 ms

      send: 3000          # default 2000 ms

      read: 6000          # default 5000 ms

修改docker-compose.yml（三个节点都需要配置），NACOS_SERVER_IP 需要改为当前宿主机IP

在/data/soft/apisix-docker/example/docker-compose.yml中services下添加以下配置：

  nacos:

    image: nacos/nacos-server:v2.2.0

    container_name: nacos

    environment:

      - MODE=cluster # 集群模式

      - NACOS_SERVERS=12.10.8.92:8848,12.10.8.93:8848,12.10.8.94:8848 # IP1,IP2是对应的宿主服务器IP,PORT1,PORT2是对应的nacos服务端口

      - PREFER_HOST_MODE=ip

      - NACOS_SERVER_IP=12.10.8.92 # 服务器外网

      - SPRING_DATASOURCE_PLATFORM=mysql

      - MYSQL_SERVICE_HOST=***** # mysql数据库对应的ip

      - MYSQL_SERVICE_PORT=3306    # mysql数据库对应的端口

      - MYSQL_SERVICE_DB_NAME=***  # mysql数据库

      - MYSQL_SERVICE_USER=**# mysql数据库对应的用户名

      - MYSQL_SERVICE_PASSWORD=***# mysql数据库对应的密码

      - MYSQL_SERVICE_DB_PARAM=characterEncoding=utf8&connectTimeout=10000&socketTimeout=10000&autoReconnect=true&useSSL=false&serverTimezone=UTC&allowPublicKeyRetrieval=true # mysql8数据库必须配置参数否则报错

      - MYSQL_DATABASE_NUM=1 # 数据源为1个

    volumes:

      - ./nacos/nacos_log:/home/nacos/logs # 日志的挂在

    ports:

      - "8848:8848"

      - "9848:9848"

      - "9849:9849"

      - "7848:7848"

    restart: always

    networks:

      apisix:

  apisix-dashboard:

    image: apache/apisix-dashboard:2.15.0-alpine

    restart: always

    volumes:

    - ./dashboard_conf/conf.yaml:/usr/local/apisix-dashboard/conf/conf.yaml

    ports:

    - "9000:9000"

    networks:

      apisix:

初始化nacos SQL:

在官网指定版本，如releases v2.2，下找到最新的SQL初始化文件,一般在conf目录下面：

https://github.com/alibaba/nacos/releases/download/2.2.0/nacos-server-2.2.0.zip，

在nacos数据库执行SQL初始化数据。如果没有执行这一步会导致启动报错。

启动容器服务（三个节点都需要）:

docker-compose -p docker-apisix up -d

验证集群：http://12.10.8.92:8848/nacos/

用户密码：nacos/nacos

Nacos Docker 快速开始

遇到的问题：

Nacos

  1. NACOS DOCKER 官方镜像启动失败报错 nacos Error creating bean with name 'memoryMonitor' defined in URL，需要初始化SQL，和配置数据库连接参数，因为我的是mysql8，所以需要配置。
  2. nacos节点状态正常，但是添加服务各种报错。Fail to get leader of group naming_instance_metadata，无法选举的报错，后面查看日志发现是端口 - "9849:9849" - "7848:7848" 未开放，未映射，官网和网上文档也并未提及。

APISIX

1.更新apisix集群需要删除数据，并重新创建文件夹,否则集群无法启动

rm -rf /var/lib/docker/volumes/docker-apisix_etcd_data

mkdir -p /var/lib/docker/volumes/docker-apisix_etcd_data

2. ETCD_LISTEN_PEER_URLS和ETCD_LISTEN_CLIENT_URLS的IP最好是0.0.0.0如果按网上或者官方的配置会导致etcd启动失败。

3. 官方配置apache/apisix:latest拉取的版本和etcd版本由冲突，需要修改docker-compose.yml下APISIX镜像的版本，如：apache/apisix:3.0.0-centos

4. 各个节点服务最好在几分钟内都能启动

5.     docker-compose.yml下etcd的2380端口也需要映射出来，不然集群无法启动。

6.     ETCD_LISTEN_CLIENT_URLS 按网上或者官方的配置会报错etcd bind: cannot assign requeste d address，IP需设置为0.0.0.0

7.     apisix  [error]failed to set upstream: no valid upstream node 接口服务没有配置好，网上文档有问题，端口是9180，不是9080。

8. etcd_ cluster 的版本不对导致集群启动失败，需要更新etcd_cluster的版本。

参考资料：

https://blog.51cto.com/waringid/5845100

https://nacos.io/zh-cn/docs/v2/quickstart/quick-start.html

https://www.bookstack.cn/read/apisix-3.0-zh/7c42ab4f372353b1.md

Berters
关注
Docker Compose部署Nacos集群 支持MySQL8
01-20
确保本机安装了git，docker和docker compose。 拉取文件 git clone https://gitee.com/korov/Docker.git 也可以直接到https://gitee.com/korov/Docker界面下载文件 进入nacos文件夹下 启动 需要优先启动主从MySQL，...
apisix+nacos 实现网关和注册中心
stefan1240的专栏
12-04 7754
一、部署apisix和nacos apisix通过官方文档docker-compse部署 nacos通过docker方式部署。 1、部署apisix 2、部署nacos 通过docker部署 docker run --name nacos-standalone -e MODE=standalone -e JVM_XMS=512m -e JVM_MAX=512m -e JVM_XMN=256m -p 8848:8848 -d nacos/nacos-server:latest 通过控制台（
APISIX整合nacos
I_T_T_I的博客
08-14 2815
APISIX整合nacos
Apache APISIX学习（1）：介绍、docker启动
游王子的博客
09-22 1251
是一个动态、实时、高性能的 API 网关， 提供负载均衡、动态上游、灰度发布、服务熔断、身份认证、可观测性等丰富的流量管理功能。你可以把 Apache APISIX 当做流量入口，来处理所有的业务数据，包括动态路由、动态上游、动态证书、 A/B 测试、金丝雀发布(灰度发布)、蓝绿部署、限流限速、抵御恶意攻击、监控报警、服务可观测性、服务治理等。
Linux Docker中APISIX集群部署【珍藏版】
记录工作开发中遇到的技术难点，方便自己查看，也希望可以帮助到他人...
03-30 5701
Apache APISIX 是 Apache 软件基金会下的云原生 API 网关，它兼具动态、实时、高性能等特点，提供了负载均衡、动态上游、灰度发布（金丝雀发布）、服务熔断、身份认证、可观测性等丰富的流量管理功能。我们可以使用 Apache APISIX 来处理传统的南北向流量，也可以处理服务间的东西向流量。同时，它也支持作为 K8s Ingress Controller 来使用。
docker安装apisix全教程包含windows和linux
大哥的博客
09-28 3284
docker安装apisix全教程包含windows和linux
【云原生】Apisix接入Nacos、K8s服务注册中心自动获取服务
蓝天之枫
03-10 2436
我们看到，我们再调用网关之前，需要配置上游，填入上游的地址和端口，但是端口是变的，每次服务重启之后都是变化的，而且网关本身也是要知道我们微服务架构中共有哪些服务，因为服务经常会上下线，网关路由需要感知到。这次经过网关，要访问网关的地址和端口，网关会根据我们的配置进行路由，9080是网关默认的端口，因为我在配置路由时给了域名，所以这里需要加上；这里可以选择很多插件，有限流、gRpc转换等插件，我这里选择一个限流插件使用，gRpc的后面再演示。然后经过Apisix再调用一次，发现结果是一样的，测试成功。
【docker部署安装ApiSix】
weixin_44188105的博客
07-07 2244
docker部署安装ApiSix
docker-compose 安装 nacos,连接本地Mysql
06-28
docker-compose 安装 nacos,连接本地Mysql,进入docker-compose.yml所在目录,执行docker-compose up 命令,数据库脚本在sql目录下
mysql+redis+mongo+nacos+zookeeper本地开发环境docker-compose快速搭建配置
最新发布
09-24
每次重新搭建开发环境都要花费不少时间，往往需要到处寻找各种配置文件，安装各种依赖，调试各种环境变量，整个过程比较麻烦而且容易出错。为了解决这个问题，我整理了一个集成版的开发环境，里面包含了常用的开发...
使用docker-compose快速搭建Nacos及MySQL环境
03-23
使用docker-compose快速搭建Nacos及MySQL环境 前提：需要先在电脑上安装docker-compose 1.解压“nacos-mysql.zip” 2.进入nacos-mysql文件夹 3.使用docker-compose up -d 启动。启动将会启动nacos和mysql2个容器
docker-compose 一键部署nacos 集成mysql 5.7
12-10
docker-compose 一键部署nacos 集成mysql 5.7
APISIX+Dubbo+Nacos 最佳实践
阿里巴巴中间件
09-29 2109
01项目简介Aliware01ApacheAPISIXApache APISIX 是 Apache 软件基金会下的云原生 API 网关，它具有多平台支持、精细化路由、运维友好和插件支持的优点特点。1. 多平台支持：APISIX 提供了多平台解决方案，它不但支持裸机运行，也支持在 Kubernetes 中使用，还支持与 AWS Lambda、Azure Function、Lua 函数和 Apac...
Apisix 使用docker快速搭建步骤
雨中深巷的油纸伞
12-12 785
本文是一个Apisix的快速搭建文章记录，如果想要了解更多Apisix的相关概念，请查看官网进行学习。https://apisix.apache.org/首先将挂载的grafana.ini配置文件中的匿名访问改成false，取消匿名。分别是dashboards中的看板json、ini的grafana配置文件。默认账号密码在挂载的ini文件中，默认admin/admin。可以挂载文件 , 账号密码在自定义的挂载文件中。注意其中有关于apisix的job信息。本次安装，涉及到的dockers镜像。
基于docker-compose安装APISIX及配置示例
penriver的博客
08-26 8173
本文基于docker-compose安装APISIX的详细步骤，并给出配置及使用示例 并将安装过程中的问题进行了梳理总结
API网关-Apisix多节点搭建（RPM包方式）
zcs2312852665的博客
02-01 1981
本文介绍了APISIX的安装和配置过程，包括在集群环境中安装APISIX节点和APISIX Dashboard，并提供了相应的脚本和命令。首先介绍了端口的作用以及各个端口的默认值，然后详细说明了APISIX节点和etcd集群之间的关系。接下来给出了一个单机安装配置教程供参考。在准备阶段，我们需要设置集群免密登录并搭建etcd集群。然后，在每个节点上执行脚本进行APISIX节点的安装，并将etcd集群地址添加到配置文件中。
Docker-12：Docker安装Apisix
孤山之王
08-22 1673
通过Docker安装APISIX
docker安装apisix详细教程
程序员的学习平台
06-01 2981
​ 使用docker安装apisix前提得先安装好docker和docker-compose，apisix安装包用git方式拉取，所以建议先安装git，没安装的自行在电脑上拉取后传到linux服务器。 查看安装版本 安装过程中可能会遇到错误（Loaded plugins: fastestmirror），解决办法修改插件配置文件 修改yum 配置文件 缓存清除并重构 docker安装 切换镜像源 查看当前镜像源中支持的docker版本 安装特定版本的doc
云原生 | K8S集群helm部署apisix3.1
m0_70331483的博客
02-25 3102
K8S集群helm部署apisix3.1
评论 18
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值