( —基础— ) k8s----介绍，概念，组件(ipvs，iptables

最新推荐文章于 2024-10-31 14:21:19 发布
最新推荐文章于 2024-10-31 14:21:19 发布
阅读量737 收藏 8
点赞数 4
文章标签： kubernetes 容器 云原生
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_87034174/article/details/142172958
版权

  • 二. k8s 组件介绍（kubernetes）

    • Server端 和node端 组件有哪些
    • Server端

  • node节点

  • master,node作用

  • 三. master运行机制

    • 1. kube-apiserver：

  • 2. kube-controller-manager

  • 3. kube-scheduler

  • 四. node节点运行机制

    • 1. kubelet

  • 2. kube-proxy

  • 3. iptables

  • 4. IPVS

  • 五. 将iptables改为IPVS

一. k8s介绍

===========================================================================

概念介绍

参照

Kubernetes 有如下几个核心的功能

  1. 服务的发现与负载的均衡；

  2. 容器的自动装箱，我们也会把它叫做 scheduling，就是“调度”，把一 个容器放到一个集群的某一个机器上，Kubernetes 会帮助我们去做 存储的编排，让存储的声明周期与容器的生命周期能有一个连接；

  3. Kubernetes 会帮助我们去做自动化的容器的恢复。在一个集群中， 经常会出现宿主机的问题或者说是 OS 的问题，导致容器本身的不可 用，Kubernetes 会自动地对这些不可用的容器进行恢复；

  4. Kubernetes 会帮助我们去做应用的自动发布与应用的回滚，以及与 应用相关的配置密文的管理；

  5. 对于 job 类型任务，Kubernetes 可以去做批量的执行；

  6. 为了让这个集群、这个应用更富有弹性，Kubernetes 也支持水平的 伸缩。

kubernetes功能详解

  1. 调度 Kubernetes 可以把用户提交的容器放到 Kubernetes 管理的集群的某 一台节点上去。Kubernetes 的调度器是执行这项能力的组件，它会观察 正在被调度的这个容器的大小、规格。

比如说它所需要的 CPU 以及它所需要的 memory，然后在集群中找一台 相对比较空闲的机器来进行一次 placement，也就是一次放置的操作。在 这个例子中，它可能会把红颜色的这个容器放置到第二个空闲的机器上， 来完成一次调度的工作

在这里插入图片描述

  1. 自动修复 Kubernetes 有一个节点健康检查的功能，它会监测这个集群中所有的宿 主机，当宿主机本身出现故障，或者软件出现故障的时候，这个节点健康 检查会自动对它进行发现。 下面 Kubernetes 会把运行在这些失败节点上的容器进行自动迁移，迁移 到一个正在健康运行的宿主机上，来完成集群内容器的一个自动恢复

在这里插入图片描述

在这里插入图片描述

3. 水平伸缩 Kubernetes 有业务负载检查的能力，它会监测业务上所承担的负载，如 果这个业务本身的 CPU 利用率过高，或者响应时间过长，它可以对这个 业务进行一次扩容。

比如说在下面的例子中，黄颜色的过度忙碌，Kubernetes 就可以把黄颜 色负载从一份变为三份。接下来，它就可以通过负载均衡把原来打到第一 个黄颜色上的负载平均分到三个黄颜色的负载上去，以此来提高响应的时 间。

在这里插入图片描述

在这里插入图片描述

Kubernetes 的架构()

===================================================================================

Kubernetes 架 构 是 一 个 比 较 典 型 的 二 层 架 构 和 server-client 架 构 。

Master 作为中央的管控节点，会去与 Node 进行一个连接所有 UI 的、clients、这些 user 侧的组件，只会和 Master 进行连接， 把希望的状态或者想执行的命令下发给 Master，Master 会把这些命令或 者状态下发给相应的节点，进行最终的执行。

从上图，我们可以看到K8S组件和逻辑及其复杂，但是这并不可怕，我们从宏观上先了解K8S是怎么用的，从上图我们可以看出：

Kubernetes集群主要由Master和Node两类节点组成

  1. Master的组件包括：apiserver、controller-manager、scheduler和etcd等几个组件，其中apiserver是整个集群的网关。

  2. Node主要由kubelet、kube-proxy、docker引擎等组件组成。kubelet是K8S集群的工作与节点上的代理组件。

  3. 一个完整的K8S集群，还包括CoreDNS、Prometheus（或HeapSter）、Dashboard、Ingress ，Controller等几个附加组件。

其中cAdivsor组件作用于各个节点（master和node节点）之上，用于收集及收集容器及节点的CPU、内存以及磁盘资源的利用率指标数据，这些统计数据由Heapster聚合后，可以通过apiserver访问。

在这里插入图片描述

二. k8s 组件介绍（kubernetes）

==========================================================================================

查看组件

https://kubernetes.io/zh/docs/reference/command-line-tools-reference/kube-apiserver/

  1. kube-apiserver：Kubernetes API server 为 api 对象验证并配置数据，包括 pods、services、 replication,controllers 和其它 api 对象,API Server 提供 REST 操作和到集群共享状态的前端，所有其他组件通过它进行交互。

主要作用：组件与组件之间的通信

https://kubernetes.io/zh/docs/reference/command-line-tools-reference/kube-scheduler/

  1. Kubernetes scheduler ：调度器是一个拥有丰富策略、能够感知拓扑变化、支持特定负载的功能组件，它对集群的可用性、性能表现以及容量都影响巨大。

scheduler 需要考虑独立的和集体的资源需求、服务质量需求、硬件/软件/策略限制、亲和与反亲和规范、数据位置、内部负载接口、截止时间等等。如有必要，特定的负载需求可以通过 API 暴露出来。

主要作用：依据 它对 CPU、对 memory 请求大小，找一台合适的节点，进行放置

https://kubernetes.io/zh/docs/reference/command-line-tools-reference/kube-controller-manager/

  1. kube-controller-manager：控制器Controller Manager 作为集群内部的管理控制中心，负责集群内的 Node、Pod 副本、服务端点（Endpoint）、命名空间（Namespace）、服务账号（ServiceAccount）、资源定额（ResourceQuota）的管理，当某个 Node意外宕机时，Controller Manager 会及时发现并执行自动化修复流程，确保集群始终处于预期的工作状态。

主要用于：自动对容器进行修复、水平扩张

https://kubernetes.io/zh/docs/reference/command-line-tools-reference/kube-proxy/

  1. kube-proxy ： Kubernetes 网 络 代 理 运 行 在 node 上，它反映了 node 上Kubernetes API 中定义的服务，并可以通过一组后端进行简单的 TCP、UDP 流转发或循环模式（round robin)）的 TCP、UDP 转发，用户必须使用 apiserver API 创建一个服务来配置代理，其实就是 kube-proxy 通过在主机上维护网络规则并执行连接转发来实现 Kubernetes 服务访问。

https://kubernetes.io/zh/docs/reference/command-line-tools-reference/kubelet/

  1. kubelet：是主要的节点代理，它会监视已分配给节点的 pod，具体功能如 下：

向 master 汇报 node 节点的状态信息

接受指令并在 Pod 中创建 docker 容器

准备 Pod 所需的数据卷

返回 pod 的运行状态

在 node 节点执行容器健康检查

https://github.com/etcd-io/etcd

  1. etcd 是 Kubernetes 提供默认的存储系统，保存所有集群数据，使用时需要为 etcd数据提供备份计划，key-value存储

API Server 中所需要的这些原 信息都被放置在 etcd 中，etcd 本身是一个高可用系统，通过 etcd 保证整个 Kubernetes 的 Master 组件的高可用性。

在这里插入图片描述

Server端 和node端 组件有哪些

Server端

Server控制端：通过API接受用户指令

创建，删除容器，代码升级

apiserver

controller-manager

scheduler

etcd

kubectl 命令行工具

kube-proxy

node节点

node节点：真正运行容器的地方，是真正运行业务负载的

每个业务负载会以 Pod 的形式运行

在这里插入图片描述

kublelet

kube-proxy

在 OS 上去创建容器所需要运行的环境，最终把容器或者 Pod 运行起 来，也需要对存储跟网络进行管理。Kubernetes 并不会直接进行网络存 储的操作，他们会靠 Storage Plugin 或者是网络的 Plugin 来进行操作。 用 户 自 己 或 者 云 厂 商 都 会 去 写 相 应 的 Storage Plugin 或 者 Network Plugin，去完成存储操作或网络操作。 在 Kubernetes 自己的环境中，也会有 Kubernetes 的 Network，它是 为了提供 Service network 来进行搭网组网的。（等一下我们也会去介 绍“service”这个概念。）真正完成 service 组网的组件的是 Kube-proxy， 它是利用了 iptable 的能力来进行组建 Kubernetes 的 Network，就是 cluster network，以上就是 Node 上面的四个组件。

在这里插入图片描述

用户可以通过 UI 或者 CLI 提交一个 Pod 给 Kubernetes 进行部署， 这 个 Pod 请 求 首 先 会 通 过 CLI 或 者 UI 提 交 给 Kubernetes API Server，下一步 API Server 会把这个信息写入到它的存储系统 etcd， 之后 Scheduler 会通过 API Server 的 watch 或者叫做 notification 机制得到这个信息：有一个 Pod 需要被调度。

这个时候 Scheduler 会根据它的内存状态进行一次调度决策，在完成这 次调度之后，它会向 API Server report 说：“OK！这个 Pod 需要被调 度到某一个节点上。”

这个时候 API Server 接收到这次操作之后，会把这次的结果再次写到 etcd 中，然后 API Server 会通知相应的节点进行这次 Pod 真正的执 行 启 动 。 相 应 节 点 的 kubelet 会 得 到 这 个 通 知 ， kubelet 就 会 去 调 Container runtime 来真正去启动配置这个容器和这个容器的运行环境， 去调度 Storage Plugin 来去配置存储，network Plugin 去配置网络。

客户端

kubectl

dashboard

部署工具：

使用批量部署工具如(ansible/ saltstack)、手动二进制、apt-get/yum 等方式安装，以守护进程的方式启动在宿主机上，类似于是 Nginx 一样使用 service 脚本启动。

master,node作用

  • Master：是集群的网关和中枢枢纽，

主要作用：暴露API接口，跟踪其他服务器的健康状态、以最优方式调度负载，以及编排其他组件之间的通信。单个的Master节点可以完成所有的功能，但是考虑单点故障的痛点，生产环境中通常要部署多个Master节点，组成Cluster。

  • Node：是Kubernetes的工作节点，负责接收来自Master的工作指令，并根据指令相应地创建和销毁Pod对象，以及调整网络规则进行合理路由和流量转发。生产环境中，Node节点可以有N个。

三. master运行机制

================================================================================

1. kube-apiserver：

k8s API Server提供了k8s各类资源对象（pod,RC,Service等）的增删改查及watch等HTTP Rest接口，是整个系统的数据总线和数据中心。

apiserver 目前在master监听两个端口，

  1. 通过 --insecure-port int 监听一个非安全的127.0.0.1本地端口（默认为8080）

该端口用于接收HTTP请求；

该端口默认值为8080，可以通过API Server的启动参数“–insecure-port”的值来修改默认值；

默认的IP地址为“localhost”，可以通过启动参数“–insecure-bind-address”的值来修改该IP地址；

非认证或授权的HTTP请求通过该端口访问API Server。

  1. 通过参数--bind-address=1.1.1.1 监听一个安全的端口（默认为6443）

该端口默认值为6443，可通过启动参数“–secure-port”的值来修改默认值；

默认IP地址为非本地（Non-Localhost）网络端口，通过启动参数“–bind-address”设置该值；

该端口用于接收HTTPS请求；

用于基于Tocken文件或客户端证书及HTTP Base的认证；

用于基于策略的授权；

  1. kubernetes API Server的功能与使用：

提供了集群管理的REST API接口(包括认证授权、数据校验以及集群状态变更)；

提供其他模块之间的数据交互和通信的枢纽（其他模块通过API

Server查询或修改数据，只有API Server才直 接操作etcd）;

是资源配额控制的入口；

拥有完备的集群安全机制.

curl 127.0.0.1:8080/apis #分组api #

curl 127.0.0.1:8080/api/v1 #带具体版本号的api #

curl 127.0.0.1:8080/ #返回核心api列表 #

curl 127.0.0.1:8080/version #api 版本信息 #

curl 127.0.0.1:8080/healthz/etcd #与etcd的心跳监测 #

curl 127.0.0.1:8080/apis/autoscaling/v1 #api的详细信息

启动脚本

cat /etc/systemd/system/kube-apiserver.service

[Service]

ExecStart=/usr/bin/kube-apiserver \

–bind-address=192.168.7.101 \ #外部监听端口

–insecure-bind-address=127.0.0.1 \ #本机监听端口

…

LimitNOFILE=65536

2. kube-controller-manager

Controller Manager作为集群内部的管理控制中心，

负责集群内的Node、Pod副本、服务端点（Endpoint）、命名空间（Namespace）、服务账号（ServiceAccount）、资源定额（ResourceQuota）的管理，当某个Node意外宕机时，Controller Manager会及时发现并执行自动化修复流程，确保集群始终处于预期的工作状态。

例如你删一个

kubectl delete pods bet-test-1dsakjfhaskdj

等会会儿他就会自己创建

kubectl get pods

启动脚本：

vim /etc/systemd/system/kube-controller-manager.service

[Service]

ExecStart=/usr/bin/kube-controller-manager \

–master=http://127.0.0.1:8080 \ #调用kube-api-server的本地端口进行通信

…

3. kube-scheduler

Scheduler负责Pod调度，在整个系统中起"承上启下"作用，

承上：负责接收Controller Manager创建的新的Pod，为其选择一个合适的Node；

启下：Node上的kubelet接管Pod的生命周期。

通过调度算法为待调度Pod列表的每个Pod从可用Node列表中选择一个最适合的Node，并将信息写入etcd中 node节点上的kubelet通过API Server监听到kubernetes Scheduler产生的Pod绑定信息，然后获取对应的 Pod清单，下载Image，并启动容器。

算法刷题

大厂面试还是很注重算法题的，尤其是字节跳动，算法是问的比较多的，关于算法，推荐《LeetCode》和《算法的乐趣》，这两本我也有电子版，字节跳动、阿里、美团等大厂面试题（含答案+解析）、学习笔记、Xmind思维导图均可以分享给大家学习。

写在最后

最后，对所以做Java的朋友提几点建议，也是我的个人心得：

  1. 疯狂编程

  2. 学习效果可视化

  3. 写博客

  4. 阅读优秀代码

  5. 心态调整

2401_87034174
关注
k8s有哪些组件
leijmdas的专栏
08-25 528
2. etcd：一个轻量级、分布式键值存储系统，用于存储 Kubernetes 集群的所有数据，包括集群状态和配置信息。5. kubelet：运行在每个节点上的代理，负责维护容器的生命周期，包括启动容器、监控容器运行状态以及资源使用情况。6. kube-proxy：网络代理，运行在每个节点上，负责维护节点上的网络规则，处理服务发现和负载均衡。8. cAdvisor：一个开源的容器资源使用和性能分析代理，用于收集、处理、存储和导出容器的统计信息。
k8s组件详解
学习笔记
10-22 6456
k8s组件 master节点组件 kube-APIserver： k8s的中心，各个组件信息交互都要通过它，也是k8s管理集群的入口。 Controller-Manager：集群的状态管理器，保证Pod或其他资源达到期望值，也是需要和APIServer进行通信，在需要的时候创建、更新或删除它所管理的资源。 Scheduler：k8s 集群的调度器，选择工作pod节点，预选 > 优选。 Etcd：键值数据库，用于保存k8s集群信息，网络信息，网络信息。 Master第三方组件 Flannel：网络插件，
( —基础— ) k8s----介绍，概念，组件(ipvs，iptables，proxy)，功能，运行机制，工作模式（master，node）
weixin_45697293的博客
07-30 662
文章目录k8s介绍概念介绍Kubernetes 有如下几个核心的功能kubernetes功能详解Kubernetes 的架构k8s 组件介绍（kubernetes）Server端 和node端 组件有哪些Server端node节点安装方式 k8s介绍 概念介绍 参照 Kubernetes 有如下几个核心的功能 服务的发现与负载的均衡； 容器的自动装箱，我们也会把它叫做 scheduling，就是“调度”，把一 个容器放到一个集群的某一个机器上，Kubernetes 会帮助我们去做 存储的编排，让存储的声明
K8s核心组件全解析
最新发布
weixin_46619605的博客
10-31 1857
K8s核心组件全解析。
k8s之基础组件说明
eighters的博客
02-01 1530
k8s基础组件说明
K8S 组件介绍
woshiyizhiyu0的博客
05-01 995
​ 本文介绍K8S主要组件及作用，文章内容主要参考K8S官方文档并结合最近K8S搭建CICD实践进行分析。通过K8S提供组件阐述K8S对容器编排，发布，监控等方面带来的优势。关于CICD实践方案请看考：基于GitLab+Jenkins集群+K8S+Docker CICD方案实践。
Kubernetes (k8s) 基础组件包括 kubelet、kubectl 和 kubeadm
BLOG域名:programb.blog.csdn.net
08-22 1624
是 Kubernetes 集群初始化和管理员工具。：Kubelet会收集每个容器的资源使用情况，如CPU、内存使用，并报告给API服务器，以便于整体资源管理和决策。：Kubelet会收集每个容器的资源使用情况，如CPU、内存使用，并报告给API服务器，以便于整体资源管理和决策。：它监视并维护每个节点上Pod的状态，当Pod启动、暂停或终止时，kubelet会相应地创建、更新或删除容器。：它监视并维护每个节点上Pod的状态，当Pod启动、暂停或终止时，kubelet会相应地创建、更新或删除容器。
k8s 组件介绍__单Master集群部署
weixin_34391445的博客
12-02 773
参考链接：https://github.com/opsnull/follow-me-install-kubernetes-cluster   kubernetes 概述 1、kubernetes 是什么 Google2014年推出的容器集群管理系统 k8s用于容器化应用程序的部署、扩展和管理 k8s提供了容器编排、资源调度、弹性伸缩、部署管理、服务发现等一系列功能 k8s的目标是让...
NSX-K8S-Rapid-Deply-v1.3.pdf
07-26
在基础的K8S集群之上，需要增加NCP（NSX Container Plugin）、NSXCNIPlugin、NSXNodeAgent等组件来实现K8S与NSX-T的集成。这些组件的作用是实现网络策略的部署、网络虚拟化等功能，并确保K8S集群内部的网络通信符合...
k8s3主1从-1.15.1-高可用搭建-ipvs模式-kubernetes高可用安装包和详细文档笔记整理
05-27
这个资源包“k8s3主1从-1.15.1-高可用搭建-ipvs模式-kubernetes高可用安装包和详细文档笔记整理”显然是一个针对k8s 1.15.1版本的高可用性（HA）集群的搭建指南，特别强调了使用IPVS（IP虚拟服务器）作为服务负载...
k8s介绍-组件架构-核心
qq_37499012的博客
02-20 930
用于自动部署、扩展和管理“容器化( containerized) 应用程序”的开源系统可以理解成K8S是负责自动化运维管理多个容器化程序(比如Docker)的集群，是–个生态极其丰富的容器编排框架工具由来：k8S由google的Borg系统(博格系统，google内部使用的大规模容器编排工具)作为原型，后经G0语言延用Borg的思路重写并捐献给CNCF基金会开源含义：词根源于希腊语的舵手、飞行员 2、为什么需要Kubernetes，它能做什么？ **容器是打包和运行应用程序的好方式。**在生产环境中，你需要
k8s-Kubernetes--services(微服务)、ingress-nginx、canary
Gong_yz的博客
03-09 2032
服务（Service） 将运行在一组 Pods 上的应用程序公开为网络服务的抽象方法。 使用 Kubernetes，你无需修改应用程序即可使用不熟悉的服务发现机制。 Kubernetes 为 Pod 提供自己的 IP 地址，并为一组 Pod 提供相同的 DNS 名， 并且可以在它们之间进行负载均衡。
K8s --k8s通信、创建service
ly660402的博客
02-23 2089
Service 是由 kube-proxy 组件，加上 iptables 来共同实现的. kube-proxy 通过 iptables 处理 Service 的过程，需要在宿主机上设置相当多的 iptables 规则，如果宿主机有大量的Pod，不断刷新iptables规则，会消耗大量的CPU资源。 IPVS模式的service，可以使K8s集群支持更多量级的Pod。 开启kube-proxy的ipvs模式： # yum install -y ipvsadm //所有节点安装 $ ...
K8s 核心组件介绍
RAB
12-12 5345
K8s 核心组件简介。
k8s组件介绍
lk18625206112的博客
08-23 3163
Master（管理节点） API Server：供Kubernetes API接口，主要处理 Rest操作以及更新Etcd中的对象。 所有资源增删改查的唯一入口。 Scheduler：绑定Pod到Node上，资源调度。 Controller Manager： 所有其他群集级别的功能，目前由控制器Manager执行。资源对象的 自动化控制中心。 Etcd：所有持久化的状态信息存储在Etcd中...
Kubernetes（k8s）服务介绍
shenyuanhaojie的博客
12-14 4125
Kubernetes，又称为 k8s（首字母为 k、首字母与尾字母之间有 8 个字符、尾字母为 s，所以简称 k8s），是一种可自动实施 Linux 容器操作的开源平台。它可以帮助用户省去应用容器化过程的许多手动部署和扩展操作。也就是说，您可以将运行 Linux 容器的多组主机聚集在一起，由 Kubernetes 帮助您轻松高效地管理这些集群。而且，这些集群可跨公共云、私有云或混合云部署主机。因此，对于要求快速扩展的云原生应用而言（例如借助 Apache Kafka 进行的实时数据流处理），Kubernet
【K8S】K8S架构及相关组件
黄小黄的博客
08-09 3140
K8S，全称Kubernetes，是一个开源的容器部署和管理平台，由Google开发，后捐献给云原生计算基金会（CNCF）。K8S提供了容器编排、容器运行时、以容器为中心的基础设施编排、负载平衡、自我修复机制和服务发现等功能。K8S的架构采用主从设备模型（Master-Slave架构），即由Master节点负责集群的调度、管理和运维，Slave节点作为集群中的运算工作负载节点。
K8S各个组件介绍
热门推荐
zhangsaho的博客
12-21 1万+
K8S集群架构： 一个K8S集群是由两大部分组成： Master节点和Node节点 一.Master节点主要包括API Server、Scheduler、Controller manager、etcd几大组件 1.API Server（提供其他模块之间的数据交互和通信的枢纽（其他模块通过API Server查询或修改数据，只有API Server才直接和etcd进行交互） Kubernetes 集群中，API Server 扮演着通信枢纽的位置。API Server 不仅负责和 etcd 交互（其他组件不会
k8s的主要组件以及重要概念
qq_64057406的博客
08-28 1533
K8S（Kubernetes）是一个用于自动部署、扩展和管理容器化应用程序的开源系统。它采用主从设备模型（Master-Slave 架构），其中Master节点负责集群的调度、管理和运维，Slave节点（也被称为Worker Node节点）负责执行工作负载。
k8s详解 md课件
09-09
k8s即Kubernetes，是由Google开源的容器编排和管理工具。它的设计目标是为了简化应用程序的部署、扩展和管理，并提供容器化应用的高可用性和弹性。 k8s的详解可以从以下几个方面来讲解。首先是k8s的架构，它由master节点和多个worker节点组成。Master节点负责管理集群中的各项任务，如调度、管理节点和服务发现等，而Worker节点则负责运行和管理容器化的应用程序。 其次是k8s的核心概念，包括Pod、Service、Volume、Namespace等。Pod是k8s的最小部署单元，可以包含一个或多个容器；Service是一个抽象的应用程序，可以提供负载均衡和服务发现的功能；Volume是容器中的存储空间，可以用来持久化数据；Namespace是用来将集群划分成多个虚拟集群的机制，用于隔离和管理资源。 接下来是k8s的常用功能，如水平伸缩、自动扩容、滚动更新等。水平伸缩可以根据应用程序的负载自动增加或减少副本数；自动扩容可以根据资源使用状况自动调整节点的数量；滚动更新可以在不影响应用程序运行的情况下逐步更新应用程序的版本。 最后是k8s的网络和存储方案。k8s可以通过各种网络插件实现容器之间的通信和网络隔离；存储方案包括本地存储、持久化存储和分布式存储等，可以根据应用程序的需求选择适合的存储方案。 综上所述，k8s是一个功能强大的容器编排和管理工具，通过其架构、核心概念、常用功能和网络存储方案等方面的详细解释，可以更好地理解和使用k8s来部署和管理容器化的应用程序。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值