Neutron总结-linuxbridge+flat网络

最新推荐文章于 2024-01-03 09:06:49 发布
最新推荐文章于 2024-01-03 09:06:49 发布
阅读量6.5k 收藏 19
点赞数 6
分类专栏： 云计算 OpenStack neutron OpenStack
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dylloveyou/article/details/69802943
版权
云计算 同时被 3 个专栏收录
56 篇文章 8 订阅
订阅专栏
OpenStack
54 篇文章 17 订阅
订阅专栏
OpenStack
33 篇文章 16 订阅
订阅专栏

本篇文章介绍如何规划及创建linuxbridge+flat网络，实现实例间及实例与外部的通讯。读者应对OpenStack及其网络服务Neutron有初步的了解。

1.规划网络

部署节点为一个controller节点(包含网络节点)，两个compute节点。controller节点有3个网卡，分别为eth0(管理和API网络，CIDR为192.168.128.0/24)、eth1(租户网络，CIDR为10.10.10.0/24，不设置IP)、eth2(外部网络，CIDR为11.11.11.0/24，不设置IP)；compute节点有2个网卡，分别为eth0(管理和API网络，CIDR为192.168.128.0/24)、eth1(租户网络，CIDR为10.10.10.0/24，不设置IP)。
这里写图片描述

这里用VMware Workstation下面的三个虚拟机分别作为controller、compute1、compute2节点，其网卡设置为：

  1. 每个主机的eth0网卡作为 API&Management 网络，使用的是“NAT模式” ，可以连接到外网下载OpenStack软件
  2. 每个主机的eth1网卡作为 Tenant(VM) 网络，实现VM间的通讯，使用的是“仅主机模式 ”
  3. controller节点也作为网络节点，需要模拟OpenStack的外网，增加网卡eth2，这里也选择“仅主机模式”
    这里写图片描述

Neutron ML2的Type Driver为flat
Neutron ML2的Mechanism Driver为LinuxBridge
Neutron L2 Agent为LinuxBridge

这里写图片描述

2.创建虚拟网络

修改配置文件
/etc/neutron/plugins/ml2/ml2_conf.ini
这里写图片描述

controller节点 /etc/neutron/plugins/ml2/linuxbridge_agent.ini
注意：这里没有用到vxlan网络，enable_vxlan必须设置为False，否则会报错。
这里写图片描述

compute节点 /etc/neutron/plugins/ml2/linuxbridge_agent.ini
[securitygroup]和[vxlan]的配置同上
这里写图片描述

/etc/neutron/l3_agent.ini
这里写图片描述

/etc/neutron/dhcp_agent.ini
这里写图片描述

配置文件修改后，需要重启网络相关服务。

登陆到dashboard，可以查看网络服务信息。
controller节点启动了 neturon-metadata-agent、neutron-l3-agent、neutron-linuxbridge-agent、neutron-dhcp-agent
compute节点启动了 neutron-linuxbridge-agent
这里写图片描述

创建flat1网络，物理网络为provider(和前面的配置一致，否则报错)，网络地址为10.10.10.0/24
这里写图片描述

创建外部网络，物理网络为external(和前面的配置一致，否则报错)，网络地址为11.11.11.0/24
这里写图片描述

创建路由器，把flat网络和外部网络连通
这里写图片描述

我们的网络环境就准备好了。

3.测试网络

创建3个实例，都选择flat1网络。
其中：test1、test2被调度到compute1节点，test3被调度到compute2节点。
这里写图片描述

查看网络拓扑。flat1网络通过路由器连接到了外网。所以理论上test1、test2、test3能互通，并且也能连通外部网络。
这里写图片描述

为了保证外部能ping通以及能ssh登陆到实例，需要在安全组那加两条规则
这里写图片描述

下面测试网络的连通性：

同一flat网络：10.10.10.11 ping 10.10.10.16
这里写图片描述

外网： 10.10.10.11 ping 11.11.11.111
(确保外网相同网段有一台机器)
这里写图片描述

目前的网络结构如下
这里写图片描述

查看各个节点上面的虚拟网络设备

controller节点 

root@controller:~# brctl show
bridge name bridge id       STP enabled interfaces
brq30acf3ad-b9      8000.000c29c24683   no      eth1
                            tap05de88b6-aa
                            tap28299cf0-82
brq662b5cb3-38      8000.000c29c2468d   no      eth2
                            tap88b95f4f-ea
virbr0      8000.52540057a3c4   yes     virbr0-nic

compute1节点 

root@compute1:~# brctl show
bridge name bridge id       STP enabled interfaces
brq30acf3ad-b9      8000.000c29b8203b   no      eth1
                            tap77c04ce5-c1
                            tap806d032e-7b
virbr0      8000.52540066ffc3   yes     virbr0-nic

compute2节点 

root@compute2:~# brctl show
bridge name bridge id       STP enabled interfaces
brq30acf3ad-b9      8000.000c29b969aa   no      eth1
                            tap8cc6c685-f9
virbr0      8000.52540066ffc3   yes     virbr0-nic

controller节点1个Router、1个DHCP分别在各自的namespace下 

root@controller:~# ip netns
qrouter-7a51a575-00f1-4709-badc-3d2866084c84
qdhcp-30acf3ad-b938-49cd-9fb1-81cb35559e23

可以通过exec查看router细节 

root@controller:~# ip netns exec qrouter-7a51a575-00f1-4709-badc-3d2866084c84 ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: qr-28299cf0-82@if8: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether fa:16:3e:59:44:2f brd ff:ff:ff:ff:ff:ff
    inet 10.10.10.1/24 brd 10.10.10.255 scope global qr-28299cf0-82
       valid_lft forever preferred_lft forever
    inet6 fe80::f816:3eff:fe59:442f/64 scope link 
       valid_lft forever preferred_lft forever
3: qg-88b95f4f-ea@if10: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether fa:16:3e:0e:72:38 brd ff:ff:ff:ff:ff:ff
    inet 11.11.11.10/24 brd 11.11.11.255 scope global qg-88b95f4f-ea
       valid_lft forever preferred_lft forever
    inet6 fe80::f816:3eff:fe0e:7238/64 scope link 
       valid_lft forever preferred_lft forever
root@controller:~# ip netns exec qrouter-7a51a575-00f1-4709-badc-3d2866084c84 route
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
default         11.11.11.1      0.0.0.0         UG    0      0        0 qg-88b95f4f-ea
10.10.10.0      *               255.255.255.0   U     0      0        0 qr-28299cf0-82
11.11.11.0      *               255.255.255.0   U     0      0        0 qg-88b95f4f-ea

router的iptables 

root@controller:~# ip netns exec qrouter-7a51a575-00f1-4709-badc-3d2866084c84 iptables -t nat -S
-P PREROUTING ACCEPT
-P INPUT ACCEPT
-P OUTPUT ACCEPT
-P POSTROUTING ACCEPT
-N neutron-l3-agent-OUTPUT
-N neutron-l3-agent-POSTROUTING
-N neutron-l3-agent-PREROUTING
-N neutron-l3-agent-float-snat
-N neutron-l3-agent-snat
-N neutron-postrouting-bottom
-A PREROUTING -j neutron-l3-agent-PREROUTING
-A OUTPUT -j neutron-l3-agent-OUTPUT
-A POSTROUTING -j neutron-l3-agent-POSTROUTING
-A POSTROUTING -j neutron-postrouting-bottom
-A neutron-l3-agent-POSTROUTING ! -i qg-88b95f4f-ea ! -o qg-88b95f4f-ea -m conntrack ! --ctstate DNAT -j ACCEPT
-A neutron-l3-agent-PREROUTING -d 169.254.169.254/32 -i qr-+ -p tcp -m tcp --dport 80 -j REDIRECT --to-ports 9697
-A neutron-l3-agent-snat -j neutron-l3-agent-float-snat
-A neutron-l3-agent-snat -o qg-88b95f4f-ea -j SNAT --to-source 11.11.11.10
-A neutron-l3-agent-snat -m mark ! --mark 0x2/0xffff -m conntrack --ctstate DNAT -j SNAT --to-source 11.11.11.10
-A neutron-postrouting-bottom -m comment --comment "Perform source NAT on outgoing traffic." -j neutron-l3-agent-snat

可以通过exec查看dhcp细节 

root@controller:~# ip netns exec qdhcp-30acf3ad-b938-49cd-9fb1-81cb35559e23 ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ns-05de88b6-aa@if7: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether fa:16:3e:77:12:d0 brd ff:ff:ff:ff:ff:ff
    inet 10.10.10.10/24 brd 10.10.10.255 scope global ns-05de88b6-aa
       valid_lft forever preferred_lft forever
    inet 169.254.169.254/16 brd 169.254.255.255 scope global ns-05de88b6-aa
       valid_lft forever preferred_lft forever
    inet6 fe80::f816:3eff:fe77:12d0/64 scope link 
       valid_lft forever preferred_lft forever

再看下更详细的网络结构
controller节点
这里写图片描述

compute节点
这里写图片描述

如果需要从外部网络访问虚拟机，则要添加Floating IP
test1添加floating IP为11.11.11.11
这里写图片描述

测试网络连通：
外网：11.11.11.111 ping 11.11.11.11

root@ubuntu:~# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 00:0c:29:0d:7d:0f brd ff:ff:ff:ff:ff:ff
    inet 192.168.128.10/24 brd 192.168.128.255 scope global eth0
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe0d:7d0f/64 scope link 
       valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 00:0c:29:0d:7d:19 brd ff:ff:ff:ff:ff:ff
    inet 192.168.1.10/24 brd 192.168.1.255 scope global eth1
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe0d:7d19/64 scope link 
       valid_lft forever preferred_lft forever
4: eth2: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 00:0c:29:0d:7d:23 brd ff:ff:ff:ff:ff:ff
    inet 11.11.11.111/24 brd 11.11.11.255 scope global eth2
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe0d:7d23/64 scope link 
       valid_lft forever preferred_lft forever

root@ubuntu:~# ping 11.11.11.11
PING 11.11.11.11 (11.11.11.11) 56(84) bytes of data.
64 bytes from 11.11.11.11: icmp_seq=8 ttl=63 time=2.55 ms
64 bytes from 11.11.11.11: icmp_seq=9 ttl=63 time=2.32 ms
64 bytes from 11.11.11.11: icmp_seq=10 ttl=63 time=2.17 ms
64 bytes from 11.11.11.11: icmp_seq=11 ttl=63 time=1.95 ms

外网：11.11.11.111 ssh登录到 11.11.11.11
实际是登录到test1实例，IP为10.10.10.11

root@ubuntu:~# ssh cirros@11.11.11.11
The authenticity of host '11.11.11.11 (11.11.11.11)' can't be established.
RSA key fingerprint is 90:29:17:40:dc:b2:36:02:60:59:45:04:a6:38:c6:e3.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '11.11.11.11' (RSA) to the list of known hosts.
cirros@11.11.11.11's password: 
$ 
$ ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast qlen 1000
    link/ether fa:16:3e:1d:02:01 brd ff:ff:ff:ff:ff:ff
    inet 10.10.10.11/24 brd 10.10.10.255 scope global eth0
    inet6 fe80::f816:3eff:fe1d:201/64 scope link 
       valid_lft forever preferred_lft forever
$ ping 10.10.10.16
PING 10.10.10.16 (10.10.10.16): 56 data bytes
64 bytes from 10.10.10.16: seq=0 ttl=64 time=10.765 ms
64 bytes from 10.10.10.16: seq=1 ttl=64 time=3.322 ms
64 bytes from 10.10.10.16: seq=2 ttl=64 time=2.035 ms

查看controller节点router的变化 

root@controller:~# ip netns exec qrouter-7a51a575-00f1-4709-badc-3d2866084c84 ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: qr-28299cf0-82@if8: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether fa:16:3e:59:44:2f brd ff:ff:ff:ff:ff:ff
    inet 10.10.10.1/24 brd 10.10.10.255 scope global qr-28299cf0-82
       valid_lft forever preferred_lft forever
    inet6 fe80::f816:3eff:fe59:442f/64 scope link 
       valid_lft forever preferred_lft forever
3: qg-88b95f4f-ea@if10: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether fa:16:3e:0e:72:38 brd ff:ff:ff:ff:ff:ff
    inet 11.11.11.10/24 brd 11.11.11.255 scope global qg-88b95f4f-ea
       valid_lft forever preferred_lft forever
    inet 11.11.11.11/32 brd 11.11.11.11 scope global qg-88b95f4f-ea
       valid_lft forever preferred_lft forever
    inet6 fe80::f816:3eff:fe0e:7238/64 scope link 
       valid_lft forever preferred_lft forever

iptables 

root@controller:~# ip netns exec qrouter-7a51a575-00f1-4709-badc-3d2866084c84 iptables -t nat -S
-P PREROUTING ACCEPT
-P INPUT ACCEPT
-P OUTPUT ACCEPT
-P POSTROUTING ACCEPT
-N neutron-l3-agent-OUTPUT
-N neutron-l3-agent-POSTROUTING
-N neutron-l3-agent-PREROUTING
-N neutron-l3-agent-float-snat
-N neutron-l3-agent-snat
-N neutron-postrouting-bottom
-A PREROUTING -j neutron-l3-agent-PREROUTING
-A OUTPUT -j neutron-l3-agent-OUTPUT
-A POSTROUTING -j neutron-l3-agent-POSTROUTING
-A POSTROUTING -j neutron-postrouting-bottom
-A neutron-l3-agent-OUTPUT -d 11.11.11.11/32 -j DNAT --to-destination 10.10.10.11
-A neutron-l3-agent-POSTROUTING ! -i qg-88b95f4f-ea ! -o qg-88b95f4f-ea -m conntrack ! --ctstate DNAT -j ACCEPT
-A neutron-l3-agent-PREROUTING -d 169.254.169.254/32 -i qr-+ -p tcp -m tcp --dport 80 -j REDIRECT --to-ports 9697
-A neutron-l3-agent-PREROUTING -d 11.11.11.11/32 -j DNAT --to-destination 10.10.10.11
-A neutron-l3-agent-float-snat -s 10.10.10.11/32 -j SNAT --to-source 11.11.11.11
-A neutron-l3-agent-snat -j neutron-l3-agent-float-snat
-A neutron-l3-agent-snat -o qg-88b95f4f-ea -j SNAT --to-source 11.11.11.10
-A neutron-l3-agent-snat -m mark ! --mark 0x2/0xffff -m conntrack --ctstate DNAT -j SNAT --to-source 11.11.11.10
-A neutron-postrouting-bottom -m comment --comment "Perform source NAT on outgoing traffic." -j neutron-l3-agent-snat

这样我们就创建并且测试了LinuxBridge+flat网络，验证了网络的连通性。并对Neutron虚拟网络实现的细节进行了描述，希望对大家有帮助。

在Neutron的学习总结过程中，参考了网络上面的大量有价值的文档，在这里对无私分享的同学们表示衷心感谢！尤其是《每天5分钟学习OpenStack》，写的非常详细，本篇文档主要参考了里面的内容，在这里重点推荐：）。

dylloveyou
关注
  • 6
    点赞
  • 踩
  • 19
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
openstack-neutron-linuxbridge-15.3.0-1.el8.noarch.rpm
12-05
官方离线安装包，亲测可用
openstack-neutron-linuxbridge-13.0.7-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-13.0.0-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.3.4-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-13.0.1-2.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
OpenStack实践(三):Linux Bridge方式实现Flat Network
weixin_34368949的博客
12-18 210
版本信息openstack版本pike控制节点主机openstack-controller（ubuntu 16.04.5） 172.27.34.37计算节点主机openstack-computer（ubuntu 16.04.5） 172.27.34.38镜像cirros-0.3.3-x86_64-disk.img宿主机环境esxi 6.5.0ubuntu安装详见：Ubuntu...
Openstack-T 之Neutron
m0_61777116的博客
05-04 1124
在控制节点： 1、创建相关数据库并授权 使用mysql -u root -p进入数据库中 #创建数据库 MariaDB [(none)] CREATE DATABASE neutron; #授权 MariaDB [(none)]> GRANT ALL PRIVILEGES ON neutron.* TO 'neutron'@'%' IDENTIFIED BY 'neutron123'; 这里密码我设置neutron123 2、创建服务相关凭证 创建用户 openstack user
Neutron 理解（14）：Neutron ML2 + Linux bridge + VxLAN 组网
weixin_34403693的博客
11-25 427
学习 Neutron 系列文章： （1）Neutron 所实现的虚拟化网络 （2）Neutron OpenvSwitch + VLAN 虚拟网络 （3）Neutron OpenvSwitch + GRE/VxLAN 虚拟网络 （4）Neutron OVS OpenFlow 流表 和 L2 Population （5）Neutron DHCP Agent （6）Neutron L3 Ag...
配置 DHCP 服务 - 每天5分钟玩转 OpenStack（89）
jj1130050965的博客
06-20 499
前面章节我们看到 instance 在启动过程中能够从 Neutron 的 DHCP 服务获得 IP，本节将详细讨论其内部实现机制。 Neutron 提供 DHCP 服务的组件是 DHCP agent。DHCP agent 在网络节点运行上，默认通过 dnsmasq 实现 DHCP 功能。 配置 DHCP agent DHCP agent 的配置文件位于 /etc/neutron/dhcp_agent.ini。 dhcp_driver 使用 dnsmasq 实现 DH...
云计算：OpenStack 分布式架构管理FLAT网络（单控制节点与多计算节点）
最新发布
cronaldo91的博客
01-03 1829
（4）控制节点查看配置文件linuxbridge_agent.ini。（3）控制节点命令行进入DHCP服务器（类似隔离容器）（3）控制节点查看配置文件ml2_conf.ini。（4）查看实例cloudserver_01详细信息。（5）查看实例cloudserver_02详细信息。（2）命令行创建实例cloudserver_01。（7）远程连接实例cloudserver_01。（8）远程连接实例cloudserver_02。（15）计算节点1查看云主机实例。（7）计算节点2查看云主机实例。
openstack-neutron-linuxbridge-13.0.1-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.0.0-0.1.0rc1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.0.2-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.3.2-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.3.1-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.3.0-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.1.0-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.0.1-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
openstack-neutron-linuxbridge-15.0.0-1.el7.noarch.rpm
12-28
官方离线安装包，测试可用。使用rpm -ivh [rpm完整包名] 进行安装
检查neutron 服务的 linuxbridge 网桥服务启动
04-01
1. 确认neutron-linuxbridge-agent服务是否启动： ``` systemctl status neutron-linuxbridge-agent.service ``` 2. 确认linuxbridge-agent配置文件中的网桥是否正确配置： ``` cat /etc/neutron/plugins/ml2/linuxbridge_agent.ini | grep physical_interface_mappings ``` 3. 查看linuxbridge网桥是否成功创建： ``` brctl show ``` 4. 确认网桥是否正确配置： ``` cat /etc/network/interfaces.d/ifcfg-br-ex ``` 其中，ifcfg-br-ex是网桥配置文件的名称，可能因系统而异。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值