Enable multi-tenancy on ironic

最新推荐文章于 2024-09-09 00:00:00 发布
最新推荐文章于 2024-09-09 00:00:00 发布
阅读量254 收藏
点赞数
文章标签： python awk 运维
原文链接：http://www.cnblogs.com/zhangyufei/p/7761832.html
版权

Multi-tenancy 是openstack ironic从Ocata版本开始支持的新特性，通过network-generic-switch插件控制交换机，Ironic可以实现在不同租户间机网络隔离，并且可以使得物理机和虚拟机工作在同一个二层中。本文记录了在基于kolla 的OpenStack Ocata版本上，如何配置相关服务，启用multi-tenancy功能。阅读本文需要有一定ironic基础。

基础环境：

  1. ALL-IN-ONE openstack ocata 集群
  2. cisco 300 交换机
  3. dell r720 服务器

网络拓扑图如下：

679526-20171031154100902-1984403526.png

实验步骤：

### 1. 网络设置
将网线按照拓扑图接好，并配置好被部署机器的IPMI信息，cisco交换机对应的管理口ip，打开交换机的ssh权限。创建出要使用的vlan。配置GE5为trunk 模式：
```
[root@kolla-aio ~]# telnet 10.200.43.200
Trying 10.200.43.200...
Connected to 10.200.43.200.
Escape character is '^]'.
User Name:cisco
Password:**********

switch797d1f#configure
switch797d1f(config-if)#vlan 2-1024
switch797d1f(config)#interface GE 3
switch797d1f(config-if)#switchport mode trunk
switch797d1f(config-if)#switchport trunk allowed vlan add all
switch797d1f(config-if)#do show interfaces switchport GE 3
Port : gi3
Port Mode: Trunk
Gvrp Status: disabled
Ingress Filtering: true
Acceptable Frame Type: admitAll
Ingress UnTagged VLAN ( NATIVE ): 1


### 2. 主机调整

关闭主机防火墙 ：
systemctl stop iptables.service
systemctl disable iptables.service

关闭主机iscsi服务：

systemctl stop iscsid.socket 
systemctl stop iscsid
systemctl disable iscsid.socket 
systemctl disable iscsid


### 2. 配置neutron

我们使用kolla-aio eth0的10.200.43.196作为管理ip，所有的openstack服务都监听这个地址。裸机在部署过程中，要通过访问10.200.43.196的地址 call-back到控制节点上，所以部署网络要和10.200.43.196打通。由于本人不熟悉该交换机的配置，这里选择使用openstack的虚拟路由器功能，打通网络。我们需要在neutron额外配置一个flat网络，连接到kolla-aio的eth0上。

修改 /etc/kolla/neutron-server/ml2_conf.ini,和 /etc/kolla/neutron-openvswitch-agent/ml2_conf.ini  配置虚拟机使用的网桥是br-data，配置flat网络使用的网桥是br-ex。

[ml2_type_vlan]
network_vlan_ranges = default

[ml2_type_flat]
flat_networks = external

[ovs]
bridge_mappings = default:br-data,external:br-ex


在openvswitch容器中，要保证eth0在br-data网桥中，eth1在br-ex网桥中：

ovs-vsctl add-port br-data eth1

接下来的操作会导致网络中断，需要到机房执行

ovs-vsctl add-port br-ex eth0
ifconfig eth0 0.0.0.0
ifconfig br-ex 10.200.43.196/24 up


 
 ### 3. 创建相关网络和路由
 
我们选择vlan102作为部署网络，需要创建虚拟路由和相关网络，打通部署网络和管理网,步骤如下：

1. 在horizon上，分别创建vlan id为100，101,102的网络，子网信息可以随意分配，只要避免ip冲突就好。此例中我们为vlan102创建了子网192.168.102.0/24
2. 创建一个flat网络，禁用网关，分配数个和kolla-aio同网段的ip，数量等于1+你想同时支持部署的裸机数量，在此例中，分配的ip是 10.200.43.197和10.200.43.198
3.  创建router，不设置网关
4. 在router中添加到vlan102网络的接口，接口ip不输入
5. 5在router中添加到flat网络的接口，接口ip输入一个我们分配的ip，此例中输入了10.200.43.197
6. 在控制器上添加一条路由router add -net 192.168.102.0/24 gw 10.200.43.197


 
 ### 4. 配置ironic
 配置ironic，enable multi-tenancy，要修改的内容如下：

[DEFAULT]
enabled_drivers = pxe_ipmitool,pxe_ilo
enabled_network_interfaces=noop,flat,neutron

[neutron]
url = http://10.200.43.196:9696
cleaning_network = vlan102
provisioning_network = vlan102

[pxe]
pxe_append_params = nofb nomodeset vga=normal console=tty0 console=ttyS0,115200n8
tftp_server=10.200.43.196
tftp_root=/tftpboot
```
配置完成后需要重启ironic-conductor服务

5. 更新networking-generic-switch代码

O版本networking-generic-switch插件不支持此例中使用的cisco300交换机，需要backport最新的代码来支持。

docker exec -u 0 -it neutron_server bash
cd /var/lib/kolla/venv/lib/python2.7/site-packages/networking_generic_switch/devices/netmiko_devices
curl -o cisco300.py https://raw.githubusercontent.com/openstack/networking-generic-switch/master/networking_generic_switch/devices/netmiko_devices/cisco300.py

vim /var/lib/kolla/venv/lib/python2.7/site-packages/networking_generic_switch-0.2.1.dev9-py2.7.egg-info/entry_points.txt 
在generic_switch.devices 段 插入：
netmiko_cisco_s300 = networking_generic_switch.devices.netmiko_devices.cisco300:Cisco300

6. 将交换机信息配置给配置neutron

配置 /etc/kolla/neutron-server/ml2_conf.ini，添加交换机的信息，此例中的交换机信息是：

型号： cisco 300系列

主机名：switch797d1f
ip: 10.200.43.200
用户名:cisco
密码: ***
对应的配置文件内容是：

 [genericswitch:switch797d1f]
device_type = netmiko_cisco_s300
username = cisco
password = ***
ip = 10.200.43.200

重启neutron_server使得我们的配置生效。

### 7.创建ironic node
创建支持multi-tenancy功能的ironic node，和创建普通node几乎没有区别，唯一的区别是，需要指定网卡参数 --network-interface neutron，示例如下：
``#创建部署镜像 glance image-create --name deploy-vmlinuz --visibility public --disk-format aki --container-format aki < ironic-agent.kernel glance image-create --name deploy-initrd --visibility public --disk-format ari --container-format ari < ironic-agent.initramfs DEPLOY_VMLINUZ_UUID=glance image-list |grep deploy-vmlinuz|awk '{print $2}'DEPLOY_INITRD_UUID=glance image-list |grep deploy-initrd|awk '{print $2}'`

#创建node
ironic node-create -d pxe_ipmitool -n 197test --network-interface neutron
NODE_UUID=ironic node-list|grep 197test|awk '{print $2}'

设置node driver信息

USER=admin
PASS=***2014
ADDRESS=10.200.43.197
ironic node-update $NODE_UUID add driver_info/ipmi_username=$USER driver_info/ipmi_password=$PASS driver_info/ipmi_address=$ADDRESS

设置node 属性

CPU=4
RAM_MB=8192
DISK_GB=80
ARCH=x86_64

ironic node-update $NODE_UUID add properties/cpus=$CPU properties/memory_mb=$RAM_MB properties/local_gb=$DISK_GB properties/cpu_arch=$ARCH
```
### 8.创建ironic port
创建multi-tenancy功能的port和创建普通ironic port差异较大，需要额外提供此网卡所接入的交换机的端口信息，包括：交换机主机名，交换机mac地址，通过网线接入的交换机接口名。

由于默认ironic client的使用的API版本比较旧，不支持创建含有交换机信息的得port，所以还需要先设置API版本，示例如下：
```
export IRONIC_API_VERSION=1.20

#r720 网口2 mac地址
HW_MAC_ADDRESS=b8:2a:72:ce:10:c6

#网口2接入的交换机信息
SWITCH_MAC_ADDRESS=00:af:1f:79:7d:1f
SWITCH_HOSTNAME=switch797d1f
SWITCH_PORT=GE7

创建端口

ironic port-create -a $HW_MAC_ADDRESS -n $NODE_UUID -l switch_id=$SWITCH_MAC_ADDRESS -l switch_info=$SWITCH_HOSTNAME -l port_id=$SWITCH_PORT --pxe-enabled true --physical-network physnet1
ironic port-show $PORT_UUID
```

### 9.创建裸机对应的flavor
首先要创建与裸机对应的flavor,并添加元数据，示例如下：

nova flavor-create my-baremetal-flavor auto $RAM_MB $DISK_GB $CPU
nova flavor-key my-baremetal-flavor set hypervisor_type=ironic

10. 创建裸机实例

使用上文创建的flavor和一个非部署网络（vlan102）的vlan网络，创建实例,示例如下：

nova boot --image centos --flavor 13bd7f12-27b6-4d6e-ae1b-393e63124595  --nic net-id=4745aadc-c201-4409-b4b8-0e8dae346d5e test

历史问题记录

  1. 测试发现，10.200.43.196环境，当开启主机iptables的时候，即使是同一个宿主机上同一个网络内的两台虚拟机，也不能相互通信，这是不正常的，原理未知。

  2. 测试时起初打算使用hp机器作为被部署机器测试，测试过程中发现HP机器ipmi命令和通用ipmi命令不一致，所以无法使用ironic pxe-ipmitool driver管理该机器。
  3. 只能使用pxe-ilodriver，此driver又限制了启动时只能使用UEFI启动，需要配置uefi后

  4. 配置uefi成功后，发现通过tftp拿不到镜像，原因是:我使用虚拟路由器打通flat网络和vlan网络时，将10.200.43.197设置成路由器的网关，这样从部署网络访问tftp服务时需要经过nat， tftp是局域网协议，不能通过nat访问。清除网关，将10.200.43.197作为接口加入路由器后，tftp能正常访问。（2018.07.26更新，之前的记录不够准确，tftp是否支持nat取决于路由器的设置，当我们不设置网关，而是通过添加接口到路由器中的方式来打通部署网络和管理网络，这种情况是不走nat的，所以没问题。当tftp通过nat访问的时候，因为tftp使用的是udp协议，这会出现一些问题，tftpclient向tftpserver的69端口发送请求，但是tftp server会随便选择一个自己的端口比如4362来向客户端建立连接发送回应，但是很多路由器/防火墙会丢弃这个回应，因为没有人请求tftpsever的4362端口，所以tftp连接无法建立成功。tftp跨网段拿不到镜像，还可能是tftp客户端的实现问题，tftp是刻在rom里面的，有的tftp实现不支持跨网段的tftp下载，比如这个bug，另外细节可以参考阅读tftp和rfc1350）

  5. 拿到镜像后，uefi进入系统部署流程，部署失败，HP机器的默认license只能在系统引导界面使用remote console，无法调试。

  6. 改用dell机器测试，dell机器 网口1只支持uefi启动，部署过程中出现，LBR not supported错误，查看bios发现，dell r720上的网卡，网口1只支持从uefi启动，网口2只支持从pxe启动。将网线改插入eth2，更改dell机器bios设置，令机器从bios启动，pxe拿到镜像。

  7. 部署过程中ironic报告：无法连接到iscsi服务，发现是因为宿主机上启动了iscsi服务，kolla的容器没有启动iscsi服务，导致iscsi容易不能正常工作，关闭宿主机iscsi服务，重新部署，部署成功

  8. 进入部署成功的虚拟机，发现网络不通，原因是我们使用的镜像只有eth0网卡的配置文件，我们为了让虚拟机从pxe启动，把网线插到了网口2上，所以网络不通，手动更改网络后没问题。

转载于:https://www.cnblogs.com/zhangyufei/p/7761832.html

a15010608983
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
36 为什么说Kubernetes只有soft multi-tenancy？.pdf
09-18
36 为什么说Kubernetes只有soft multi-tenancy？.pdf
tftp 服务器 ip_360Stack裸金属服务器部署实践
weixin_39631263的博客
11-23 238
女主宣言裸金属特性是一种将物理设备作为资源提供给租户的云计算服务，租户通过该服务可申请、管理和配置相应的物理设备资源，本文将介绍360Stack裸金属服务器的部署实践。PS：丰富的一线技术、多元化的表现形式，尽在“360云计算”，点关注哦！1裸金属介绍 裸金属特性是一种将物理设备作为资源提供给租户的云计算服务，租户通过该服务可申请、管理和配置相应的物理设备资源。这种物理设备是未安装操作系...
enable multi-tenancy on openstack pike
a15010608983的博客
02-26 237
Multi-tenancy 是openstack ironic从Ocata版本开始支持的新特性，通过network-generic-switch插件控制交换机，Ironic可以实现在不同租户间机网络隔离，并且可以使得物理机和虚拟机工作在同一个二层中。之前在O版本折腾过一次，也写了对应的文档，但是现在因为工作需要，在Pike版本重新做了一遍这份工作，发现但是当时理解的不是很深入，走了不少弯...
360Stack裸金属服务器部署实践
HULK一线技术杂谈
05-13 664
女主宣言裸金属特性是一种将物理设备作为资源提供给租户的云计算服务，租户通过该服务可申请、管理和配置相应的物理设备资源，本文将介绍360Stack裸金属服务器的部署实践。PS：丰富的一线技...
浅议OpenStack ironic 架构/组件/集成
Through Da Storm
11-06 1495
在Mirantis OpenStack8.0中，有一个非常显著的特性，那就是整合了 OpenStack ironic 到 Fuel 当中。所以我们认为讨论一下什么是 OpenStack ironic 很有必要，以及它是如何做到以虚拟化的方便性还为用户带来裸机的性能的原理。 什么是 OpenStack ironic？ 要是以简短的形式回答这个问题的话，OpenStack ironic 就是一组...
jpa-multi-tenancy
04-26
**JPA多租户详解** Java Persistence API (JPA) 是Java平台上的一个标准，用于对象关系映射(ORM)，...通过深入研究`jpa-multi-tenancy-master`项目，开发者可以获得宝贵的实践经验，更好地理解和应用JPA的多租户特性。
multi-tenancy-test:多租户测试
05-22
本项目"multi-tenancy-test"专注于多租户测试，使用了Java生态系统中的Hibernate 4 ORM框架和JavaServer Faces（JSF）2 Web应用框架。 **多租户概念** 多租户架构的核心是数据隔离，每个租户都有自己的数据视图，而...
multi-tenancy-sample:这是一个示例应用程序，显示了如何实现多租户架构
05-14
这是一个示例应用程序，显示了如何实现多租户架构。 要求：您应该已经安装并配置了maven您应该已经安装了MySQL并为MySQL设置了环境变量（无论您的命令行/终端目录如何，都可以在计算机中执行命令“ mysql”）。...
acm-multi-tenancy-dev-team测试：acm-multi-tenancy-dev-team测试
02-14
标题"acm-multi-tenancy-dev-team测试"暗示了这是一个关于ACM（可能是Application Configuration Manager或Automated Certificate Management）系统中多租户开发团队的测试项目。团队可能正在对支持多租户特性的代码...
Python基础 5 - 类、对象、注解
云端梦留白的博客
09-04 1382
面向对象（Object-Oriented, OOP）是一种编程范式，它使用“对象”来设计软件，这些对象包含数据（通常称为属性或字段）和代码（通常称为方法或函数），以模拟现实世界实体的属性和行为。面向对象是一种编程方法，通过创建包含数据和行为的对象来模拟现实世界，提高代码的组织性、重用性和灵活性。在 Pyhon 中，想要使用类，必须先创建对象。class 类名称 : # class 关键字，表示定义了一个类，类首字符大写为标准。
JS都有哪些操作数组的方法
ggq53219的博客
09-04 559
JavaScript 中操作数组的方法非常丰富，这些方法大致可以分为几类：创建和初始化数组、添加元素、删除元素、遍历数组、搜索元素、数组排序、数组映射和过滤等。
pip-tools：打造可重复、可控的 Python 开发环境，解决依赖关系，让代码更稳定
最新发布
weixin_53707653的博客
09-09 482
是一个强大且易用的工具，可以帮助开发者轻松管理 Python 项目的依赖关系，确保代码的可重复性和稳定性。是一组命令行工具，旨在简化 Python 依赖关系的管理，确保项目环境的稳定性和可重复性。可以确保每次构建环境时都使用相同的依赖项版本，从而避免由于依赖项版本不一致导致的错误，提高代码可重复性和稳定性。自动化了依赖关系管理过程，节省了开发者的时间和精力，可以将更多时间投入到实际的开发工作中。文件中的信息，更新虚拟环境，安装、升级或卸载所需的软件包，确保虚拟环境与。命令可以从你的项目配置文件中生成。
mongodb在Java中条件分组聚合查询并且分页(时间戳，按日期分组，年月日...)
简单发点工作中用到的，或者记录下小知识点
09-03 1779
按时间 年月日条件分组，筛选数据，统计数据，聚合查询 打印出mongo的SQL语句
Transiting from CUDA to HIP （二）
weixin_44500921的博客
09-03 1335
为了解决这个问题，HIP（Heterogeneous-compute Interface for Portability）提供了一套宏定义，使得开发者可以编写可移植的代码，这些代码可以在 NVIDIA 的 CUDA 平台和 AMD 的 ROCm 平台上运行。是一个预定义的宏，用于指示当前编译的代码所针对的 NVIDIA GPU 的计算能力（Compute Capability）。为了正确编译包含 HIP 代码的文件，您需要确保编译器能够找到 HIP 的头文件，并且定义了正确的宏。
asyncio note
weixin_48232453的博客
09-03 873
python异步库asyncio入门
【hot100篇-python刷题记录】【数据流的中位数】
m0_73629042的博客
09-04 354
精简的代码总是难以琢磨。
访问数组索引时超出边界引发 ArrayIndexOutOfBoundsException
Itmastergo的博客
09-05 1092
在 Java 中，数组是一种数据结构，用于存储固定数量的同类型元素。数组中的元素可以是基本数据类型（如intcharfloat等）或引用类型（如String、自定义类等）。数组是一种线性表数据结构，也就是说，数组中的元素可以通过一个整数索引来访问。数组的索引从0开始，这意味着对于长度为n的数组，合法的索引范围是从0到n-1。// 创建一个长度为 5 的整型数组在上面的例子中，numbers是一个包含 5 个整型元素的数组，索引从0到4。数组的大小在创建时就已经固定，因此无法动态扩展。
可视化编程 制作在线点名程序，人工和随机生成两种模式
lfsysc的博客
09-06 790
"第一排第1位置","第一排第2位置","第一排第3位置","第一排第4位置","第一排第5位置","第一排第6位置",],["第四排第1位置","第四排第2位置","第四排第3位置","第四排第4位置","第四排第5位置","第四排第6位置",],["第五排第1位置","第五排第2位置","第五排第3位置","第五排第4位置","第五排第5位置","第五排第6位置",],["第六排第1位置","第六排第2位置","第六排第3位置","第六排第4位置","第六排第5位置","第六排第6位置",],
计算机毕业设计选题推荐-任务管理系统-项目任务分配系统-Java/Python项目实战
IT研究室的博客
09-03 883
随着信息化技术的迅猛发展，各类企业和组织越来越依赖于高效的任务管理系统以保证其日常运营的顺利进行。根据IDC（国际数据公司）发布的报告显示，全球企业在数字化转型上的投入已达数千亿美元，其中相当一部分资金用于提升企业内部的管理效率。任务管理系统作为企业信息化的重要组成部分，能有效帮助企业分配、监控和反馈任务，从而提高工作效率。然而，尽管市场上已有多种任务管理系统，它们在功能、用户体验和适用性上存在显著差异。
node Tenancy
09-06
根据提供的引用内容，node的Tenancy属性是用来指定ironic节点是否支持multi-tenancy功能。multi-tenancy功能可以允许多个用户共享同一个ironic节点，每个用户可以使用自己的虚拟机进行部署和管理。在创建ironic节点时，可以通过设置--network-interface参数为neutron来启用multi-tenancy功能。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [Enable multi-tenancy on ironic](https://blog.csdn.net/a15010608983/article/details/102284768)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值