07.计算Nova→3.场景学习→2.Launch→3.nova-compute

最新推荐文章于 2020-11-02 17:35:38 发布
最新推荐文章于 2020-11-02 17:35:38 发布
阅读量173 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiangrongweng0547/article/details/97215794
版权
描述详细
  1. 为 instance 准备资源
    1. nova-compute 首先会根据指定的 flavor 依次为 instance 分配内存、磁盘空间和 vCPU。
    2. 网络资源也会提前分配。
 
1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
DEBUG nova.compute.manager 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
 
{{(pid=5666) _do_build_and_run_instance /opt/stack/nova/nova/compute/manager.py:1835

1
2
3
4
5
6
7
 
Jun 16 13:12:52 compute nova-compute[5666]: 
DEBUG oslo_concurrency.lockutils 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
Lock "compute_resources" acquired 
by "nova.compute.resource_tracker.instance_claim" :: waited 0.000s 
{{(pid=5666) inner 
/usr/local/lib/python2.7/dist-packages/oslo_concurrency/lockutils.py:273

1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
DEBUG nova.compute.resource_tracker 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
 
{{(pid=5666) instance_claim /opt/stack/nova/nova/compute/resource_tracker.py:202
(ADJ) 在头顶上的；在上面的；高架的→You use overhead to indicate that something is above you or above the place that you are talking about.
n. 经常费用; 经常开支; 
这里指开销 
1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
DEBUG nova.compute.resource_tracker 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 

{{(pid=5666) instance_claim /opt/stack/nova/nova/compute/resource_tracker.py:205

1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
DEBUG nova.compute.resource_tracker 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
 
{{(pid=5666) instance_claim /opt/stack/nova/nova/compute/resource_tracker.py:208

1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093]
创建虚拟机时选择的flavor是 paste-51384988729347.jpg 
1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 


1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 
memory limit not specified, defaulting to unlimited

1
2
3
4
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 

1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 
disk limit not specified, defaulting to unlimited

1
2
3
4
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093]
4VCPU是因为该日志是在公司开发环境搭建的2节点devstack上产生的，每台机器VCPU数量为4 
1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 
vcpu limit not specified, defaulting to unlimited

1
2
3
4
5
 
Jun 16 13:12:52 compute nova-compute[5666]: 
DEBUG nova.virt.hardware 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
Require both a host and instance NUMA topology to fit instance on host. 
{{(pid=5666) numa_fit_instance_to_host /opt/stack/nova/nova/virt/hardware.py:1465

1
2
3
4
 
Jun 16 13:12:52 compute nova-compute[5666]: 
INFO nova.compute.claims 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093]
网络资源也会提前分配。
1
2
3
4
5
6
 
Jun 16 13:12:53 compute nova-compute[5666]: 
DEBUG nova.compute.manager 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin]
 [instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 

{{(pid=5666) _allocate_network_async /opt/stack/nova/nova/compute/manager.py:1423
  1. 创建 instance 的镜像文件
首先将该 image 下载到计算节点，然后将其作为 backing file 创建 instance 的镜像文件。
    1. 从 Glance 下载 image
      1. 资源准备好之后，nova-compute 会为 instance 创建镜像文件。OpenStack 启动一个 instance 时，会选择一个 image，这个 image 由 Glance 管理。
  1. nova-compute 首先会检查 image 是否已经下载（比如之前已经创建过基于相同 image 的 instance）。如果没有，就从 Glance 下载 image 到本地。由此可知，如果计算节点上要运行多个相同 image 的 instance，只会在启动第一个 instance 的时候从 Glance 下载 image，后面的 instance 启动速度就大大加快了。 
  1. 日志分析：
    1. image（ID为 f0bdf0e7-ebb5-459d-a7a5-a0f0ed13d6d7）是 qcow2 格式，nova-compute 将其下载。Nova 默认会通过 qemu-img 转换成 raw 格式，以提高 IO 性能。paste-185340723724291%20(1).jpg
    2. 下载的image 的存放目录是 /opt/stack/data/nova/instances/_base，这是由/etc/nova/nova.conf 的两个配置选项决定的
      1
2
3
4
5
      		 
      [DEFAULT]
...
instances_path = /opt/stack/data/nova/instances
base_dir_name = _base
...
    3. 下载的 image 文件被命名为 6eb03a619bcf59de5a27bf520cf83606bf8327a7，这是 image id 的 SHA1 哈希值Secure Hash Algorithm
 
1
2
3
4
5
 
Jun 16 13:12:55 compute nova-compute[5666]: 
DEBUG nova.virt.images 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
 
{{(pid=5666) fetch_to_raw /opt/stack/nova/nova/virt/images.py:179
1
2
3
4
5
 
Jun 16 13:12:55 compute nova-compute[5666]: 
DEBUG nova.utils 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
Path  supports direct I/O 
{{(pid=5666) supports_direct_io /opt/stack/nova/nova/utils.py:1394
1
2
3
4
5
6
7
 
Jun 16 13:12:55 compute nova-compute[5666]: 
DEBUG oslo_concurrency.processutils 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
Running cmd (subprocess): 


{{(pid=5666) execute /usr/local/lib/python2.7/dist-packages/oslo_concurrency/processutils.py:372
-O：output format；-f：format；-t：cache
paste-186148177575939%20(1).jpg

paste-81883551498243.jpg
backing file的id不一样是因为这条是我后来添加的笔记(又一个实例)
  1. 为 instance 创建镜像文件
    1. 有了 下载的image 之后，instance 的镜像文件直接通过 qemu-img 命令创建，backing file 就是下载的 image。
    2. 这里 instance 的镜像文件是 /opt/stack/data/nova/instances/86f71e87-4ae2-48fb-9bcd-c72e3c28e093/disk，格式为 qcow2，其中 86f71e87-4ae2-48fb-9bcd-c72e3c28e093就是 instance的 id。可以通过 qume-info 查看 disk 文件的属性paste-191731635060739.jpg
 
1
2
3
4
5
6
7
 
Jun 16 13:12:57 compute nova-compute[5666]: 
DEBUG oslo_concurrency.processutils 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
Running cmd (subprocess):  
 
 
{{(pid=5666) execute /usr/local/lib/python2.7/dist-packages/oslo_concurrency/processutils.py:372
-o：options
 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
 
root@compute:~# qemu-img info /opt/stack/data/nova/instances/86f71e87-4ae2-48fb-9bcd-c72e3c28e093/disk
image: /opt/stack/data/nova/instances/86f71e87-4ae2-48fb-9bcd-c72e3c28e093/disk

virtual size: 1.0G (1073741824 bytes)
disk size: 1.9M
cluster_size: 65536

Format specific information:
    compat: 1.1
    lazy refcounts: false
    refcount bits: 16
    corrupt: false
  1. 说明：
    1. image，指的是 Glance 上保存的镜像，作为 instance 运行的模板。 计算节点将下载的 image 存放在 /opt/stack/data/nova/instances/_base 目录下。
    2. 镜像文件，指的是 instance 启动盘所对应的文件
    3. 二者的关系是：image 是镜像文件 的 backing file。image 不会变，而镜像文件会发生变化。比如安装新的软件后，镜像文件会变大。
    4. 英文中两者都叫 “image”，为避免混淆，我们用 “image” 和 “镜像文件” 作区分。
  1. 创建 instance 的 XML 定义文件
    1. cloudman：创建的 XML 文件会保存到该 instance 目录 /opt/stack/data/nova/instances/f1e22596-6844-4d7a-84a3-e41e6d7618ef，命名为 libvirt.xml
    2. 我：在/opt/stack/data/nova/instances/86f71e87-4ae2-48fb-9bcd-c72e3c28e093/没有找到.xml这个文件
      1. 但是在计算节点的/etc/libvirt/qemu/发现xml文件，该文件记录了虚机的各种参数paste-59249073848323.jpg


cloudman：
paste-214585156042755.jpg
我的：
日志中关于xml的有：
1
2
3
 
DEBUG nova.virt.libvirt.driver
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 
 network_info=[...

1
2
3
 
DEBUG nova.virt.libvirt.driver
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093]
这个过程应该是获取xml文件吧，然后正式启动创建过程
 
1
2
3
4
5
6
7
 
root@compute:~# ll /opt/stack/data/nova/instances/86f71e87-4ae2-48fb-9bcd-c72e3c28e093/
total 2052
drwxr-xr-x 2 stack libvirt    4096 Jun 16 13:12 ./
drwxr-xr-x 5 stack root       4096 Jun 16 13:12 ../
-rw------- 1 root  root      48807 Jun 16 15:23 console.log
-rw-r--r-- 1 root  root    2097152 Jun 16 15:23 disk
-rw-r--r-- 1 stack libvirt      86 Jun 16 13:12 disk.info
  1. 创建虚拟网络并启动 instance
    1. 创建虚拟网络：用的是 linux-bridge 实现的虚拟网络
  • cloudman：为 instance 创建虚拟网络设备
  • 我：没有找到Ensuring bridge
cloudman：
paste-215298120613891.jpg
vif是virtual interface(虚拟网卡)的缩写
我：
1
2
3
4
5
6
7
8
9
 
Jun 16 13:12:57 compute nova-compute[5666]: 
DEBUG nova.network.base_api 
[None req-d9a23179-e16d-4016-9586-e68c3dfdf6a9 admin admin] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 
Updating instance_info_cache with _info: 
[{"profile": {}, ... "network": {, 
"subnets": [{"ips": [{"meta": {}, "version": 4, ... "address": }], 
"version": 4, "meta": {}, ... "cidr": , ...
 {{(pid=5666) update_instance_cache_with_nw_info /opt/stack/nova/nova/network/base_api.py:48
虽然没有Ensuring bridge，但是有nova.virt.libvirt.vif参考见07.计算Nova→3.通过场景学习nova→4.Start Instance。总之，上述过程表示网络相关
  1. 接下来可以启动 instance了，最后Instance spawned successfully表示实例成功孵化。
    1. OpenStack 图形界面和 KVM CLI 都可以查看到 instance 的运行状态。paste-191731635060739.jpg
      paste-258256383508483.jpg1.virsh list用于显示当前节点创建的实例，而不是像nova list似的显示所有节点创建的实例 2.由于是第一次创建实例，故Name是...1
 
1
2
3
 
Jun 16 13:13:01 compute nova-compute[5666]: 
INFO nova.compute.manager [-] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 

1
2
3
4
 
Jun 16 13:13:01 compute nova-compute[5666]: 
INFO nova.compute.manager 
[None req-9b9e116b-fa49-46b3-8c41-9bade624c334 None None] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 

1
2
3
4
5
 
Jun 16 13:13:01 compute nova-compute[5666]: 
INFO nova.compute.manager 
[None req-9b9e116b-fa49-46b3-8c41-9bade624c334 None None] 
[instance: 86f71e87-4ae2-48fb-9bcd-c72e3c28e093] 
. Skip.
同步电源状态
 
1
2
3
4
 
Jun 16 13:13:01 compute nova-compute[5666]: 
INFO nova.compute.manager 
[None req-9b9e116b-fa49-46b3-8c41-9bade624c334 None None]
resume [rɪ'zjum](V-ERG) （使）重新开始;（使）继续进行 
1
2
3
 
Jun 16 13:13:01 compute nova-compute[5666]: 
INFO nova.virt.libvirt.driver [-]
spawn [spɔn]：孵化
LeisureZhao
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Nova 实现的 Fit Instance NUMA to Host NUMA 算法
烟云的计算
07-04 2343
目录 文章目录目录前文列表numa_fit_instance_to_host_numa_fit_instance_cell_numa_fit_instance_cell_with_pinning_pack_instance_onto_cores 前文列表 《OpenStack Nova 高性能虚拟机之 NUMA 架构亲和》 《OpenStack Nova 高性能虚拟机之 CPU 绑定》 《Open...
如何设置Openstack 虚拟机的Numa架构和Cpu亲和性
m0_47541842的博客
03-02 3235
CPU拓扑 OpenStack中的NUMA拓扑和CPU固定功能可提供对实例在虚拟机管理程序CPU上的运行方式以及实例可用的虚拟CPU拓扑的高级控制。这些功能有助于最大程度地减少延迟并提高性能。 SMP，NUMA和SMT 对称多处理器（SMP） SMP是在许多现代多核系统中发现的设计。在SMP系统中，有两个或多个CPU，并且这些CPU通过某种互连连接。这为CPU提供了对系统资源（如内存和输入/输出端口）的同等访问权限。 非统一内存访问（NUMA） NUMA是SMP设计的派生产品，可在许多多路插座系
使用nova库获取vmware虚拟机硬件信息
boOO00
05-21 5353
>>> from nova.virt.vmwareapi.driver import VMwareAPISession >>> session = VMwareAPISession(host_ip="xxx.xxx.xxx.xx",                  username="xxx",                  password="xxxxx",            
openstack-lanch an instance and nova compute log analysis
weixin_30512043的博客
12-13 370
1. how to launch an instance: [root@localhost ~(keystone_admin)]# nova flavor-list+----+-----------+-----------+------+-----------+------+-------+-------------+-----------+| ID | Name | Memory_M...
SEO is Dead?
SEO_USD的博客
11-02 496
昨天晚上有一位会员朋友在微信里突然甩给我一张图，问我有什么看法？ 本来打算在会员星球里简单聊两句，但是一两段话写不爽，就索性写一篇公众号和大家聊一聊我的看法。 其实SEO is Dead这个话题，在SEO业内内应该算是一个常青话题，每隔一段时间就会有人提起来。 不过这次提出这个观点的人是Backlinko的联合创始人，也是我个人非常喜欢的一位SEO大牛博主 -Brian Dean 前几天他在推特里，连续发推以及图片来“解释”SEO is Dead 谷歌的John Muller.
wx-open-launch-app微信浏览器打开指定app app指定页面 vue3
最新发布
05-17
主要适用于 微信中的分享 在微信浏览器中 打开指定app 一般是用于uniapp的开发的app 当然其他的原生开发的app 也可以作为参考 都是源码 请自行参考 注释的都是可以自行替代 已经上线 源码没有bug
sbt-launch.jar(sbt1.0.0)重新编译后,使用国内镜像下载)
11-07
sbt-launch.jar(sbt1.0.0)重新编译后,使用国内镜像下载),第一次构建项目2分钟内完成,以后再30s内完成构建
sbt-launch.jar
05-22
例如，如果你的项目依赖于0.13.9版本的SBT，你可以将sbt-launch-0.13.9.jar添加到你的项目配置中，以便在运行SBT时使用该特定版本。 在实际使用中，通常不直接操作sbt-launch.jar，而是通过设置SBT的全局或者项目...
VSCode launch.json配置详细教程.zip
05-07
通过阅读提供的"VSCode launch.json配置详细教程.pdf"文档，你将能够更深入地了解每个配置选项的具体含义和使用场景，从而更好地利用VSCode的强大调试功能，提升开发效率。记得实践操作，不断探索和调整配置，以适应...
Node.js-launch-editor从Node.js用编辑器中的行号打开文件
08-10
标题 "Node.js-launch-editor从Node.js用编辑器中的行号打开文件" 提供了一个关于Node.js扩展模块的信息，这个模块允许开发者从Node.js环境中启动一个编辑器，并且能指定到特定文件的行号。在软件开发过程中，这种...
关于nova的resource定时更新的功能
云计算
11-27 1178
nova有个定时更新resource的功能： 每当创建虚拟机的时候会去检查资源是否够用如内存，磁盘，cpu等，这些信息是存储在数据库nova的compute_nodes表中的，这些信息是定时更新的，更新步骤如下： 1. 主要是该定时程序nova/compute/manager.py：  @periodic_task.periodic_task     def update_av
nova boot代码流程分析(一)：Claim机制
热门推荐
gj19890923的专栏
04-09 1万+
nova boot创建VM的流程大致为： 1. novaclient发送HTTP请求到nova-api(这里内部细节包括keystone对用户的验证及用户从keystone获取token和endpoints等信息，具体参考《keystone WSGI流程》)。 2. nova-api通过rpc调用到nova-conductor。 3. nova-conductor调用rpc进入nova-sc
nova schedule 调度器之FilterScheduler 申请到instance后HostState持有资源的更新
jason的笔记
03-30 935
在filter_scheduler.py 的_schedule 中选出需要的host后，会调用chosen_host.obj.consume_from_request(spec_obj) 来更新resource资源. consume_from_request 是在host_manager.py中实现  def consume_from_request(self, spec_obj):    
openstack怎么查看日志（小白适用实操版2019）
TinaSprunt的开发笔记
12-10 7109
首先从最简单的开始，新建一个虚拟机（Launch Instance）并查看其日志 1.在网页上登录搭建好的openstack虚机（名称为op1）的dashboard界面 2.远程SSH登录op1的命令行界面 Xshell输入 ssh 192.168.xx.xx ssh 后面是你的服务器域名(需要登录一个控制节点，一个计算节点，因为创建虚机的日志有些在控制节点上，有的在计...
nova创建虚拟机时资源的检测
jason的笔记
02-24 2232
在通过/nova/compute/manager.py:ComputeManager中的_build_and_run_instance来创建虚拟机的时候，会通过claim机制来监视当前的资源是否够创建虚拟机     def _build_and_run_instance(self, context, instance, image, injected_files,             ad
nova的资源管理
实践求真知
03-26 1995
nova-compute需要在数据库中存储主机的资源使用情况，包括内存、cpu、磁盘等，以便nova-scheduler获取作为选择主机的依据，这就要求每创建、迁移、删除一个虚拟机，都要更新数据库中相关的内容。Nova使用ComputeNode对象保存计算节点的配置信息以及资源使用状态。nova-compute为每一个主机创建一个ResourceTracker对象，任务就是更新ComputeNod...
nova-compute Periodic tasks 机制
gj19890923的专栏
01-25 5281
我们本文将讲述nova-compute组件的resource tracker和report state的periodic task机制的代码流程。         在前面关于nova-scheduler组件的启动主要分析了关于RPC-server的创建流程，同样地，nova-compute组件的resource tracker和report state的periodic task也是在其服务启动
H3C S3100-SI交换机802.1x配置命令详解
4. `dot1x dhcp-launch`：与DHCP（动态主机配置协议）联动，启动802.1x认证后分配IP地址。 5. `dot1x guest-vlan`：设置未通过认证用户的来宾VLAN，允许他们有限的网络访问。 6. `dot1x max-user`：设定每个端口的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值