四、OpenStack入门 之 各组件解析（进阶）

最新推荐文章于 2024-09-22 06:36:41 发布
最新推荐文章于 2024-09-22 06:36:41 发布
阅读量7.7k 收藏 5
点赞数
分类专栏： OpenStack 入门 文章标签： openstack
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Heartyhu/article/details/51087104
版权

OpenStack入门 之 各组件解析（进阶）

学习目标：

  • 掌握更多组件的架构和功能

本次笔记的内容有：

  • Ceilmeter 组件解析
  • Heat 组件解析
  • Trove 组件解析
  • Sahara 组件解析
  • Ironic 组件解析

1. Ceilometer组件解析

又称为 OpenStack Telemetry（远程测量收集数据），是 OpenStack 里面做 metering 的项目。Ceilometer 的主要目的是 为计费提供数据支持。 OpenStack 本身不提供计费的功能，Ceilometer 会给人在做二次开发的时候实现计费功能带来很大的便利。

[ 计费用和监控用计量数据的区别？]

侧重点 不一样。Seilometer 是计量与计费相关的数据，这些数据作为消息在网络中传输的时候，都是会经过签名的，从信息安全的角度看，签名的最大的用处是具有 不可抵赖性，涉及到计费应用的时候是很重要的。当然，Ceilometer 现在也增加了更多其它的功能，帮助运维人员去实现更多的监控功能，逐渐地减少甚至是省去一些重新开发部署一套监控系统的工作，降低整个系统的复杂性。

[ Ceilometer 的三个要点：]

  • 原始数据的来源
  • 数据的存储
  • 如何提供给第三方系统（比如说。二次开发的计费系统）

[ 原始数据的来源主要有三个途径：]

  1. 通过 MQP 消息中间件收集各个组件发出来的消息
  2. 通过 Ceilometer 的一些 agent 来调用 OpenStack 各个 component 的 api 获得数据，这里的 component 包括 Swift、Cinder、Neutron，Trove，Sahara，Ironic
  3. 如果要有效的采集和 Nova 相关的数据或者说和 OpenStack 的计算服务相关的数据，通过在每个计算节点上运行 Ceilometer 的 polling agent 获得虚拟机的信息

[ 数据的存储：]

Ceilometer 的存储也是依赖第三方后端来实现的，默认的后端数据库是 MongoDB，是一个 key- value 数据库，当然现在也支持其它数据库包括 HBase、MySQL，首选 MangoDB。

[ 第三方系统：]

最主要的使用方式就是第三方系统，通过调用 Ceilometer API 获得计量数据，设置报警条件和预值，监听报警，进一步去实现计费和监控功能，具体使用的时候涉及到 Ceilometer 怎么设置，每项数据通过调用什么 API 获得，怎么设置报警的预值等等

2. Heat 组件解析

又被称为 openStack Orchestration，Heat 是在 OpenStack 里面提供 Orchestration 服务的组件。把一个 IT 系统的各个模块和资源组织、调度起来，形成一套完整的可以实现一些业务功能的有机的系统。

AWS 里面有一个 CloudFormation 的东西，Heat 和这个比较像，按照用户写的模版，或者说脚本，把 OpenStack 里边的各种资源给它实例化并且组织起来，形成一个完整的应用，这些脚本在 Heat 里叫作 Template，Template 生成的东西叫作 Stack。Template 里面会写清楚创建一个 Stack 需要用到哪些资源，然后这些资源的相互关系是怎么样的，这里面的资源包括我们说的虚拟机、卷（云硬盘）、用户、IP 地址等等都是属于这地方所表述的资源。

Heat 的主要任务就是负责这个 Stack 的生命周期：创建、更新和销毁。

[ Template 的组成：]

  • description 注释
  • parameters 参数
  • resources 资源
  • outputs 输出

部分截图：

[ 更复杂的结构：]

创建一个 Wordpress 网站，创建一个三层架构的网站…

PS：Heat 可以和 Ceilometer 配合使用来实现 auto scaling 也可以兼容 cloudformation 的模版

3. Trove 组件解析

[ Trove 的功能：]

根据用户的请求创建一个包含数据库的虚拟机（VM Instance），根据用户给的参数比如说数据库的类型、用户名密码等等，对数据库进行安装配置。

[ 数据库的建立：]

创建虚拟机后由 Trove 去安装；也可以用户选择事先做好 Trove 的镜像（镜像里已经装好数据库了）。后者的效率会更高一些。

[ Trove 支持的数据库有：]

  • 关系型数据库 MySQL
  • NoSQL 型数据库 MongoDB、Cassandra

[ 四个组件：]

  • Trove API 提供 RESTful API，无状态的，可以横向扩展，可以做负载均衡，可以接比较多的用户请求。
  • Trove Taskmanager 完成具体管理命令的执行，比如：创建实例、销毁实例、管理实例的生命周期、操作数据库等等。主要的工作方式就是去监听这个 RabbitMQ 中间件，发 MQP 这样一些调用的请求，然后去实现这些请求。
  • Trove-conductor 负责和数据库交互，与 Nova Conductor 比较类似，运行在 host 上。
  • Guest agent 运行在要去运行数据库服务的虚拟机里面，每一类数据库都有自己对应的 agent，让 Trove 对一个更多的数据库就要自己写对应的数据库的 agent，也是 OpenStack 常用的一种方式了。

[ Trove 面临的挑战：]

不支持自动配置数据库的 HA

4. Sahara 组件解析

[ Sahara 的功能：]

在 OpenStack 上快速创建 Hadoop 集群，利用 Iaas 上空闲的计算能力做大数据的离线处理（设计 Sahara 的初衷）

[ Sahara的架构如图所示：]

注意图中的几个地方，Sahara Dashboard、plugins、Swift（存储持久化数据）、RESTful API

[ Sahara 有两种使用模式：]

  1. IaaS 模式/管理模式
  2. PaaS、DAaaS 模式/用户模式/EDP模式（DAaaS，Data-analysis-a-Service模式）

[ 关于IaaS 模式有几个概念需要弄清楚：]

（1）节点：是用来 运行 Hadoop 集群的机器。指的是 Sahara 所 provition 的这个 Hadoop 集群的节点，实际上往往是一些虚拟机，也可以是一些物理节点。

（2）节点组：是按照节点的类型来划分的

（3）节点组模板：定义节点组。一个关于节点组模板配置文件例子如下

{
"name":"test-master-templ",
"flavor_id":"2",
"plugin_name":"vanilla",  # 声明用的是Hadoop哪个发行版的版本名
"hadoop_version":"1.2.1",  # 版本号
"node_processes":["jobtracker","namenode"] # 需要运行的哪些进程
}

（4）集群：一个完整的 Hadoop 集群，集群在 Sahara 里怎么定义呢？它是通过集群模板来定义集群的。下面是集群模板的例子：

{
"name":"demo-cluster-template",
"plugin_name":"vanilla",
"hadoop_version":"1.2.1",
"node_groups":[
    {
        "name":"master",     # 这是节点组的name
        "node_group_template_id":"b1ac3f04-c67f-445f-b06c-fb722736ccc6",     # 引用节点组模板
        "count":1    # 这个集群里面，这个节点组包括了几个节点数量
    }

    {
        "name":"workers",
        "node_group_template_id":"dbc6147e-4020-4695-8b5d-04f2efa978c5",
        "count":2
    }]
}

我们往往把这个 Hadoop 里面运行 jobtracker 和 namenode 的节点叫作 master 节点，把运行 task tracker 和 data node 的节点叫作 worker 节点。所以上面的例子就是由一个 master 节点和两个 worker 节点组成。

[ 关于 EDP 模式：]

  • 前提：在 OpenStack 里面至少要创建一个 Hadoop 集群，也可以是多个；
  • 准备工作：上传要处理的数据，我们需要很清楚我们需要处理的数据是放在哪里的，编写 Job 并且上传，需要给 Sahara 一个三元组，就是在调用 EDP API 的时候它的参数（1.用哪个集群来处理这堆数据；2.这个数据的元和素在哪里，要处理的数据在哪里放着的，然后处理完之后存哪里去；3.我们要运行的 Job 是什么）

5. Ironic 组件解析

虚拟化环境中涉及到存储 IO 的时候会不会出现性能问题？确实是存在的，尽管虚拟化 Hypervisor 都已经优化的很好了，计算方面的性能损耗已经很低了，但是说到 IO 特别是虚拟机还会用到 Cinder 后端来做 Volume，这个问题确实是存在的。

OpenStack 是通过 Ironic 来实现对物理机械的管理，用物理机器来实现云服务。

如何 launch 一个 Baremetal Server 的工作流程

我们可以看到，这个物理节点上 Nova Compute 调用的 Ironic API，实际上 launch 的物理机器节点或者说实际提供计算资源的物理节点是由 Ironic Conductor 远程管理的，通过两个东西，一个叫作 PXE，一个叫作 IPMI 来远程管理物理机器，如下图所示

那么，为什么会有这样的逻辑？因为 Ironic 实际上是从 Nova 一个部分演化出来的。

所以 Ironic 通过 Nova Compute 组件去调用 Ironic 的 API，然后再通过 Ironic Conductor 去管理一个远程的实际提供计算资源的计算节点。（Ironic 以前就是 Nova 的一个 Driver）

实际上如何用物理机器去组云，用 OpenStack 去管理一堆物理机器来实现云服务是一个很复杂的事情。

网络 MOOC 学习笔记 
From 高校帮 《OpenStack 入门 @讲师 李明宇》
By 胡飞 From BUAA
at 2016/4/3 12:48:23
HeartyHu
关注
专栏目录
【云原生进阶之容器】第六章容器网络6.6.2--Cilium部署
junbaozi的专栏
04-20 571
部署Cilium非常简单，可以通过单独的yaml文件部署全部组件（目前我使用了这个方式部署了1.7.1版本），也可以通过Helm Chart一键完成。重要的是部署环境和时机：官方建议所有部署节点都使用Linux最新稳定内核版本，这样所有的功能都能启用。作为一个Kubernetes网络组件，它应该在部署Kubernetes其他基础组件之后，才进行部署。
Openstack新手入门
06-19
适合Openstack入门使用，了解Openstack架构，各个模块的组成，部署，维护。
openstack新手入门
CNN_cocolei的博客
09-17 414
本人入职新手，初学openstack，希望记录一些笔记给刚入门的同学提供帮助。
openstack搭建-新手教程_搭建openstack
最新发布
2401_87373757的博客
09-22 1164
这里的问题是系统的cpu模式不对，产生的原因是虚拟机配置文件xml中删除了cpu mode的部分，导致之后创建虚拟机自动生成的cpu mode与不删除时的模式不一致。910 CONFIG_NEUTRON_OVS_BRIDGE_MAPPINGS=physnet1:br-ex //网桥映射，把物理网络映射给一个。554 CONFIG_CINDER_VOLUMES_CREATE=n //cinder卷组，不自动创建，自己创。
OpenStack快速入门
lin546226的博客
03-02 2119
OpenStack快速入门
Openstack快速入门
小李学不完的博客
03-20 2013
Horizon负责OpenStack管理的统一Web界面，其源代码分布在两个位置。/usr/lib/python2.7/site-packages/horizon：存放最基本的、可以共享的类、表格和模板等。/usr/share/openstack-dashboard：存放与界面有直接关系、更加具体的类、表格和模板等，这些文件可以由用户修改以实现界面定制。Horizon提供4个仪表板，对应着图形界面的一级节点，其中每个仪表板目录中又定义其下级节点（面板）。admin（管理员）
OpenStack入门以及一些资料之（四、Heat）
julykobe的专栏
05-06 4497
先把链接放上，以后有空再展开。   OpenStack中的Heat进阶： http://blog.csdn.net/lynn_kong/article/details/17195047
2020年Linux的知识技术合集（基础入门到高级进阶）
Linuxishome的博客
03-01 1536
前言 本文介绍下Linux从入门到高级进阶的学习路线。 整个路线体系专注于服务器后台开发，知识点包括C/C++，Linux，Nginx，ZeroMQ，MySQL，Redis，fastdfs，MongoDB，ZK，流媒体，CDN，P2P，K8S，Docker，TCP/IP，协程，DPDK等等 资源列表： 1：linux零基础入门 2：linux服务器开发 3：架构师开发 4：linux内核 5：we...
Linux云计算入门：963页干货解析
读者将能够深入学习Linux基础，如用户和权限管理、文件系统管理、网络配置、进程管理、软件包管理等，并逐步进阶到高级主题，如系统监控、性能调优、集群与高可用性设置，以及云计算平台如Kubernetes、OpenStack的...
Java从入门SE到进阶EE技术书籍推荐最全50+本附阅读技术书方法论
qq_43560327的博客
11-13 817
转载自某大佬博客：https://pymlovelyq.github.io/2018/10/26/java/ 前言：技术书阅读方法论 一.速读一遍（最好在1~2天内完成） 人的大脑记忆力有限，在一天内快速看完一本书会在大脑里留下深刻印象，对于之后复习以及总结都会有特别好的作用。 对于每一章的知识，先阅读标题，弄懂大概讲的是什么主题，再去快速看一遍，不懂也没有关系，但是一定要在不懂的地方做个记号，...
Openstack中各个组件的功能
04-15
Openstack中各个组件的功能，简单明了，更易于初学Openstack的学习，使学习更加简单
c# openstack api
09-26
rackspace 的 copenstack api c#
OpenStack 入门体验
2301_77081516的博客
04-16 1090
相信大家都听到很多的阿里云、腾讯云、百度云等等这些词，那到底什么是云计算？云计算又能做什么？云计算(cloud computing)是一种基于网络的超级计算模式，基于用户的不同需求，提供所需的资源，包括计算资源、存储资源、网络资源等。云计算服务运行在若干台高性能物理服务器之上，提供每秒 10 万亿次的运算能力，可以用于模拟核爆炸、预测气候变化以及市场发展趋势。云计算有广义和狭义之分。狭义的云计算是指通过网络按需向用户提供 IT 基础设施，包括硬件、平台和软件，提供资源的网络被称为“云”。
OpenStack入门体验
henanchenxuyuan的博客
08-02 1300
OpenStack 是 Rackspace(一家美国的云计算厂商)和美国国家航空航天局(National Aeronautics and Space Administration,简称 NASA)在 2010 年7月共同发起的项目。由 Rackspace 贡献存储源码(Swift)、NASA 贡献计算源码(Nova)。OpenStack是一个通过数据中心控制计算资源、存储资源和网络资源的云平台。同时它又是一款开源软件，以 Apache 许可证授权的自由软件和开放源代码项目，支持所有类型的云环境。
1 --＞ OpenStack 快速入门
weixin_38387929的博客
03-17 486
目前最流行的开源操作系统内核，主要私有云的管理系统。 OpenStack的架构定位与技术范畴 OpenStack只是系统的控制面。 OpenStack不包括系统的数据面组件，如hypervisor、存储和网络设备等。 云和虚拟化的区别 云计算：IT能力服务化； 按需使用，按量计费； 多租户隔离； 虚拟化：环境隔离，资源复用； 降低隔离损耗，提升运行效率； 提供高级虚拟化特性。 其主要特征功能如下： 资源抽象 OpenStack将各类硬件资源，通过虚拟化与软件定义的方式，抽象成资源池。 资源分配与
Openstack学习笔记 001：Openstack入门
yangfan16120029的博客
04-05 563
1 前言 工作中需要Openstack的相关知识，因此开始学习Oppenstack。目前已经学习了一周，但收效甚微，所掌握的参考资料较为凌乱，一时无法上手，看来还是要慢慢地打好基础。根据个人学习的感受，直接借用别人的Openstack知识体系还不能让我对Openstack有清晰的认识。建立这个博客的目的就在于梳理自己学习到的知识。 2 云计算 什么是云计算？以下是搜索引擎上对云计算的定义： 百...
OpenStack入门体验（云原生平台实战）
2401_85084312的博客
09-04 544
一、云计算概念一、云计算概念二、OpenStack概述OpenStack的优势三、OpenStack安装（在线安装，一键部署）1、系统基本环境设置。
OpenStack入门与架构介绍
Yummy_YMY的博客
04-24 4056
2010年7月，Rackspace和NASA合作发布了OpenStack。OpenStack每几个月就会发布一个新的版本，并以首字母从A到Z的顺序命名。OpenStack峰会和中国OpenStack黑客松活动也随之诞生。组件名称简要介绍Nova计算服务，用于为单个用户或使用群组管理虚拟机实例的整个生命周期，根据用户需求提供虚拟服务，负责虚拟机的创建、挂起、调整、销毁等操作，配置CPU和内存等信息。Swift。
OpenStack入门指南：组件部署与验证
"openstack入门宝典" 这是一本专为新手设计的OpenStack入门指南，作者参考了官方文档，并结合个人理解和实践经验进行了翻译和整理。书中着重于实践操作，每一步命令都经过验证，旨在帮助读者从零开始逐步掌握...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值