探索Cloudify：高效部署与管理云原生应用的利器

一 概述

随着云计算技术的快速发展，云原生应用的复杂度和规模不断提升，传统的部署和管理方式已经难以满足需求。如何有效地编排和管理云原生应用，使其能够快速部署、高效运行、灵活扩展，成为企业面临的重大挑战。Cloudify应运而生，它是一款基于TOSCA的云原生应用编排平台，为企业提供全面的解决方案，帮助企业轻松应对云原生应用的挑战。连接，控制和自动化从核心到边缘：无限的位置，云和设备。

Cloudify：一个单一的开源端到端平台，旨在转换网络服务和应用，连接分支机构，部署和管理多接入边缘和物联网设备，打破孤岛并按需提供所有服务 - 大规模自动化。Cloudify是一个开源的多云管理和编排平台，用于自动化和管理复杂的应用程序和基础设施。它支持混合云和多云环境下的自动化部署、编排和操作，旨在提升云原生应用的部署效率和管理能力。

1.1 什么是cloudify

Cloudify提供了一个功能强大的工具集，帮助用户实现从单一应用到复杂分布式系统的自动化部署和管理。它采用基于模板的编排方法，支持基础设施即代码（Infrastructure as Code，IaC）的实践，使得用户能够定义和管理复杂的云原生应用。

• 应用程序建模

应用程序建模使您能够以通用的描述方式描述应用程序及其所有资源（基础结构，中间件，应用程序代码，脚本，工具配置，度量标准和日志）。Cloudify DSL基于TOSCA。

• 编排

Orchestration使您可以维护和运行应用程序。除了实例化之外，您还可以执行持续操作，例如伸缩，修复和维护。

• 可插拔

是Cloudify的核心，独特功能之一。它为系统提供可重用的组件抽象。您可以使用描述性语言对所需的任何内容进行建模，例如IaaS，云，配置管理工具，SDN组件，NFV组件等。Cloudify包含许多官方支持的开箱即用插件，但您也可以构建自己的插件。

• 安全

在Cloudify Manager环境中，安全性意味着保护与Cloudify Manager的通信，并控制谁有权使用它来执行各种操作。使用SSL实现安全通信，使客户端能够验证Cloudify Manager的真实性，并确保发送给它的数据是加密的。

1.2 cloudify管理

• 部署应用程序方式：

• cli管理工具
• cloudify 管理平台

• 功能

• 利用插件（如Docker，Script，Chef和Puppet插件）来管理应用程序主机
• 保留您的蓝图目录为每个蓝图
• 创建多个部署并安装它们在已安装的应用程序上
• 执行修复，缩放和其他自定义工作流同时
• 运行多个工作流程
• 使用Cloudify Web UI查看应用程序的拓扑并执行不同的任务
• 查看指标
• 搜索日志

• 其他功能

• 通过多种身份验证机制和可自定义的授权为管理应用程序提供安全的环境
• 保留指标和事件的历史记录
• 管理在应用程序主机上运行的代理程序

二 应用场景

• 混合云管理：帮助企业在多个云环境中实现统一的管理和操作。
• 自动化部署和扩展：支持自动化部署和动态扩展，适用于大规模和高度动态的工作负载。
• DevOps实践：作为DevOps流程中的关键工具，支持持续集成/持续部署（CI/CD）工作流程，提高交付速度和质量。

三 架构

3.1 架构图

3.2 依赖组件

• Nginx
• Gunicorn
• Flask
• PostgreSQL
• RabbitMQ
• Pika

3.3 上传蓝图工作流

3.4 创建部署工作流

3.5 执行工作流

3.6 日志/事件工作流

四 实战

4.1 cloudify 管理端

4.1.1 先决条件

• 资源

• 系统

64-bit host with RHEL/CentOS 7.4

• 部署方式

物理服务器部署/Docker  images available at  Cloudify downloads.

• 网络

两个网络接口：公网/私网

端口：

4.1.2 cloudify管理平台集群安装

• 集群架构图

• 生成证书

登录后复制

cat > conffile <<EOF
[req]
distinguished_name = req_distinguished_name
x509_extensions = v3_ext
[ req_distinguished_name ]
commonName = _common_name # ignored, _default is used instead
commonName_default = myhost
[ v3_ext ]
basicConstraints=CA:false
authorityKeyIdentifier=keyid:true
subjectKeyIdentifier=hash
subjectAltName=DNS:myhost,DNS:127.0.0.1,DNS:1.1.1.2,DNS:localhost,IP:127.0.0.1,IP:1.1.1.2
EOF

sudo openssl req -newkey rsa:2048 -nodes -batch -sha256 -config conffile -out myhost.crt.csr -keyout myhost.key
sudo openssl x509 -days 3650 -sha256 -req -in myhost.crt.csr -out myhost.crt -extensions v3_ext -extfile conffile -CA ca.crt -CAkey ca.key -CAcreateserial

• 1.
• 2.
• 3.
• 4.
• 5.
• 6.
• 7.
• 8.
• 9.
• 10.
• 11.
• 12.
• 13.
• 14.
• 15.
• 16.

• 安装PostgreSSQL

登录后复制

yum install -y https://download.postgresql.org/pub/repos/yum/11/redhat/rhel-7-x86_64/pgdg-centos11-11-2.noarch.rpm

yum install -y postgresql11 postgresql11-server

# 自启
/usr/pgsql-11/bin/postgresql-11-setup initdb
systemctl enable postgresql-11
systemctl start postgresql-11

• 1.
• 2.
• 3.
• 4.
• 5.
• 6.
• 7.
• 8.

修改配置文件/etc/cloudify/config.yaml

登录后复制

postgresql_server:
  enable_remote_connections: true
  ssl_enabled: true
  postgres_password: "<select a password>"

  # Optional, make Postgres server verify client certificate
  ssl_client_verification: false
  # Optional, accept SSL connections only
  ssl_only_connections: false

ssl_inputs:
  postgresql_server_cert_path: "<path to server crt file>"
  postgresql_server_key_path: "<path to server key file>"
  postgresql_ca_cert_path: "<path to CA crt file>"


services_to_install:
# keep only database_service in the list of services to install
- database_service
#- queue_service
#- manager_service

• 1.
• 2.
• 3.
• 4.
• 5.
• 6.
• 7.
• 8.
• 9.
• 10.
• 11.
• 12.
• 13.
• 14.
• 15.
• 16.
• 17.
• 18.
• 19.
• 20.
• 21.

登录后复制

cfy_manager install [--private-ip <PRIVATE_IP>] [--public-ip <PUBLIC_IP>] [-v]

• 1.

RabbitMQ安装

安装rabbitmq

修改配置文件/etc/cloudify/config.yaml

登录后复制

rabbitmq:
  ca_path: "<path to the CA crt file>"
  cert_path: "<path to the host's crt file>"
  key_path: "<path to the hosts's key file>"
  nodename: "<the hostname>"

  # Generate a random string, for example: 7f3e952a-10b4-4e6b-8322-420ae768ab3f
  # use the same cookie in all RabbitMQ instances' installations
  erlang_cookie: "<generate a random string>"

  # List all known RabbitMQ instances,
  # for each instance, provide the default IP address
  # and list all other networks
  cluster_members:
    <hostname1>:
      default: "<host1 IP>"
      <additional network name>: "<additional network IP>"
    <hostname2>:
      default: "<host2 IP>"

  # On first RabbitMQ instance, leave empty
  # on other RabbitMQ instances, enter the first hostname
  join_cluster: "<host1>"


services_to_install:
# keep only queue_service in the list of services to install
#- database_service
- queue_service
#- manager_service

• 1.
• 2.
• 3.
• 4.
• 5.
• 6.
• 7.
• 8.
• 9.
• 10.
• 11.
• 12.
• 13.
• 14.
• 15.
• 16.
• 17.
• 18.
• 19.
• 20.
• 21.
• 22.
• 23.
• 24.
• 25.
• 26.
• 27.
• 28.
• 29.
• 30.

登录后复制

cfy_manager install [--private-ip <PRIVATE_IP>] [--public-ip <PUBLIC_IP>] [-v]

• 1.

在一个管理工作节点运行

登录后复制

cfy cluster brokers add <new broker name> <new broker address>

• 1.

移除rabiitmq

在rabbitmq集群节点执行

登录后复制

Removing RabbitMQ instances from a Cloudify Cluster

• 1.

在管理工作集群节点执行

登录后复制

cfy_manager brokers-remove -r <name of node to remove>

• 1.

校验rabbitmq集群

在rabbitmq集群节点执行

登录后复制

cfy_manager brokers-list

• 1.

管理工作集群节点

登录后复制

cfy cluster brokers list

• 1.

• 配置管理worker

修改配置文件/etc/cloudify/config.yaml

登录后复制

manager:

  # Must be set when installing the first node of a cluster.
  # Must not use when joining a cluster.
  cloudify_license_path: "<path to license file>"

  security:
    # Password for the admin user
    # must be the same on all cluster nodes
    admin_password: "<admin user password>"

rabbitmq:
  ca_path: "<path to the CA crt file>"

  # List all known RabbitMQ instances,
  # for each instance, provide the default IP address
  # and list all other networks
  cluster_members:
    <hostname1>:
      default: "<host1 IP>"
      <additional network name>: "<additional network IP>"
    <hostname2>:
      default: "<host2 IP>"

postgresql_client:
  host: "<DB host IP>"
  ssl_enabled: true

  # Optional, make Postgres server verify client certificate
  # use only if set during PostgreSQL server installation
  ssl_client_verification: false

  # Enter same password used in postgres_password when installing the PostgreSQL server
  postgres_password: "<postgresql password>"


ssl_inputs:

  # Optional, required if using ssl_client_verification
  postgresql_client_cert_path: ''
  postgresql_client_key_path: ''

  postgresql_ca_cert_path: "<path to CA crt file>"


services_to_install:
# keep only manager_service in the list of services to install
#- database_service
#- queue_service
- manager_service

• 1.
• 2.
• 3.
• 4.
• 5.
• 6.
• 7.
• 8.
• 9.
• 10.
• 11.
• 12.
• 13.
• 14.
• 15.
• 16.
• 17.
• 18.
• 19.
• 20.
• 21.
• 22.
• 23.
• 24.
• 25.
• 26.
• 27.
• 28.
• 29.
• 30.
• 31.
• 32.
• 33.
• 34.
• 35.
• 36.
• 37.
• 38.
• 39.
• 40.
• 41.
• 42.
• 43.
• 44.
• 45.
• 46.
• 47.
• 48.
• 49.
• 50.

Execute:

登录后复制

cfy_manager install [--private-ip <PRIVATE_IP>] [--public-ip <PUBLIC_IP>] [-v]

• 1.

移除管理工作节点

在管理工作节点执行

登录后复制

cfy cluster remove <host name of node to remove>

• 1.

4.2 cloudify cli安装

登录后复制

# 申请下载rpm包

sudo rpm -i <pkg.rpm>

• 1.
• 2.
• 3.

4.3 测试

通过部署一个简单的hello world的web服务器，

先决条件：git/cfy/确保8000端口开放

• 下载并解压blueprint

登录后复制

git clone https://github.com/cloudify-examples/local-simple-python-webserver-blueprint.git
 cd local-simple-python-webserver-blueprint
 cfy install blueprint.yaml
 curl http://localhost:8000
 cfy deployments outputs -b local-simple-python-webserver-blueprint
 cfy uninstall

• 1.
• 2.
• 3.
• 4.
• 5.
• 6.

• 卸载已部署的蓝图

使用Cloudify安装蓝图时，会创建部署。部署是应用程序的模型，将在应用程序生命周期中进行修改，包括所有节点实例及其运行时属性。部署还具有输出，可以是在Cloudify工作流期间生成的IP地址，端口或其他运行时属性，您希望在其他位置使用和使用。运行以下命令以检索输出：

• 可选：检索安装输出

应用程序中在蓝图中定义的每个逻辑实体都称为节点。创建部署后，每个逻辑节点将成为一个或多个节点实例的集合，这些节点实例是该节点的实例。节点可以具有多个节点实例，例如多个虚拟机。

• 可选：检索节点实例

五 注意事项

• 安全性和权限管理：确保正确配置Cloudify Manager的安全设置和访问控制，避免未经授权的访问。
• 版本控制：将Cloudify部署描述文件和相关配置纳入版本控制，以便跟踪和管理变更。
• 监控和日志：配置适当的监控和日志记录机制，帮助及时发现和解决问题。

六 总结

Cloudify作为一个开源的多云管理和编排平台，为用户提供了强大的工具和功能，帮助简化和自动化复杂的云原生应用部署和管理。通过其灵活的架构和丰富的特性，使得企业能够更高效地运维和管理其IT基础设施。

参考链接

• Cloudify官方网站
• Cloudify GitHub仓库

原创作者: kaliarch 转载于: https://blog.51cto.com/kaliarch/11312875