Saltstack实现Haproxy自动化扩容+Openstack管理 - 学习笔记

一. etcd服务的安装和使用

---

1.安装etcd应用：

wget https://github.com/coreos/etcd/releases/download/v2.2.5/etcd-v2.2.5-linux-amd64.tar.gz -O etcd-v2.2.5-linux-amd64.tar.gz

tar -zxvf etcd-v2.2.5-linux-amd64.tar.g
cp etcd etcdctl /usr/local/bin/

2.启动etcd服务：

mkdir -p /data/etcd    #创建数据存储目录
nohup etcd -name auto_scale --data-dir /data/etcd/ \
     --listen-peer-urls 'http://172.16.1.211:2380,http://172.16.1.211:7001' \
     --listen-client-urls 'http://172.16.1.211:2379,http://172.16.1.211:4001' \
     --advertise-client-urls 'http://172.16.1.211:2379,http://172.16.1.211:4001' &

3.提交key到etcd中：

curl -s http://172.16.1.211:2379/v2/keys/message -XPUT -d value="hello world" | python -m json.tool   #结果通过python的json模块转义输出，增加可读性。

4.获取刚才提交的key值：

 curl -s http://172.16.1.211:2379/v2/keys/message | python -m json.tool

5.删除刚才提交的key：

 curl -s http://172.16.1.211:2379/v2/keys/message -XDELETE | python -m json.tool

6.提交带10秒过期时间的key：

curl -s http://172.16.1.211:2379/v2/keys/ttl_use -XPUT -d value="hello world 1" -d ttl=10 | python -m json.tool

二. 实现Salt自动化让Haproxy扩容

---

1.配置salt的pillar连接etcd：

yum install python-pip
pip install python-etcd #安装python的etcd包
vim /etc/salt/master

#底部添加
etcd_pillar_config:
  etcd.host: 172.16.1.211
  etcd.port: 4001

ext_pillar:
  - etcd: etcd_pillar_config root=/salt/haproxy/   #root参数是指定etcd里面的目录

/etc/init.d/salt-master restart

2.测试通过salt获取pillar:

curl -s http://172.16.1.211:2379/v2/keys/salt/haproxy/backend_www_wmj_com/web-node1 -XPUT -d value="172.16.1.213:8080" | python -m json.tool

salt '*' pillar.item

3.让salt模板自动添加haproxy的backend：

vim /srv/salt/prod/cluster/files/haproxy-outside.cfg

backend backend_www_example_com
option forwardfor header X-REAL-IP
option httpchk HEAD / HTTP/1.0
balance roundrobin
server web-node1  172.16.1.213:8080 check inter 2000 rise 30 fall 15
server web-node2  172.16.1.214:8080 check inter 2000 rise 30 fall 15

#使用for循环获取etcd的key值
{% for web,web_ip in pillar.backend_www_wmj_com.iteritems() %}
server {{ web }} {{ web_ip }} check inter 2000 rise 30 fall 15
{% endfor %}

4.添加一台haproxy的节点：

# curl -s http://172.16.1.211:2379/v2/keys/salt/haproxy/backend_www_wmj_com/web-node3 -XPUT -d value="172.16.1.215:8080" | python -m json.tool
# salt '*' state.sls cluster.haproxy-outside env=prod

5.简单的自动化扩容脚本：

#!/bin/bash
create_host(){
        echo "create host"
}
deploy_service(){
        salt '*' state.sls nginx.install env=prod
}
deploy_code(){
        echo "deploy code ok"
}
service_check(){
        STATUS=$(curl -s --head http://172.16.1.213:8080/ | grep '200 OK')
        if [ -n "$STATUS" ];then
                echo "HTTP ok"
        else
                echo "HTTP not ok"
                exit 1
        fi
}
etcd_key(){
        curl -s http://172.16.1.211:2379/v2/keys/salt/haproxy/backend_www_wmj_com/web-node4 -XPUT -d value="172.16.1.213:8080"
}
sync_state(){
        salt '*' state.sls cluster.haproxy-outside env=prod
}
main(){
        create_host
       deploy_service
        deploy_code
        service_check
        etcd_key
        sync_state
}
main

三.Salt-cloud实现Openstack管理

---

官方手册： https://docs.saltstack.com/en/latest/topics/cloud/openstack.html

安装环境：
172.16.1.211 salt-master服务器
172.16.1.240 openstack控制节点

ps: 下面都在salt-master操作

1.安装插件：

yum install salt-cloud python-libcloud

2.创建salt-cloud配置文件：

mkdir /etc/salt/cloud.providers.d/
vim /etc/salt/cloud.providers.d/openstack.conf

my-openstack-config:
  # Set the location of the salt-master
  #
  minion:
    master: 172.16.1.211

  # Configure the OpenStack driver
  #
  identity_url: http://172.16.1.240:5000/v2.0/tokens
  compute_name: nova
  protocol: ipv4

  compute_region: RegionOne

  # Configure Openstack authentication credentials
  #
  user: demo
  password: demo
  # tenant is the project name
  tenant: demo

  driver: openstack
  provider: openstack

  # skip SSL certificate validation (default false)
  insecure: false

3.查看镜像列表：

salt-cloud --list-images openstack  #查看镜像列表
salt-cloud --list-size openstack    #查看云主机类型

4.创建Salt-cloud虚拟机模板文件：

vim /etc/salt/cloud.profiles.d/web.conf

web-node:             #虚拟机模板名称
  provider: my-openstack-config   #前面配置文件定义的
  size: m1.tiny               #云主机类型
  image: cirros               #镜像名称
  ssh_key_file: /root/.ssh/id_rsa     #公钥文件
  ssh_key_name: mykey         #密钥对名称
  ssh_interface: private_ips
  networks:
    - fixed:
      - 69200e49-0f8b-47b6-9bb5-2db9bca9a393     #网络的ID
  minion:            #下面是自动给虚拟机安装salt-minion并配置
    master: 172.16.1.211
    grains:
      role: webserver-01

4.通过Salt-cloud创建Openstack虚拟机：

salt-cloud -p web-node web-test1 -l debug

# -p: 虚拟机模板名称
# web-test1: 创建虚拟机的名称
# -l debug： 打印debug