利用PaceMaker+Qpid(持久化消息)+NFS的Qpid高可用配置

利用PaceMaker+Qpid(持久化消息)+NFS的Qpid高可用配置

 

环境说明:

Qpid-vip192.168.11.34

Qpid-server01192.168.11.22

Qpid-server02192.168.11.23

 

软件版本：

qpid-cpp-server-0.18

pacemaker-1.1.10

关于pacemaker详细配置请参见<OpenStack组件高可用手册>,这里只做简单配置介绍。

Qpid高可用

说明：pacemaker+qpid的方式存在消息丢失的可能，主备机需要配置Qpid消息持久化到本地并且使用NFS（或这其他共享形式）共享/var/lib/qpidd目录，但当主备服务切换过程中消息服务是不工作的，存在消息丢失的可能性。

 

以下操作在主备节点均操作

安装Qpid服务

yum install -y qpid-tools qpid-cpp-clientpython-qpid qpid-qmf python-qpid-qmf qpid-cpp-server qpid-cpp-server-store

关闭Qpid服务自启动操作，此目的是为了让pacemaker接管Qpid服务的启动关闭。

chkconfig qpidd off

增加持久化qpid消息参数

vim /etc/qpidd.conf

#增加如下参数

amqp_durable_queues=true

将主机的qpid配置复制到备机

scp -r /etc/qpid/ 192.168.11.23:/etc/

scp /etc/qpidd.conf 192.168.11.23:/etc/

本方案中Qpid在主备节点配置了消息持久化，因此需要共享/var/lib/qpidd/目录

mount 192.168.11.21:/nfs/qpid /var/lib/qpidd

 

在任意一台节点上配置Qpid crm 脚本

crm configure

primitive p_vip_qpidd ocf:heartbeat:IPaddr2 \

  paramsip="192.168.11.34" cidr_netmask="24" \

  opmonitor interval="30s" timeout="30s"

commit

exit

 

crm configure

primitive p_qpidd lsb:qpidd

op monitor interval="30s"timeout="30s"

group g_qpidd p_vip_qpidd p_qpidd

colocation col_p_qpidd_on_vip inf: p_qpiddp_vip_qpidd

order ord_vip_before_p_qpidd inf: p_vip_qpiddp_qpidd

commit

exit

 

#################

#    开启资源    #

#################

crm resource start g_qpidd

 

#################

#    停止资源    #

#################

crm resource stop g_qpidd

 

#################

#    删除资源    #

#################

crm resource stop g_qpidd

crm resource cleanup g_qpidd

crm resource delete g_qpidd

 

修改OpenStack配置中的qpid IP地址为VIP并重启服务，确保服务正常

/etc/glance/glance-api.conf

/etc/glance/glance-registry.conf

/etc/cinder/cinder.conf

/etc/nova/nova.conf

/etc/neutron/neutron.conf

/etc/ceilometer/ceilometer.conf