heartbeat简介：Heartbeat 项目是 Linux-HA 工程的一个组成部分，它实现了一个高可用集群系统。心跳服务和集群通信是高可用集群的两个关键组件，在 Heartbeat 项目里，由 heartbeat 模块实现了这两个功能。下面描述了 heartbeat 模块的可靠消息通信机制，并对其实现原理做了一些介绍。

hartbeat原理：heartbeat （Linux-HA）的工作原理：heartbeat最核心的包括两个部分，心跳监测部分和资源接管部分，心跳监测可以通过网络链路和串口进行，而且支持冗 余链路，它们之间相互发送报文来告诉对方自己当前的状态，如果在指定的时间内未收到对方发送的报文，那么就认为对方失效，这时需启动资源接管模块来接管运 行在对方主机上的资源或者服务。


实验环境：

                server1:172.25.45.1

                server2:172.25.45.2

iptables off and selinux disabled

所需软件包：heartbeat-3.0.4-2.el6.x86_64.rpm heartbeat-libs-3.0.4-2.el6.x86_64.rpm ldirectord-3.9.5-3.1.x86_64.rpm heartbeat-devel-3.0.4-2.el6.x86_64.rpm

 

所需环境：若有其它集群，要先关闭相关进程

 

【server1/server2】

1

rpm -ivh heartbeat-3.0.4-2.el6.x86_64.rpm heartbeat-devel-3.0.4-2.el6.x86_64.rpm heartbeat-libs-3.0.4-2.el6.x86_64.rpm ldirectord-3.9.5-3.1.x86_64.rpm

 

需要先解决依赖性如下图：

wKioL1eW7qvTuGRcAAEi5ty6WNU937.png

 

 可以直接yum install

 

如果是纯净的虚拟机还需要安装以下服务

 

【server1/server2】

1

2

yum install -y mysql-server 

yum install -y iscsi-initiator-utils

 

【server3】

1

yum install -y scsi-target-utils

 

添加一个硬盘  /dev/vdb

1

vim /etc/tgt/targets.conf

<target iqn.2016-07.com.example:server.target1>

    backing-store /dev/vdb

    initiator-address 172.25.45.1

    initiator-address 172.25.45.2

</target>

1

/etc/init.d/tgtd start

 

【server1/server2】

1

2

iscsiadm -t st -m discovery -p 172.25.45.3

iscsiadm -m node -l

增加一个分区/dev/sda1，并格式化。

 

【server1】

1

2

3

cd /usr/share/doc/heartbeat-3.0.4/

cp haresources ha.cf authkeys /etc/ha.d/

cd /etc/ha.d/

 

1

vim ha.cf

将48行、56行、61行、71行、76行、91行、211行、212行、220行、253行、259行的注释取消

将71行的initdead的值改为60

将211行node后改为server1.example.com

将212行node后改为server2.example.com

将220行ping的IP改为172.25.45.250

将253行的目录改为/usr/lib64/heartbeat/ipfail

 

1

vim haresources

在最后添上以下内容：

server1.example.com IPaddr::172.25.45.100/24/eth0 mysqld

 

1

vim authkeys

将23行、24行的注释取消

 

1

2

chmod 600 authkeys

scp ha.cf haresources authkeys  172.25.45.2:/etc/ha.d/

 

1

2

/etc/init.d/heartbeat start

tail -f /var/log/message

wKioL1eW7xXiVpw5AAC63yJIK20219.png

 

【server2】

1

/etc/init.d/heartbeat start

 

【server1】

1

ip addr show

wKiom1eW7zbD7cuIAABFCiZ4EyI715.png

 

关闭server1的heartbeat的服务，vip切到server2上，但把server1的heartbeat服务打开，vip会切回server1上

 

2.

【server1】

1

vim haresources

修改最后一行的内容为以下：

server1.example.com IPaddr::172.25.45.100/24/eth0 Filesystem::/dev/sda1::/var/lib/mysql::ext4  mysqld

 

1

scp haresources  172.25.45.2:/etc/ha.d/

 

1

/etc/init.d/mysqld stop

 

1

2

3

4

5

6

7

8

mount /dev/sda1 /mnt

cd /var/lib/mysql/

cp -rp * /mnt/

chown mysql.mysql /mnt/

umount /mnt

/etc/init.d/heartbeat stop

/etc/init.d/heartbeat start

tail -f /var/log/message

 

1

/etc/init.d/heartbeat start    ##在server2上

 

1

ip addr show

wKioL1eW75SB1z70AABFHYV0_lY323.png

 

wKiom1eW75SxUc98AABBwF6v0UY192.png

 

wKiom1eW73Ww68sfAAAUxxFDJpU781.png

 

1

/etc/init.d/heartbeat stop

 

1

ip addr show    ##在server2上

wKioL1eW79SiE_06AABFqSWb3_0932.png

 

wKioL1eW78CBHv3WAABCysWZMiw174.png

 

将server1上的heartbeat服务再次打开，则server2上的vip和挂载都会切回server1

 

 

##drbd##

为server1和server2都添加一个4G的虚拟硬盘

 

【server1/server2】

1

2

/etc/init.d/heartbeat stop

/etc/init.d/iscsi stop

 

1

fdisk -l

wKioL1eW7-ui622NAAA79Giul88562.png

 

所需软件包：drbd-8.4.3.tar.gz

 

1

2

3

tar zxf drbd-8.4.3.tar.gz

cd drbd-8.4.3

./configure --enable-spec --with-km

 

1

yum install -y gcc flex rpm-build    ##解决依赖性

 

1

rpmbuild -bb drbd.spec    ##报错

 

1

2

3

4

cd

cp drbd-8.4.3.tar.gz rpmbuild/SOURCES/

cd -

rpmbuild -bb drbd.spec

 

1

rpmbuild -bb drbd-km.spec    ##解决依赖性： yum install -y kernel-devel

 

1

2

cd /root/rpmbuild/RPMS/x86_64

ls

wKioL1eW7_ywG9qHAAB7FUyykiU755.png

 

1

rpm -ivh *

 

1

scp * 172.25.45.2:

 

【server2】

1

rpm -ivh drbd-*

 

【server1】

1

2

cd /etc/drbd.d/

vim example.res

添加以下内容：

resource sqldata {

meta-disk internal;

device /dev/drbd1;

 

syncer {

verify-alg sha1;

}

 

on server1.example.com {

disk /dev/vdb;

address 172.25.45.1:7789;

}

 

on server2.example.com {

disk /dev/vdb;

address 172.25.45.2:7789;

}

}

 

1

scp example.res 172.25.45.2:/etc/drbd.d/

 

【server1/server2】

1

2

drbdadm create-md sqldata

/etc/init.d/drbd start

 

【server1】

1

cat /proc/drbd

wKioL1eW8Vfx3sX3AABCqHxtZxI214.png

 

1

2

drbdadm primary sqldata --force

cat /proc/drbd

wKiom1eW8Wni4kAIAABl6BxBjPc648.png

 

1

watch cat /proc/drbd

wKiom1eW8XSCrWShAABpe4iAjBo200.png

 

 

wKiom1eW8XXB0CsoAABNPtGxxhg954.png

 

1

2

mkfs.ext4 /dev/drbd1

mount /dev/drbd1 /mnt

 

1

2

3

4

cd /var/lib/mysql/

cp -rp * /mnt/

chown mysql.mysql /mnt

umount /mnt

 

1

2

drbdadm secondary sqldata

cat /proc/drbd

wKioL1eW8YuxxBhAAABMGGPxunc030.png

 

【server2】

1

2

drbdadm primary sqldata

cat /proc/drbd

wKioL1eW8ZujdbeCAABJvm5UOko056.png

 

1

2

3

mount /dev/drbd1 /mnt

cd /mnt

ls

wKiom1eW8aSArx8PAAAVwqHeR90426.png

 

1

2

cd

umount /mnt

 

1

drbdadm secondary sqldata

 

【server1】

1

vim /etc/ha.d/haresources

修改内容为以下：

server1.example.com IPaddr::172.25.45.100/24/eth0 drbddisk::sqldata  Filesystem::/dev/drbd1::/var/lib/mysql::ext4  mysqld

 

1

scp /etc/ha.d/haresources 172.25.45.2:/etc/ha.d/

 

1

cat /proc/drbd    ##此时ro:Secondary/Secondary

 

1

2

/etc/init.d/heartbeat start

tail -f /var/log/messages

 

【server2】

1

/etc/init.d/heartbeat start

 

【server1】

1

cat /proc/drbd

wKiom1eW8brjgfLaAABMDutviH8829.png

 

wKioL1eW8buwoTYOAABB8jti0bI961.png

 

wKiom1eW8cvhsyCwAABFtKUa8mA490.png

 

wKioL1eW8dag7V--AABKK3NdYF8948.png

 

1

/etc/init.d/heartbeat stop

 

【server2】

1

cat /proc/drbd

wKiom1eW8eTDNls7AABKWODo5bY464.png

 

wKiom1eW8eXTYQrTAABCsMPkHic597.png

 

wKioL1eW8eTSt6bJAABH6UACnh8457.png