mysql proxy_Mysql读写分离--mysql-proxy

0cb6caad4f5ec16cc6289c66275c691e.png

准备前提:

1、MySQL的安装与配置 --省略

版本:Server version: 5.6.35

1.1 系统版本:

[root@centos7-67 package]# lsb_release -a

LSB Version::core-4.1-amd64:core-4.1-noarch

Distributor ID:CentOS

Description:CentOS Linux release 7.2.1511 (Core)

Release:7.2.1511

Codename:Core

2、场景描述

数据库Master主服务器:192.168.1.83

数据库Slave从服务器:192.168.1.66

MySQL-Proxy调度服务器:192.168.1.67

以下操作,均是在192.168.1.67即MySQL-Proxy调度服务器 上进行的。

配置主从复制,并在192.168.1.66上开启 start slave;

MySQL-Proxy上安装所需软件包

yum install -y gcc* gcc-c++* autoconf* automake* zlib* libxml* ncurses-devel* libmcrypt* libtool* flex* pkgconfig* libevent* glib* readline-devel*

3、编译安装lua

MySQL-Proxy的读写分离主要是通过rw-splitting.lua脚本实现的,因此需要安装lua

下载:

从http://www.lua.org/download.html下载源码包

wget http://www.lua.org/ftp/lua-5.3.4.tar.gz

3.1  tar xf lua-5.3.4.tar.gz

3.2  cd lua-5.3.4

3.3  vi src/Makefile

CFLAGS= -O2 -Wall -fPIC -Wextra -DLUA_COMPAT_5_2 $(SYSCFLAGS) $(MYCFLAGS)

3.4   make linux

3.5   make install

下载:

https://downloads.mysql.com/archives/get/file/mysql-proxy-0.8.5-linux-glibc2.3-x86-64bit.tar.gz

4、tar xf mysql-proxy-0.8.5-linux-glibc2.3-x86-64bit.tar.gz

5、mv mysql-proxy-0.8.5-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy

6、cd /usr/local/mysql-proxy

7、mkdir lua #创建脚本存放目录

mkdir logs #创建日志目录

8、cp share/doc/mysql-proxy/rw-splitting.lua ./lua #复制读写分离配置文件

9、cp share/doc/mysql-proxy/admin-sql.lua ./lua #复制管理脚本

10、vi /etc/init.d/mysql-proxy   #创建mysql-proxy服务管理脚本

[root@centos7-67 ~]# cat /etc/init.d/mysql-proxy

#!/bin/sh

# mysql-proxy This script starts and stops the mysql-proxy daemon

#

# chkconfig: - 78 30

# processname: mysql-proxy

# description: mysql-proxy is a proxy daemon to mysql

# Source function library.

. /etc/rc.d/init.d/functions

#PROXY_PATH=/usr/local/bin

PROXY_PATH=/usr/local/mysql-proxy/bin

prog="mysql-proxy"

# Source networking configuration.

. /etc/sysconfig/network

# Check that networking is up.

#[ ${NETWORKING} == "no" ] && exit 0

# Set default mysql-proxy configuration.

PROXY_OPTIONS="--log-level=info \

--log-file=/var/log/mysql-proxy.log \

--plugins=proxy -b 192.168.1.83:3306 -r 192.168.1.66:3306 \

--proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua \

--plugins=admin --admin-username=admin \

--admin-password=admin \

--admin-lua-script=/usr/local/mysql-proxy/lib/mysql-proxy/lua/admin.lua"

PROXY_PID=/usr/local/mysql-proxy/mysql-proxy.pid

# Source mysql-proxy configuration.

if [ -f /etc/sysconfig/mysql-proxy ]; then

. /etc/sysconfig/mysql-proxy

fi

PATH=$PATH:/usr/bin:/usr/local/bin:$PROXY_PATH

# By default it's all good

RETVAL=0

# See how we were called.

case "$1" in

start)

# Start daemon.

echo -n $"Starting $prog: "

$NICELEVEL $PROXY_PATH/mysql-proxy $PROXY_OPTIONS --daemon --pid-file=$PROXY_PID --user=mysql

RETVAL=$?

echo

if [ $RETVAL = 0 ]; then

touch /var/lock/subsys/mysql-proxy

fi

;;

stop)

# Stop daemons.

echo -n $"Stopping $prog: "

killproc $prog

RETVAL=$?

echo

if [ $RETVAL = 0 ]; then

rm -f /var/lock/subsys/mysql-proxy

rm -f $PROXY_PID

fi

;;

restart)

$0 stop

sleep 3

$0 start

;;

condrestart)

[ -e /var/lock/subsys/mysql-proxy ] && $0 restart

;;

status)

status mysql-proxy

RETVAL=$?

;;

*)

echo "Usage: $0 {start|stop|restart|status|condrestart}"

RETVAL=1

;;

esac

exit $RETVAL

11、脚本更改说明:

PROXY_PATH=/usr/local/mysql-proxy/bin//定义mysql-proxy服务二进制文件路径

--proxy-read-only-backend-addresses=192.168.1.66:3306       //定义从服务器可读

--proxy-backend-addresses=192.168.1.83:3306 //定义主服务器可写 --proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua"//定义lua读写分离脚本路径

PROXY_PID=/usr/local/mysql-proxy/mysql-proxy.pid//定义mysql-proxy PID文件路径

--daemon  //定义以守护进程模式启动

--keepalive //使进程在异常关闭后能够自动恢复

--pid-file=$PROXY_PID  //定义mysql-proxy PID文件路径

--user=mysql  //以mysql用户身份启动服务

--log-level=warning  //定义log日志级别,由高到低分别有(error|warning|info|message|debug)

--log-file=/usr/local/mysql-proxy/logs/mysql-proxy.log //定义log日志文件路径

12、chmod 755  /etc/init.d/mysql-proxy

13、vi /usr/local/mysql-proxy/lua/rw-splitting.lua //修改读写分离脚本//修改默认连接,进行快速测试,不修改的话要达到连接数为4时才启用读写分离

-- connection pool

if not proxy.global.config.rwsplit then

proxy.global.config.rwsplit = {

min_idle_connections = 1,//默认为4

max_idle_connections = 1,//默认为8

is_debug = false

}

end

14、启动mysql-proxy

/etc/init.d/mysql-proxy start

15、启动成功:

[root@centos7-67 ~]# netstat -nutlp| grep mysql

tcp        0      0 0.0.0.0:4040            0.0.0.0:*               LISTEN      18520/mysql-proxy

tcp        0      0 0.0.0.0:4041            0.0.0.0:*               LISTEN      18520/mysql-proxy

16、测试读写分离效果

创建用于读写分离的数据库连接用户

登陆主数据库服务器192.168.1.83,通过命令行登录管理MySQL服务器

mysql>  GRANT ALL ON *.* TO 'proxy1'@'192.168.1.67' IDENTIFIED BY 'password';

由于我们配置了主从复制功能,因此从数据库服务器172.16.1.66上已经同步此操作。

为了清晰的看到读写分离的效果,需要暂时关闭MySQL主从复制功能;线上是需要主从同步的,这里只是做实验测试,需要关闭

登录从数据库服务器192.168.1.66

关闭Slave同步进程

mysql> stop slave;

连接到mysql-proxy

[root@centos7-67 ~]# mysql -uproxy1 -p'password' -P4040 -h192.168.1.67

插入2条数据

mysql> insert into t1 values (120,'third');

Query OK, 1 row affected (0.02 sec)

mysql> insert into t1 values (121,'for');

Query OK, 1 row affected (0.01 sec)

验证:

mysql-proxy:

mysql> select * from t1; //没有看到数据

master:

mysql> select * from t1; //可以看到数据

slave:

mysql> select * from t1; //没有看到数据

连接管理端口:

[root@centos7-67 ~]# mysql -uadmin -padmin -h192.168.1.67 -P4041

mysql> SELECT * FROM backends;

+-------------+-------------------+-------+------+------+-------------------+

| backend_ndx | address           | state | type | uuid | connected_clients |

+-------------+-------------------+-------+------+------+-------------------+

|           1 | 192.168.1.83:3306 | up    | rw   | NULL |                 0 |

|           2 | 192.168.1.66:3306 | up    | ro   | NULL |                 0 |

+-------------+-------------------+-------+------+------+-------------------+

2 rows in set (0.00 sec)

up:表示读写分离生效;unKnown:还没生效

结论:当在mysql-proxy插入数据时,写入到了master上,查询数据是从slave上查看,所以查询不到数据。当在slave上插入数据,在mysql-proxy上可以看到,说明读是从slave上,写是在master上。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
1 目标检测的定义 目标检测(Object Detection)的任务是找出图像中所有感兴趣的目标(物体),确定它们的类别和位置,是计算机视觉领域的核心问题之一。由于各类物体有不同的外观、形状和姿态,加上成像时光照、遮挡等因素的干扰,目标检测一直是计算机视觉领域最具有挑战性的问题。 目标检测任务可分为两个关键的子任务,目标定位和目标分类。首先检测图像中目标的位置(目标定位),然后给出每个目标的具体类别(目标分类)。输出结果是一个边界框(称为Bounding-box,一般形式为(x1,y1,x2,y2),表示框的左上角坐标和右下角坐标),一个置信度分数(Confidence Score),表示边界框中是否包含检测对象的概率和各个类别的概率(首先得到类别概率,经过Softmax可得到类别标签)。 1.1 Two stage方法 目前主流的基于深度学习的目标检测算法主要分为两类:Two stage和One stage。Two stage方法将目标检测过程分为两个阶段。第一个阶段是 Region Proposal 生成阶段,主要用于生成潜在的目标候选框(Bounding-box proposals)。这个阶段通常使用卷积神经网络(CNN)从输入图像中提取特征,然后通过一些技巧(如选择性搜索)来生成候选框。第二个阶段是分类和位置精修阶段,将第一个阶段生成的候选框输入到另一个 CNN 中进行分类,并根据分类结果对候选框的位置进行微调。Two stage 方法的优点是准确度较高,缺点是速度相对较慢。 常见Tow stage目标检测算法有:R-CNN系列、SPPNet等。 1.2 One stage方法 One stage方法直接利用模型提取特征值,并利用这些特征值进行目标的分类和定位,不需要生成Region Proposal。这种方法的优点是速度快,因为省略了Region Proposal生成的过程。One stage方法的缺点是准确度相对较低,因为它没有对潜在的目标进行预先筛选。 常见的One stage目标检测算法有:YOLO系列、SSD系列和RetinaNet等。 2 常见名词解释 2.1 NMS(Non-Maximum Suppression) 目标检测模型一般会给出目标的多个预测边界框,对成百上千的预测边界框都进行调整肯定是不可行的,需要对这些结果先进行一个大体的挑选。NMS称为非极大值抑制,作用是从众多预测边界框中挑选出最具代表性的结果,这样可以加快算法效率,其主要流程如下: 设定一个置信度分数阈值,将置信度分数小于阈值的直接过滤掉 将剩下框的置信度分数从大到小排序,选中值最大的框 遍历其余的框,如果和当前框的重叠面积(IOU)大于设定的阈值(一般为0.7),就将框删除(超过设定阈值,认为两个框的里面的物体属于同一个类别) 从未处理的框中继续选一个置信度分数最大的,重复上述过程,直至所有框处理完毕 2.2 IoU(Intersection over Union) 定义了两个边界框的重叠度,当预测边界框和真实边界框差异很小时,或重叠度很大时,表示模型产生的预测边界框很准确。边界框A、B的IOU计算公式为: 2.3 mAP(mean Average Precision) mAP即均值平均精度,是评估目标检测模型效果的最重要指标,这个值介于0到1之间,且越大越好。mAP是AP(Average Precision)的平均值,那么首先需要了解AP的概念。想要了解AP的概念,还要首先了解目标检测中Precision和Recall的概念。 首先我们设置置信度阈值(Confidence Threshold)和IoU阈值(一般设置为0.5,也会衡量0.75以及0.9的mAP值): 当一个预测边界框被认为是True Positive(TP)时,需要同时满足下面三个条件: Confidence Score > Confidence Threshold 预测类别匹配真实值(Ground truth)的类别 预测边界框的IoU大于设定的IoU阈值 不满足条件2或条件3,则认为是False Positive(FP)。当对应同一个真值有多个预测结果时,只有最高置信度分数的预测结果被认为是True Positive,其余被认为是False Positive。 Precision和Recall的概念如下图所示: Precision表示TP与预测边界框数量的比值 Recall表示TP与真实边界框数量的比值 改变不同的置信度阈值,可以获得多组Precision和Recall,Recall放X轴,Precision放Y轴,可以画出一个Precision-Recall曲线,简称P-R
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值