Mysql数据库管理浅谈

Mysql选型及系统规划

简单一句话,除了数据库一致性要求100%的行业之外(银行的核心结算系统),其他所有行业都适用。

Mysql的机器设备选型

机器设备选型,通过业务场景来大概评估。
表1:业务场景

需求指标
响应时间读写请求要求MS级返回
数据总量1TB/年
每秒请求数量15000/秒
数据读写比例2:1
重要程度核心订单系统P1级别故障,积分系统P2级别故障
备注数据时效性,历史订单查阅较少,一般操作3周以内的数据,数据长度一条大概1KB

开始评估系统

序号指标评估
11年内产生的数据总量为1TB推算:每秒产生的数据量,也就是每秒的数据需求为:1*1024*1024*1024/(365*24*60*60)=34kb/秒
2每秒请求数量为15000/秒,读写比例2:1推算:每秒读请求15000*2/3=10000/秒。写请求15000*1/3=5000/秒。
3数据记录长度1KB根据(1)得出每秒写入34k/秒,数据长度大概为1KB。那么每秒写入34/1=34次。根据(2)得出每秒需写入5000次(update+delete+insert)。那么就得出update+delete=5000-34=4966次。得出mysql读写按照page为单位处理,一页大小为16kb默认(也可以手动设置8k、32k),那么每秒的写请求为5000*16k=80M/秒,读请求为10000*16k=160M/秒
4处理20天内的数据那么处理热数据量为(换算1年的总数据大小:1T*1024)/(1年天数:365)*(要求3周以内:20天)=56G
5操作MS级别返回MS级返回,那么要求数据尽量存入内存中,那么根据4可以确定Innodb buffer(MyISAM为key buffer)(Mysql存储引擎缓冲区)大小为56GB,而其他组件如OS,application,network需要大约4G内存,因此需要内存大约60GB,根据(3)的读写速率要求,按照超配原则应用服务器和DB服务器之间的读写带宽分别为,写带宽(WBPS)限制为100M/秒,读带宽(RBPS)200M/秒
6重要程度根据业务故障P1来定,通过MM的HA技术

分布式扩展评估(应对P1故障级别)
8个节点组规模,所有需求参数/8
推算:单组服务器需求。
内存:60G/8 = 8G
写带宽(WBPS):100M/8 = 12.5M/s
读带宽(RBPS):200M/8 = 25M/s
磁盘:1T/8 = 125G
分布式拓扑
mysql文件系统选择
1. 顺序读写为主
- binlog 日志 写操作
- error 日志 运行状态错误信息
- slow 日志 慢查询日志
- tmp 日志 临时日志,当两个表进行关联产生临时表时存放的日志
- 事务日志
- Double write日志 双写日志放在ibdata文件
- mysql应用程序目录
2. 实际应用,尽量将以下四块放到不同的磁盘上面,减少io操作冲突。
- binlog、error、slow日志一般存放在/log目录下
- tmp 日志存放在/tmp目录
- 数据目录 /data目录
- 软件目录 /usr/local/mysql目录

mysql安装部署

参考:http://blog.csdn.net/mchdba/article/details/35994251

mysql压力测试

参考:http://blog.csdn.net/johnstrive/article/details/46610541#t16


未完待续

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值