项目一直单机运行,最近提出承载力要求。
代码已经改到一个极限了,瓶颈在数据库上,计算方面,因为我的架构所有数据都在内存上,计算很快。
所以计算结果保存到数据库这块就是为一的瓶颈。
但又没有成本去重构,为此我首先想到的是把mysql数据放到内存中,然后硬盘做慢速更新。
结果/dev/shm虽然写文件速度比硬盘快5倍,但用来写数据库就不行了,性能只提升17%,还要冒着丢失数据库的风险。
然后我查了tidb的资料,要求高,需要改代码,还要学习;又看了shardingsphere,感觉几乎跟重构差不多。
我找到了一个方法,那就是网络共享文件:
把表按照查询量根据使用的的服务器数量分成几份,
mysql装在其中一台服务器A上,其它服务器开启网络磁盘,把网络磁盘映射到服务器A,
再把mysql的表放到这些映射的网络磁盘上去。
经过测试网络磁盘的效率不比本机的低。
mkdir -p /data/rpc/mysql
echo "/data/rpc/mysql 10.0.0.27(rw,no_root_squash,no_subtree_check)" > /etc/exports
exportfs -a
showmount -e
showmount -e 10.0.0.30
mkdir -p /data/rpc_nfs/
mount -t nfs 10.0.0.30:/data/rpc/mysql /data/rpc_nfs/
chown mysql:mysql /data/rpc_nfs/
如何指定一个mysql表的存放位置:
CREATE TABLE `log_check_5` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`link_id` int(11) DEFAULT 0 COMMENT 'sys_link.id',
`ttl` tinyint(3) DEFAULT 0,
`num` int(11) unsigned DEFAULT 0,
`ok_num` tinyint(3) DEFAULT 0 COMMENT '',
`send_num` tinyint(3) DEFAULT 0 COMMENT '',
PRIMARY KEY (`id`),
KEY `link_order` (`link_id`,`ttl`,`num`)
) ENGINE=MyIsam DEFAULT CHARSET=utf8 COMMENT='丢包定位法' DATA DIRECTORY='/data/rpc_nfs/' INDEX DIRECTORY='/data/rpc_nfs/';