专访Mycat核心开发成员王金剑 :借助Mycat轻松抵御海量并发

专访Mycat核心开发成员王金剑 :借助Mycat轻松抵御海量并发

发表于 2015-12-25 14:51| 1401次阅读| 来源 CSDN| 5 条评论| 作者 夏梦竹
width="22" height="16" src="http://hits.sinajs.cn/A1/weiboshare.html?url=http%3A%2F%2Fwww.csdn.net%2Farticle%2F2015-12-23%2F2826546&type=3&count=&appkey=&title=%E6%97%A5%E5%89%8D%EF%BC%8C%E7%AC%94%E8%80%85%E9%87%87%E8%AE%BF%E4%BA%86Mycat%E6%A0%B8%E5%BF%83%E5%BC%80%E5%8F%91%E6%88%90%E5%91%98%E7%8E%8B%E9%87%91%E5%89%91%EF%BC%8C%E8%AF%B7%E4%BB%96%E8%A7%A3%E8%AF%BBMycat%E7%9A%84%E6%8A%80%E6%9C%AF%E7%89%B9%E6%80%A7%EF%BC%8CMycat%E7%9A%84%E5%9B%A2%E9%98%9F%E8%B6%A3%E9%97%BB%E5%8F%8A%E7%BB%8F%E9%AA%8C%E5%88%86%E4%BA%AB%E3%80%82%E4%BD%9C%E4%B8%BA%E5%BC%80%E5%8F%91%E8%80%85%E5%BF%85%E9%A1%BB%E7%B4%A7%E8%B7%9F%E6%8A%80%E6%9C%AF%E5%8F%91%E5%B1%95%EF%BC%8C%E8%BF%9B%E4%B8%80%E6%AD%A5%E6%8F%90%E9%AB%98%E4%BC%A0%E7%BB%9F%E6%95%B0%E6%8D%AE%E5%BA%93%E8%AE%A4%E8%AF%86%E7%9A%84%E5%90%8C%E6%97%B6%EF%BC%8C%E8%BF%98%E8%A6%81%E6%8E%8C%E6%8F%A1%E6%9B%B4%E5%A4%9A%E7%9A%84%E6%96%B0%E5%9E%8B%E6%95%B0%E6%8D%AE%E5%BA%93%E6%8A%80%E6%9C%AF%E5%8F%8A%E4%BA%91%E6%9C%8D%E5%8A%A1%E6%8A%80%E6%9C%AF%E3%80%82&pic=&ralateUid=&language=zh_cn&rnd=1451132374778" frameborder="0" scrolling="no" allowtransparency="true"> 摘要:日前,笔者采访了Mycat核心开发成员王金剑,请他解读Mycat的技术特性,Mycat的团队趣闻及经验分享。作为开发者必须紧跟技术发展,进一步提高传统数据库认识的同时,还要掌握更多的新型数据库技术及云服务技术。

Mycat是一个开源的分布式数据库系统,其核心功能是分表分库,即将一个大表水平分割为多个小表,存储在后端MySQL或者其他数据库里。取名Mycat原因一是简单好记,另一个则是希望未来能够入驻 Apache,Apache的开源产品Tomcat也是一只猫。日前,笔者采访了Mycat核心开发成员王金剑,请他解读Mycat的技术特性,Mycat的团队趣闻,以及他的经验分享。在他看来,作为传统数据库开发人员,必须紧跟技术发展,在进一步提高传统数据库认识的同时,还要掌握更多的新型数据库技术,以及云服务技术。


王金剑

CSDN:请先自我介绍下,目前所在公司以及所负责的领域。

王金剑:大家好,我叫王金剑,今年33岁,从事软件工作十年,目前在天狮集团担任高级DBA工程师,负责公司电商网站数据库设计与优化、数据库架构规划及部署规范制定,以及核心应用的软件设计与开发等工作。

CSDN:你是从什么时候加入Mycat开发团队的?团队核心成员有多少人?

王金剑:我是2014年加入Mycat开源团队,目前核心成员已经有17人。

CSDN:加入Mycat给你最大的感受是什么?有令你印象特别深刻的人或事吗?

王金剑:加入Mycat给我最大的感受是开源团队的工作效率和参与热情是非常高的,这让我深信中国开源产品的发展前景不可限量。核心成员里有两个人给我的印象特别深刻:一个是吴京润(网名坨神),他是来自Wifiin的高级工程师,还有一个是邓立仁(网名聆听),他是来自小米的高级工程师。经过他们对Mycat进一步改造,现在Mycat已经在他们各自的公司里运行的非常稳定,解决了最让互联网公司头疼的海量并发问题。这些来自互联网一线企业的真实案例,加强了广大网友对Mycat产品的信任。

CSDN:Mycat的名字由来有何典故吗?它的核心开发技术是什么?在构建过程中有没有遇到哪些困难?又是如何克服的?

王金剑:取名Mycat一个原因是简单好记,另外一个原因,是希望未来能够入驻Apache,Apache的开源产品Tomcat也是一只猫。Mycat最早的版本完成于2013年年底,它是一个开源的分布式数据库系统,其核心功能是分表分库,即将一个大表水平分割为多个小表,存储在后端MySQL或者其他数据库里。

Mycat发展到目前的版本,已经不是一个单纯的MySQL代理了,它的后端可以支持MySQL、SQL Server、Oracle、PostgreSQL等主流数据库,也支持MongoDB这种新型NoSQL方式的存储,未来还会支持更多类型的存储。而无论使用哪种存储方式,在Mycat里都是一个传统的数据库表,支持标准的SQL语句进行数据的操作,这样一来,对前端业务系统来说,可以大幅降低开发难度,提升开发速度。而未来,还能通过Mycat自动将一些计算分析后的数据灌入到Hadoop中,并能用Mycat+Storm/Spark Stream引擎做大规模数据分析。

CSDN:Mycat有哪些技术亮点?旨在解决哪些问题?

王金剑:Mycat发展到现在,适用的场景已经很丰富,而且不断有新用户给出新的创新性的方案,以下是几个典型的应用场景:支持读写分离,主从切换,配置非常简单;分表分库,比如根据系统不同业务进行垂直分库,或者对于超过1000万条数据的大表进行水平分片;多租户应用,每个应用一个库,但应用程序只连接Mycat,从而不改造程序本身实现多租户化;报表系统,借助于Mycat的分表能力,处理大规模报表的统计。

CSDN:使用Mycat的公司多吗?有哪些重量级客户?请列举一二。

王金剑:Mycat初步统计大概400家公司使用,主要应用在电信领域、互联网项目,大部分是交易和管理系统,少量是信息系统。重量级的客户比如SAP、小米、天狮、苏宁、顺丰等等。

CSDN:数据库的安全性和稳定性方面一直都是大家关注的重点,你们在这方面做了哪些部署?

王金剑:保证数据库的安全性和稳定性是比较复杂的工作,Mycat也一直在努力完善这方面特性,除了更好地支持数据库主从自动切换功能外,我们还在进行更深入的功能研发,而这一版更具有商用价值的产品分支,我们为它起了一个新的名字“SunlightDB”。SunlightDB是Mycat 在安全性和稳定性方面的加强版本。

CSDN: 在打造Mycat的过程中,有哪些重要节点吗?

王金剑:Mycat1.3的诞生,是Mycat历史上最重大的一个里程碑。在这个版本里,需求、测试和功能开发各项工作,首次从个人为主变为开源团队为主的模式,更多的人参与到需求、开发、测试以及Bug修复活动中,基本上确定的Bug都在24小时内修复并有志愿者或用户确认修复。

CSDN: Mycat的下一步规划是什么?

王金剑:一是,强化分布式数据库方面的功能,使之具备丰富的插件、强大的数据库智能优化功能、全面的系统监控能力、以及方便的数据运维工具,实现在线数据扩容、迁移等高级功能;二是,进一步挺进大数据计算领域,深度结合Spark Stream和Storm等分布式实时流引擎,能够完成快速的巨表关联、排序、分组聚合等 OLAP方向的能力,并集成一些热门常用的实时分析算法,让工程师以及DBA们更容易用Mycat实现一些高级数据分析处理功能。

CSDN:在日常工作中你会通过哪些渠道来提升个人能力?

王金剑:提升个人能力的方式,我主要还是通过大量阅读,对于阅读提升能力,我个人建议并不是列一个学习计划,而是把读书变成乐趣,每天读几页,原本看起来很厚的一本书,不知不觉也就读完了,而且因为是带着乐趣带着非常愉快的心情读书,所以书中的知识也能消化吸收的很好。

CSDN:给从事数据库领域的开发者分享些经验吧。

王金剑:数据库技术发展到今天,从关系型数据库到现在的各种云计算,NoSQL产品。作为传统数据库开发人员,必须紧跟技术发展,在进一步提高传统数据库认识的同时,还要掌握更多的新型数据库技术,以及云服务技术。除了提高技术的深度,也要重视提高知识面的宽度。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值