自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 资源 (31)
  • 收藏
  • 关注

原创 MongoDB Sharding Chunk分裂与迁移详解

【摘要】云数据库MongoDB版 基于飞天分布式系统和高性能存储,提供三节点副本集的高可用架构,容灾切换,故障迁移完全透明化。 MongoDB Sharding关于MongoDB Sharding的原理,如果不了解请先参考:关于MongoDB Sharding,你应该知道的MongoDB Sharded Cluster架构原理 注:本文的内容基于MongoDB 3.2版本。Pr...

2017-08-31 14:15:19 3881

原创 MongoDB查询优化:从10s到10ms

【摘要】本文是我前同事付秋雷最近遇到到一个关于MongoDB执行计划选择的问题,非常有意思,在探索源码之后,他将整个问题搞明白并整理分享出来。付秋雷曾是Tair(阿里内部用得非常广泛的KV存储系统)的核心开发成员,目前就职于蘑菇街。背景苏先生反馈线上某条查询很慢(10+ seconds),语句相当于:db.myColl.find({app:"my_app",requestTime:{$gte:14...

2017-08-25 10:50:41 41109 5

原创 2017 MongoDB中国用户大会部分嘉宾访谈集萃

从数据库新秀到如今非关系数据库领域的龙头,MongoDB已然走过十载。十年节点,回眸小驻,为了让更多中国用户了解这个为开发者而生的数据库,MongoDB中国2017大会将于9月9日在上海龙之梦万丽酒店火热开启。据悉,本年度大会规模空前,阵容强大。除了CEO Dev Ittycheria再次亲临现场发表主旨演讲外,巴克莱银行、大和资本市场、太平洋保险、安盛集团等国际知名企业重量级人物亦受邀在列。此外...

2017-08-24 14:39:07 455

原创 Amazon Aurora深度探索(二)

【前情提要】 Amazon Aurora深度探索(一) Aurora的存储架构存储层的设计和实现,体现了“the log is the database”,其含义是日志中包含了数据的信息,可以从日志中恢复出用户的数据,所以数据不一定必须再独立存储一份。而数据库的核心不仅是数据,保障数据的拥有ACID特性的事务和提供便捷查询的SQL语句,对以数据为基础提供商业的交易服务更...

2017-08-18 10:04:48 2512

原创 Amazon Aurora深度探索(一)

【导语】 Amazon的Aurora自从问世,就备受关注,其性能和实现架构是被关注的热点。2017年,Amazon发表了一篇论文,披露其实现的一些技术细节。本文在此背景下,对Aurora系统的实现从整体架构、存储、事务处理三个方面进行深入探讨,并从数据库内核技术实现的角度对Aurora做了一定的推测。2017年,Amazon在SIGMOD上发表了论文《Amazon Aurora: Desi...

2017-08-17 11:12:15 3655 2

原创 探析大数据需求下的分布式数据库

一、前言大数据技术从诞生到现在,已经经历了十几个年头。市场上早已不断有公司或机构,给广大金融从业者“洗脑”大数据未来的美好前景与趋势。随着用户对大数据理念与技术的不断深入了解,人们已经开始从理论探索转向对场景落地的寻找,让大数据在企业中落地并开花结果。从大数据的管理和应用方向集中在两个领域。第一,大数据分析相关,针对海量数据的挖掘、复杂的分析计算;第二,在线数据操作,包括传统交易型操作以及海量数据...

2017-08-11 14:25:02 2722

原创 浅谈分布式锁

【前言】随着互联网技术的不断发展,数据量的不断增加,业务逻辑日趋复杂,在这种背景下,传统的集中式系统已经无法满足我们的业务需求,分布式系统被应用在更多的场景,而在分布式系统中访问共享资源就需要一种互斥机制,来防止彼此之间的互相干扰,以保证一致性,在这种情况下,我们就需要用到分布式锁。分布式一致性问题首先我们先来看一个小例子:假设某商城有一个商品库存剩10个,用户A想要买6个,用户B想要买5...

2017-08-11 11:03:10 1808 1

原创 MySQL统计信息相关表介绍

相信大家都了解MySQL中的统计信息,那么统计信息是存放在哪里呢?我们怎么去查看?在MySQL中提供了两个表记录统计信息的相关内容,分别是 innodb_table_stats与innodb_index_stats。下面就这两个表的内容,与大家进行一些分享。innodb_table_stats这个表里面的内容还是比较好理解。重要的列:last_update就是最后一次收集统计信息的时间clus...

2017-08-10 17:05:59 1753

原创 DB-Engines 2017年8月数据库排名发布 总体走势复归平稳

近日,DB-Engines发布了2017年8月数据库排名。数据库排行经历过此前一系列暴跌暴涨,8月数据库得分走势渐趋平缓,前二十名涨跌幅皆控制在十分以内。前十席位本月无变动,为首的三巨头自不必提,Oracle、MySQL、Microsoft SQL Server继续保持队形,或首此前波动影响,本月均有不同程度掉分,依次为7.00分、8.81分及0.52分。搜索引擎式数据库Elasticsearch...

2017-08-04 17:11:55 304

原创 mysqldump与innobackupex备份过程知多少(完结篇)

【前文传送门】mysqldump与innobackupex备份过程知多少(一)mysqldump与innobackupex备份过程知多少(二)mysqldump与innobackupex备份过程知多少(三)2. 现在看innobackupex2.1 innobackupex备份过程解读A库清空查询日志:[root@localhost ~]# echo > /home/mysql/da...

2017-08-02 11:33:36 4096

原创 【Oracle 12c Flex Cluster 】Leaf Node的故障迁移

Oracle 在12c中使用hub-and-spoken技术实现了Flex Cluster的功能(即RAC集群中的每个节点不再需要既运行ASM实例又运行DB实例,各节点可以扮演不同的角色)。相比12c以前的版本,该功能使集群规模的扩大和缩减变得更加靠谱。原因如下:集群中各节点间网络的互相干扰变得更少。关键的集群组件争用更少,如OCR、VOTING DISK。一个Flex Cluster中可以...

2017-08-01 15:36:32 320

唐建法-NoSQL之王:一分钟从关系型迁移到MongoDB

TJ会通过若干互动的演示,而不是干巴巴的宣讲的方式来为大家介绍MongoDB风靡全球,成为NoSQL王者的关键原因。如果您已经是Mongo老司机,不用担心,你也可以从TJ的文档模式设计精粹及一分钟关系型到MongoDB的迁移演示中获益匪浅。

2017-04-18

唯品会应用架构设计思路-张广平

唯品会应用架构负责人张广平在本次峰会中带来了《唯品会应用系统架构设计》主题演讲。

2016-11-02

QQ会员基于hybrid的高质量H5架构实践-翟伟

腾讯SNG增值产品部高级工程师翟伟带来主题为《QQ会员基于Hybrid的高质量H5架构实践》的技术分享。

2016-11-02

京东交易架构演进-高可用服务的保障-杨超

京东商城架构师杨超带来《京东交易架构演进-高可用服务的保障》主题分享。

2016-11-02

Apache_Flink在万达金融的实践-李呈祥

万达金融网络技术中心大数据技术专家李呈祥带了主题为《Apache Flink在万达金融的实践》的技术分享。

2016-11-02

全链路应用体系建设-姚捷

唯品会平台架构部高级架构师姚捷在本次架构峰会上带来的是《大型互联网公司海量数据下的应用监控系统建设》主题分享。

2016-11-02

阿里巴巴云时代的数据库管理-周振兴

阿里巴巴数据库团队高级专家周振兴(苏普)在本次峰会中带来了《阿里巴巴云时代的数据库管理》主题演讲。

2016-11-02

企业级持续交付平台的微服务演进-林帆

ThoughtWorks高级DevOps技术顾问林帆的演讲围绕《企业级持续交付平台的微服务演进》主题展开。

2016-11-02

360云查杀服务从零到千亿级PV的核心架构变迁-魏自立

360高级工程师、资深顾问魏自立带来《360查杀服务从零到千亿级PV的核心架构变迁》的主题演讲。

2016-11-02

分布式系统游戏应用的后台架构设计-陶文质

腾讯互娱事业部后台高级工程师陶文质在本次演讲中带来《分布式系统游戏应用的后台架构设计》的主题分享。

2016-11-02

基于微服务架构改造单体架构的实践总结-李林锋

华为PaaS平台架构师李林峰在本次演讲中呈现的分享主题是《基于微服务架构改造单体架构的实践总结》。

2016-11-02

数据库系统化实战(MySQL)-丁奇

阿里云数据库团队高级技术专家丁奇分享的主题《数据库系统化实战》,他结合阿里巴巴的众多实践经验,深度分析了数据库系统化过程中需要解决的可靠性、可用性、稳定性、可诊断性的问题。

2016-07-28

阿里云MongoDB 高可用性与建模实践-杨成虎(叶翔)

阿里巴巴分布式和数据库专家杨成虎带来《MongoDB高可用性原理与实践》主题分享,主要分享MongoDB的高可用性原理,并且结合阿里巴巴应用的实际案例,从根本上说明MongoDB高可用性正确部署方式。

2016-07-27

Kafka实战开源消息队列的坑与对策-刘喆

AdMaster架构师刘喆主要负责数据处理的全流程技术支持,高性能和高可用的分布式架构设计,DSL语言抽象,Hadoop/HBase/Storm/Spark等大数据平台优化。

2016-07-27

mysql备份原理与在TDSQL中的实践-雷海林

腾讯高级软件工程师雷海林带来了《MySQL备份原理与在TDSQL中的实践》的主题分享。

2016-07-27

Palo-马如悦

百度大数据部主任架构师马如悦带来《Palo:MPP-based Interactive SQL Data Warehousing》主题分享,主要介绍Palo的设计背景、关键技术点的设计与实现,并且分享在百度中的应用实践。

2016-07-27

携程实时计算平台实践分享-张翼

携程大数据平台负责人张翼带来《携程实时大数据处理平台实践分享》的主题分享,介绍携程是如何一步一步构建起这个实时计算平台。

2016-07-27

金融大数据技术与实战-王健宗

平安科技大数据产品总监王健宗带来了《金融大数据技术与实战》的主题分享,主要介绍金融阿法狗背后的技术和功能,以及目前的金融场景的实战能力。

2016-07-27

中小企业架构设计之道-柳鋆

上海美味七七网络科技有限公司架构总监柳鋆带来《中小企业架构设计之道》的主题分享,首先和大家分享了中小企业现在面临的现状,面对这这些现状我们又应该如何面对。

2016-07-27

电信运营商级安全高可用互联网帐号认证体系技术架构实践-高保庆

电信综合平台开发运营中心技术部总监兼架构师高保庆带来《高可用电信统一账号认证平台技术架构实践》主题分享,主要介绍中国电信统一帐号认证平台的技术架构实践。

2016-07-27

技术架构的运维治理-王津银

优维科技联合创始人& CEO王津银带来《技术架构下的运维治理》主题分享,他主要以何为运维治理、运维治理的过程治理、运维治理的服务治理、运维治理的平台治理这四个方面进行深入介绍。

2016-07-27

大数据机器学习的应用架构实战-何锐邦

腾讯无线安全产品部高级工程师何锐邦带来《大数据机器学习应用架构实战》的技术分享,在本次演讲中他主要是以大数据机器学习应用架构和机器学习实践中的经验分享这两大方面进行深度剖析。

2016-07-27

1号店的搜索架构演化实践-周航

1号店搜索部高级开发经理周航带来《1号店搜索架构演化实践》的主题演讲,分享1号店搜索在架构演化实践过程中总结的经验和教训。

2016-07-27

企业架构转型重构的若干治理问题洞察-官华

唯品会资深架构师官华带来《实施企业架构转型重构的若干治理问题洞察》的主题分享,通过各种案例来重点分享架构设计的关键策略、演进的选择策略,以及相关的组织流程模式等。

2016-07-27

分布式数据库基石-id中的学问-徐海峰

阅文集团首席架构师徐海峰围绕“分布式系统的基石—Id生成器中的学问”这一主题,从五大切入点入手展开讨论。

2016-07-27

京东大规模高访问量业务下的技术与架构支撑-田琪

京东数据库系统研发部负责人田琪分享了《京东数据库系统研发部负责人田琪》的主题演讲,主要介绍京东整体基础技术体系及背后的架构,并详细介绍京东在数据库方面的实践,如何支撑众多业务的数据拆分,弹性伸缩等问题。

2016-07-27

阿里直播平台架构演进-陈康贤

阿里巴巴淘宝技术部陈康贤在本次架构峰会上带来的是《阿里直播平台的架构演进》主题分享,他主要针对其中的一些技术细节,以及双十一双十二之后平台的架构变迁做一些详细的介绍。

2016-07-27

1号店搜索架构演化实践-周航

2016-07-27

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除