- 博客(13)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 如何做到 10T 集群数据安全备份、1GB/s 快速恢复？
作者：沈泰宁数据库作为基础设施，其安全性不言而明，因此数据安全备份和恢复功能是在严肃使用场景下的标配。TiDB 作为一款分布式数据库，目前可以满足超大集群的备份恢复的需求，经过测试，10T 数据的备份恢复速度可以达到 GB/s 级别。这得益于我们研发的分布式备份恢复工具 Backup&Restore That Scales（以下简称 BR）。如果你业务产生海量数据，并极度重视数据...
2020-02-28 13:16:35
448
原创 如何做到 10T 集群数据安全备份、1GB/s 快速恢复？
数据库作为基础设施，其安全性不言而明，因此数据安全备份和恢复功能是在严肃使用场景下的标配。TiDB 作为一款分布式数据库，目前可以满足超大集群的备份恢复的需求，经过测试，10T 数据的备份恢复速度可以达到 GB/s 级别。这得益于我们研发的分布式备份恢复工具 Backup&Restore That Scales（以下简称 BR）。如果你业务产生海量数据，并极度重视数据安全、备份恢复的效...
2020-02-27 18:30:47
659
原创 完结篇 | TiDB Binlog 源码阅读系列文章 （九）同步数据到下游
上篇文章介绍了用于将 binlog 同步到 MySQL / TiDB 的 Loader package，本文往回退一步，介绍 Drainer 同步到不同下游的机制。TiDB Binlog（github.com/pingcap/tidb-binlog）用于收集 TiDB 的 binlog，并准实时同步给下游。 同步数据这一步重要操作由 Drainer 模块支持，它可以将 binlog 同步到...
2020-02-26 11:08:12
462
原创 我眼中的分布式系统可观测性
位于 M87 中心的特大质量黑洞示意图（© EHT Collaboration）今天的文章我想从这张模糊的照片说起。相信很多小伙伴对这张照片并不陌生，这是去年人类第一次拍摄的 M87 中心黑洞的照片，从1915年，爱因斯坦提出相对论预言黑洞的存在到 2019 年我们终于第一次「看到」了黑洞的样子，中间整整相隔了 100 多年，这对于人类认识黑洞乃至认识宇宙都是一个里程碑式的事件。人类是一个感性...
2020-02-25 16:17:19
588
原创 除了 MIT 6.824，还有哪些高质量的「分布式系统」学习资料？
如果要问“分布式系统有哪些经典学习资料”，MIT 6.824（即 MIT 分布式系统课程） 一定位居榜首，这门课程已经有 20 年历史，日前公布了 2020 年春季课表，与往年不同的是，除了传统的文字介绍，官方还放出了高清课程视频。网友：终于有了非偷拍的高清视频看了:)课程地址：https://pdos.csail.mit.edu/6.824/schedule.html课程视频官方地...
2020-02-24 20:16:33
2561
原创 DBA 减负捷径：拍个 CT 诊断集群热点问题 | TiDB 4.0 新特性前瞻（一）
前言古代，医者看病讲究「望、闻、问、切」，通过病人的外部综合表现对病症做出判断。现代，CT 的发明使得人们可以使用 X 光穿透身体各组织内部，将整体的情况以图像的方式展现出来，医生可以根据这个信息快速地排查问题。CT 的出现不仅将诊断的效率提升到了新的高度，也给客观描述身体状态提供了一个标准，是医学史上重要的里程碑。一个工作中的 TiDB 集群如果只有个别节点非常繁忙，而其他节点相对比较空闲，...
2020-02-24 11:07:08
620
原创 原来提升一个数据库的性能并没有那么难！TiDB 性能挑战赛完结撒花
2019 年 11 月初，我们开启了「TiDB 挑战赛第一季之 性能挑战赛」，比赛为期三个月，期间选手将通过完成一系列难度不同的任务来获得相应的积分。赛程过去三分之一时，已经取得了十分耀眼的 阶段性成果。三个月过去，性能挑战赛已经圆满落幕，最终的积分排行也新鲜出炉，选手们的参赛成果让人非常惊喜，让我们回顾一下选手们是如何在“TiDB 性能提升”之路上，过五关斩六将的吧～最终积分排名与奖项揭...
2020-02-24 09:18:59
996
原创 为了证明它的速度，我们一口气对比了 Oracle、MySQL、MariaDB、Greenplum、Apache Spark
上篇文章 中，我们简单介绍了 TiFlash 的设计和架构，TiFlash 是即将随着 TiDB 3.1 版本发布（3月）的列存引擎，大幅提升了 TiDB 在实时分析场景下的性能。同时和 TiDB 体系无缝结合，可实时更新，弹性扩展，保持 TiDB 的 ACID 事务特性和快照隔离级别，可用于严肃场景的实时分析。那么 TiFlash 到底有多快？为了更直观回答这个问题，我们用最新版本的 T...
2020-02-13 15:02:37
2770
1
原创 TiDB 在马上消费金融核心账务系统归档及跑批业务下的实践
作者介绍：康文权，马上消费金融总账高级研发工程师。李银龙，原腾讯云运维工程师，马上消费金融容器云 TiDB 负责人，西南区 TUG Leader。背景介绍马上消费金融于 2015 年 6 月营业，截止到 2020 年 1 月，历经 4 年多风雨，总注册用户数 8000 万，活跃用户数 2500 万，累计放贷 2900 多亿元人民币。公司于 2018 年 6 月增资到 40 亿，成为内资...
2020-02-13 11:03:53
1352
原创 一两个节点、一两条命令，轻松让 TiDB 分析场景无痛提速十倍
作者：马晓宇讲个故事，假如……某天，老板让你分省统计口罩最近的订货数据，以快速决策需要向哪里调货。你发起查询，全部订单数据多达数亿甚至更多，TiDB 不得不花费一小段时间。由于存储节点在全力计算，你的集群波动的监控哔哔作响，主站的订单提交也一下子变得慢起来。倒了杯咖啡回来，你得到了结果。老板站在你身后，声音低沉而有磁性，“能否更快一点？”请架构师吃了顿饭，她向你推荐将数据从线上导出到 ...
2020-02-06 16:53:49
1232
原创 讨论帖：如果只有两个数据中心，使用 Raft 协议还有意义吗？
作者：disksing对 Raft 有所了解的同学都知道，Raft 一般会使用奇数个节点，比如 3、5、7 等等。这是因为 Raft 是 一种基于多节点投票选举机制的共识算法，通俗地说，只有超过半数节点在线才能提供服务。这里超过半数的意思是 N/2+1（而不是N/2）。举例来说，3 节点集群需要 2 个以上节点在线，5 节点集群需要 3 个以上节点在线，等等。对于偶数节点的集群，2 节点集群...
2020-02-04 12:27:10
1134
原创 基于 NVMe SSD 的分布式文件存储 UFS 性能提升技术解析
分布式技术的发展，深刻地改变了我们编程的模式和思考软件的模式。值 2019 岁末，PingCAP 联合 InfoQ 共同策划出品“分布式系统前沿技术 ”专题， 邀请众多技术团队共同参与，一起探索这个古老领域的新生机。本文出自 UCloud 后台研发工程师邓瑾。为了应对 IO 性能要求很高的数据分析、AI 训练、高性能站点等场景，UFS 团队又推出了一款基于 NVMe SSD 介质的性能型 U...
2020-02-04 10:12:58
1332
转载 Prometheus 常用函数 histogram_quantile 的若干“反直觉”问题
作者：disksinghistogram_quantile 是 Prometheus 特别常用的一个函数，比如经常把某个服务的 P99 响应时间来衡量服务质量。不过它到底是什么意思很难解释得清，特别是面向非技术的同学。另一方面，即使是资深的研发同学，在排查问题的时候也经常会发现 histogram_quantile 的数值出现一些反直觉的“异常现象”然后摸不着头...
2020-02-02 16:49:52
6131
1
tidb-in-action-20200611.pdf
2020-06-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人