- 博客(15)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 TBSSQL 的那些事 | TiDB Hackathon 2018 优秀项目分享
本文作者是来自 TiBoys 队的崔秋同学，他们的项目 TBSSQL 在 TiDB Hackathon 2018 中获得了一等奖。TiDB Batch and Streaming SQL（简称 TBSSQL）扩展了 TiDB 的 SQL 引擎，支持用户以类似 StreamSQL 的语法将 Kafka、Pulsar 等外部数据源以流式表的方式接入 TiDB。通过简单的 SQL 语句，用户可以实现...
2018-12-28 13:55:07
426
1
原创 TiPrometheus：基于 TiDB 的 TSDB | TiDB Hackathon 2018 优秀项目分享
本文作者是菜哥和他的朋友们队的于畅同学，他们的项目 TiPrometheus 已经被 Prometheus adapter 合并。该项目分两个小项目，分别解决了时序数据的存储与计算问题。存储主要兼容 Prometheus 语法和数据格式，实现了精确查询、模糊查询，完全兼容现有语法。所有数据仅存在 TiKV 中。计算主要通过 TiKV 调用 Lua 实现，通过 Lua 动态扩展实现数据计算的功能。...
2018-12-28 11:10:55
582
原创 TiDB Ecosystem Tools 原理解读系列（三）TiDB-DM 架构设计与实现原理
作者：张学程简介TiDB-DM（Data Migration）是用于将数据从 MySQL/MariaDB 迁移到 TiDB 的工具。该工具既支持以全量备份文件的方式将 MySQL/MariaDB 的数据导入到 TiDB，也支持通过解析执行 MySQL/MariaDB binlog 的方式将数据增量同步到 TiDB。特别地，对于有多个 MySQL/MariaDB 实例的分库分表需要合并后同步到同...
2018-12-27 11:36:45
826
原创 TiDB 助力东南亚领先电商 Shopee 业务升级
作者介绍刘春辉，Shopee DBA洪超，Shopee DBA一、业务场景Shopee（https://shopee.com/）是东南亚和台湾地区领先的电子商务平台，覆盖新加坡、马来西亚、菲律宾、印度尼西亚、泰国、越南和台湾等七个市场。Shopee 母公司 Sea（https://seagroup.com/）为首家在纽约证券交易所上市的东南亚互联网企业。2015 年底上线以来，Shop...
2018-12-25 18:26:15
678
原创 TiEye：Region 信息变迁历史可视化工具 | TiDB Hackathon 2018 优秀项目分享
本文作者是矛盾螺旋队的成员刘玮，他们的项目 **TiEye **在 TiDB Hackathon 2018 中获得了三等奖。TiEye 是 Region 信息变迁历史可视化工具，通过 PD记录 Region 的Split、Merge、ConfChange、LeaderChange 等信息，可以方便的回溯 Region 某个时间的具体状态，为开发人员提供了方便的可视化...
2018-12-21 18:24:04
428
原创 TiDB 源码阅读系列文章（二十二）Hash Aggregation
聚合算法执行原理在 SQL 中，聚合操作对一组值执行计算，并返回单个值。TiDB 实现了 2 种聚合算法：Hash Aggregation 和 Stream Aggregation。我们首先以 AVG 函数为例（案例参考 Stack Overflow），简述这两种算法的执行原理。假设表 t 如下：列 a列 b191-82-72615...
2018-12-21 18:22:32
472
原创 十分钟成为 Contributor 系列 | 支持 AST 还原为 SQL
作者：赵一霖背景知识SQL 语句发送到 TiDB 后首先会经过 parser，从文本 parse 成为 AST（抽象语法树），AST 节点与 SQL 文本结构是一一对应的，我们通过遍历整个 AST 树就可以拼接出一个与 AST 语义相同的 SQL 文本。对 parser 不熟悉的小伙伴们可以看 TiDB 源码阅读系列文章（五）TiDB SQL Parser 的实现。为了控制 SQL 文...
2018-12-21 10:25:31
1098
原创 TiDB EcoSystem Tools 原理解读系列（二）TiDB-Lightning Toolset 介绍
简介TiDB-Lightning Toolset 是一套快速全量导入 SQL dump 文件到 TiDB 集群的工具集，自 2.1.0 版本起随 TiDB 发布，速度可达到传统执行 SQL 导入方式的至少 3 倍、大约每小时 100 GB，适合在上线前用作迁移现有的大型数据库到全新的 TiDB 集群。设计TiDB 从 2017 年开始提供全量导入工具 Loader，它以多线程操作、错误重试、...
2018-12-19 10:58:34
629
原创 TiDB Lab 诞生记 | TiDB Hackathon 优秀项目分享
本文由红凤凰粉凤凰粉红凤凰队的成员主笔，他们的项目** TiDB Lab** 在本届 TiDB Hackathon 2018 中获得了二等奖。TiDB Lab 为 TiDB 培训体系增加了一个可以动态观测 TiDB / TiKV / PD 细节的动画教学 Lab，让用户可以一边进行真实操作一边观察组件之间的变化，例如 SQL 的解析，Region 的变更等等，从而生动地理解 ...
2018-12-14 19:16:46
689
原创 让 TiDB 访问多种数据源 | TiDB Hackathon 优秀项目分享
本文作者是来自 CC 组的兰海同学，他们的项目《让 TiDB 访问多种数据源》在本届 TiDB Hackathon 2018 中获得了二等奖。该项目可以让 TiDB 支持多种外部数据源的访问，针对不同数据源的特点会不同的下推工作，使 TiDB 成为一个更加通用的数据库查询优化和计算平台。我们队伍是由武汉大学在校学生组成。我们选择的课题是让 TiDB 接入若干外部的数据源，使得 TiDB 称为...
2018-12-14 19:15:29
581
原创 TiQuery：All Diagnosis in SQL | TiDB Hackathon 优秀项目分享
本文作者是来自 TiNiuB 队的黄梦龙同学，他们的项目 TiQuery 在本届 TiDB Hackathon 2018 中获得了三等奖。 TiQuery 可以搜集诊断集群问题所需要的信息，包括集群拓扑，Region 分布，配置，各种系统信息，整理成结构化的数据，并在 TiDB 中支持直接使用 SQL 语言进行查询，开发和运维人员可以在 SQL 环境方便高效地进行问题诊断。“距离 Hack...
2018-12-13 10:36:48
321
原创 TiDB 源码阅读系列文章（二十一）基于规则的优化 II
在 TiDB 源码阅读系列文章（七）基于规则的优化 一文中，我们介绍了几种 TiDB 中的逻辑优化规则，包括列剪裁，最大最小消除，投影消除，谓词下推和构建节点属性，本篇将继续介绍更多的优化规则：聚合消除、外连接消除和子查询优化。聚合消除聚合消除会检查 SQL 查询中 Group By 语句所使用的列是否具有唯一性属性，如果满足，则会将执行计划中相应的 LogicalAggregation 算子...
2018-12-12 11:34:44
323
原创 TiDB EcoSystem Tools 原理解读（一）：TiDB-Binlog 架构演进与实现原理
简介TiDB-Binlog 组件用于收集 TiDB 的 binlog，并提供实时备份和同步功能。该组件在功能上类似于 MySQL 的主从复制，MySQL 的主从复制依赖于记录的 binlog 文件，TiDB-Binlog 组件也是如此，主要的不同点是 TiDB 是分布式的，因此需要收集各个 TiDB 实例产生的 binlog，并按照事务提交的时间排序后才能同步到下游。如果你需要部署 TiDB 集...
2018-12-10 10:41:38
1300
转载 天真贝叶斯学习机 | TiDB Hackathon 优秀项目分享
Ti Hack 系列TiDB Hackathon 2018 共评选出六组优秀项目，本系列文章将由这六组项目的成员主笔，分享他们的参赛经验和成果。我们非常希望本届 Hackathon 诞生的优秀项目能够在社区中延续下去，感兴趣的小伙伴们可以加入进来哦～本文作者是来自 DSG 团队的杨文同学，他们的项目《天真贝叶斯学习机》在本届 Hackathon 中获得了三等奖+最佳创意奖。“在 TiD...
2018-12-05 18:15:04
767
原创 TiDB 在小米的应用实践
作者：张良，小米 DBA 负责人；潘友飞，小米 DBA；王必文，小米开发工程师。一、应用场景介绍MIUI 是小米公司旗下基于 Android 系统深度优化、定制、开发的第三方手机操作系统，也是小米的第一个产品。MIUI 在 Android 系统基础上，针对中国用户进行了深度定制，在此之上孕育出了一系列的应用，比如主题商店、小米音乐、应用商店、小米阅读等。图 1  MIUI A...
2018-12-04 10:20:05
3112
tidb-in-action-20200611.pdf
2020-06-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人