TiDB实战篇-TiKV关键性能参数与优化

于 2023-05-01 11:22:29 发布
阅读量177 收藏
点赞数
分类专栏： TiDB入门到小工 文章标签： tidb
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/s1124654/article/details/130454368
版权

主要模块和线程

数据写入流程

 

写入瓶颈的排查

 

写入参数优化

 

数据读取流程

 

读取流程分析

 

参数优化

常见问题

Write Stall(限流)

慢查询

 

 

工作变成艺术
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
tidb-in-action:TiDB实战
03-20
Gitbook 阅读： 下载PDF： ...文章存放路径：session1 session1/chapter1/tidb-intro.md 对应图片存放目录为： /res/session1/chapter1/tidb-intro/ 图片路径对应到markdown里为： ![1.png](/res/sessio
TiKV线程池
qq_37302115的博客
06-22 162
TiDB学习之TikV
tidb-操作系统参数优化
一条大河
01-24 440
tidb调优--系统层面
tidb性能调优参数整理
diandian_mo的博客
02-14 1567
持续整理中。。。。 ---------创建索引 ------- 动态参数 set global tidb_ddl_reorg_worker_cnt =4 创建索引回填数据的并发度（如果业务繁忙要调小）（调大，加快索引的创建） set global tidb_ddl_reorg_batch_size=256 如果与线上业务冲突，调小（调大，加快索引的创建） -----请求数量限制----- tidb_store_limit :控制同时发往一个 tikv 节点的请求数量，避免并发请求多对TIKV 造成压力
TiDB学习笔记（七）-数据库系统优化
干货满满~
04-20 1820
一、TiDB Server 关键性能参数与优化 处理器-动态节能技术 cpupower frequency-set --governor performance 处理器-中断亲和性 NUMA绑核 内存-透明大页 内存-虚拟内存参数 存储及文件系统 I/O调度器 格式化参数-块大小 挂载参数 网络 二、PD 关键性能参数与优化 三、TiKV 关键性能参数与优化 线程池调优 gPRC线程池 负责网络IO，反序列化， server.grpc-concurrency 默..
TiDB 中的TiKV 性能参数调优实战
weixin_42073629的博客
09-05 432
概述： TiKV 最底层使用的是 RocksDB 做为持久化存储，所以 TiKV 的很多性能相关的参数都是与 RocksDB 相关的。TiKV 使用了两个 RocksDB 实例，默认 RocksDB 实例存储 KV 数据，Raft RocksDB 实例（简称 RaftDB）存储 Raft 数据。 TiKV 使用了 RocksDB 的 Column Families 特性。 默认 RocksDB 实例将 KV 数据存储在内部的 default、write 和 lock 3 个 CF 内。 defaul
cpp-TiKV分布式事务键值数据库最初创建用于补充TiDB
08-16
TiKV - 分布式事务键值数据库，最初创建用于补充TiDB
auto-tikv:使用ML方法调整TiKV的工具
03-14
自动TiKV 使用机器学习方法自动调整数据库配置 相依性 去1.12.2 tikv-ctl go-ycsb Python 3.6 安装 ./install.sh sudo pip3 install -r ... 然后将tikv_template.yml复制到TIDB_ANSIBLE / conf / tikv.yml 文档
TiDB-Binlog架构演进与实现原理
02-24
TiDB-Binlog组件用于收集TiDB的binlog，并提供实时备份和同步功能。该组件在功能上类似于MySQL的主从复制，MySQL的主从复制依赖于记录的binlog文件，TiDB-Binlog组件也是如此，主要的不同点是TiDB是分布式的，因此...
TiDB 查询优化及调优系列（一）TiDB 优化器简介
weixin_42241611的博客
04-27 295
与其它主流商业数据库一样，TiDB 的查询优化器负责用户及系统查询的优化，生成有效且高效的执行计划由执行器来执行。而优化器生成的执行计划的优劣直接影响查询的执行效率和性能。「TiDB 查询优化及调优」系列文章将通过一些具体的案例，向大家介绍 TiDB 查询及优化相关的原理和应用。本文为系列文章的第一篇，将简要介绍 TiDB 的查询优化器的优化流程。
理想汽车 HTAP 读流量优化指南丨 TiDB 优化实践
weixin_42241611的博客
04-24 220
每一家的业务都不一样，每一家的集群也不一样，默认只是说是一个挺好的配置，但是大多数的部署 TiDB 可能用的不是 NVMe，可能用的是云盘的 SSD 或者是普通的 SSD，每一家的读流量标准应该根据各自的硬盘配置标准，设置一个正常流量均衡的 Region。我们针对线上 TP 类型是有的，比如下图这个业务的 SQL，就是点击类的报表系统，因为点击类的报表系统由于业务人员选的维度不同，最后的数据量级也不同，你可以设置一个限制，否则可能他点很多次的话，一个大的流量就会把你的集群冲击掉。
TiKV 内存参数性能调优
weixin_42241611的博客
09-15 418
本文档用于描述如何根据机器配置情况来调整 TiKV 的参数，使 TiKV 的性能达到最优。你可以在找到配置文件模版，参考进行操作，部分配置项可以通过方式在线更新。具体配置项的含义可参考。TiKV 最底层使用的是 RocksDB 做为持久化存储，所以 TiKV 的很多性能相关的参数都是与 RocksDB 相关的。TiKV 使用了两个 RocksDB 实例，默认 RocksDB 实例存储 KV 数据，Raft RocksDB 实例（简称 RaftDB）存储 Raft 数据。
TiDB Server关键性能参数与优化
Sebastien23的博客
06-14 693
Dynamic Frequency Scaling CPU动态节能技术用于降低服务器功耗，通过选择系统空闲状态不同的电源管理策略，可以实现不同程度的降低服务器功耗。更低的功耗策略意味着CPU唤醒更慢、对性能影响更大。DFS有以下五种模式：。配置命令为： 数据库服务器一定要设置为performance模式。NUMA Binding 内存直接绑定在CPU上，CPU只有访问自身管理的内存物理地址时，才会有较短的响应时间。NUMA架构的服务器，通过绑定NUMA节点，尽可能地避免跨NUMA访问内存，提升tidb se
TiDB性能调优
雪辉博客
01-03 2129
TiDB\TIKV性能调优
TIDB 优化--TiKV 性能参数调优
DBASpace的博客
03-31 7802
TiKV 最底层使用的是 RocksDB 做为持久化存储，所以 TiKV 的很多性能相关的参数都是与 RocksDB 相关的。TiKV 使用了两个 RocksDB 实例，默认 RocksDB 实例存储 KV 数据，Raft RocksDB 实例（简称 RaftDB）存储 Raft 数据。TiKV 使用了 RocksDB 的 Column Falimies 特性。默认 RocksDB 实例将 KV ...
TiDB中TiKV性能参数调整过程
vkingnew 的技术博客
08-23 3450
环境信息： $ ansible --version ansible 2.6.3 config file = /home/tidb/tidb-ansible/ansible.cfg configured module search path = [u'/home/tidb/.ansible/plugins/modules', u'/usr/share/ansible/plugins/mod...
tikv性能参数调优
weixin_34357887的博客
12-06 397
tiKV 最底层使用的是 RocksDB（tidb3.0版本中将使用tian存储引擎） 做为持久化存储，所以 TiKV 的很多性能相关的参数都是与 RocksDB 相关的。TiKV 使用了两个 RocksDB 实例，默认 RocksDB 实例存储 KV 数据，Raft RocksDB 实例（简称 RaftDB）存储 Raft 数据。 TiKV 使用了 RocksDB 的Column Famil...
TIDB V4.0参数优化建议
12-22 911
#----------------------线程优化--------------------# #server.grpc-concurrency = 4 默认为4。CPU<=8可以考虑将该server.grpc-concurrency = 2,机器配置高，并且TiKV承担了非常大量的读写请求，观察到Grafana上的监控Thread CPU的gRPC poll CPU的数值超过了 server.grpc-concurrency大小的80%，可以考虑适当调大server.grpc-concurrenc
TiDB 性能分析&性能调优&优化实践大全
TiDB 社区干货传送门
06-20 1816
本文介绍了基于数据库时间的系统优化方法，以及如何利用 TiDB Performance Overview 面板 8进行性能分析和优化。通过本文中介绍的方法，你可以从全局、自顶向下的角度分析用户响应时间和数据库时间，确认用户响应时间的瓶颈是否在数据库中。如果瓶颈在数据库中，你可以通过数据库时间概览和 SQL 延迟的分解，定位数据库内部的瓶颈点，并进行针对性的优化。TiDB 对 SQL 的处理路径和数据库时间进行了完善的测量和记录，方便定位数...
tidb增加tidb节点、tikv节点、pd节点
最新发布
06-10
在 TiDB 集群中增加 TiDB 节点、TiKV 节点、PD 节点的步骤略有不同，下面分别介绍一下。 1. 增加 TiDB 节点 增加 TiDB 节点需要进行以下步骤： - 使用 TiUP 工具安装 TiDB-ansible，并在 inventory.ini 配置文件中添加新的 TiDB 节点信息。 - 在新的 TiDB 节点上安装 TiDB 组件，并在配置文件中设置与现有 TiDB 节点相同的参数。 - 将新的 TiDB 节点加入到 TiDB 集群中，需要使用 TiUP 工具执行 `tiup cluster scale-out <cluster-name> <new-tidb-instance>` 命令，其中 `<new-tidb-instance>` 是新的 TiDB 节点的名称。 - 等待 TiUP 工具完成 TiDB 节点的扩容操作，然后使用 `tiup cluster display <cluster-name>` 命令检查集群状态，确保新的 TiDB 节点已经加入到集群中。 2. 增加 TiKV 节点 增加 TiKV 节点需要进行以下步骤： - 在新的服务器上安装 TiKV 组件，并在配置文件中设置与现有 TiKV 节点相同的参数。 - 将新的 TiKV 节点加入到 TiKV 集群中，需要在 TiKV 的配置文件中设置新的节点信息，并在现有 TiKV 节点上执行 `tiup cluster reload <cluster-name> tikv` 命令，让 TiKV 集群重新加载配置文件。 - 使用 TiUP 工具执行 `tiup cluster scale-out <cluster-name> <new-tikv-instance>` 命令，其中 `<new-tikv-instance>` 是新的 TiKV 节点的名称。 - 等待 TiUP 工具完成 TiKV 节点的扩容操作，然后使用 `tiup cluster display <cluster-name>` 命令检查集群状态，确保新的 TiKV 节点已经加入到集群中。 3. 增加 PD 节点 增加 PD 节点需要进行以下步骤： - 在新的服务器上安装 PD 组件，并在配置文件中设置与现有 PD 节点相同的参数。 - 将新的 PD 节点加入到 PD 集群中，需要在 PD 配置文件中设置新的节点信息，并在现有 PD 节点上执行 `tiup cluster reload <cluster-name> pd` 命令，让 PD 集群重新加载配置文件。 - 使用 TiUP 工具执行 `tiup cluster scale-out <cluster-name> <new-pd-instance>` 命令，其中 `<new-pd-instance>` 是新的 PD 节点的名称。 - 等待 TiUP 工具完成 PD 节点的扩容操作，然后使用 `tiup cluster display <cluster-name>` 命令检查集群状态，确保新的 PD 节点已经加入到集群中。 以上是增加 TiDB、TiKV、PD 节点的基本步骤，具体的操作可能会因为版本、网络环境等因素而有所不同，需要根据具体情况进行调整。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

工作变成艺术

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值