与数据交流的路上-CSDN博客

三、安装Prometheus官网下载地址：https://prometheus.io/download/解压：tar -zxvf prometheus-2.19.2.linux-amd64.tar.gz重命名：mv prometheus-2.19.2.linux-amd64 /home/prometheus进入对应目录： cd/home/prometheus查看配置文件：cat prometheus.yml启动：./prometheus &验证是否成功：http:/..

2023-08-15 09:47:21 1007

原创 mysql-tokudb使用qa

安装tokudb引擎的前提条件是物理机要关闭大页，并需要注意物理机所剩内存和配置文件中tokudb_cache_size（内存主要占用部分），innodb_buffer_pool_size的使用，另外tokudb的安装一定要安装libjemalloc依赖，不然无法安装tokudb引擎。

2023-08-14 15:14:06 458

原创 clickhouse-安装部署

【代码】clickhouse-安装部署。

2023-08-01 17:05:45 674

原创 clickhouse-用户和角色

。

2023-08-01 16:20:32 2368

原创 mongo-mongo数据统计脚本

可以用如下脚本来统计mongo的数据大小。

2023-06-14 19:00:20 167

原创 mysql-xtrabackup的使用

文件名用途xtrabackup的软链，目前仍可使用，但是现在已经弃用，将在下一个主要版本中删除xtrabackup提供备份功能xbcrypt用于加密和解密备份文件的程序xbstream允许流式传输文件和从中提取文件的程序xbcloud用于从云中下载或者上传的程序通过官网了解详细参数解释，下面介绍一些用到的参数参数意义是否xtrabackup独有参数通过应用位于同一目录中名为 xtrabackup_logfile 的事务日志文件（即redo)，在 BACKUP-DIR 中准备备份。

2023-05-31 17:24:04 1053

原创 pt工具的使用（8） pt-deadlock-logger的使用

pt-deadlock-logger 记录有关给定 DSN 上的 MySQL 死锁的信息。信息打印到 STDOUT，也可以通过指定 --dest 将其保存到表中。pt-deadlock-logger 通过轮询和解析 SHOW ENGINE INNODB STATUS 打印有关 MySQL 死锁的信息。当一个新的死锁发生时，它被打印到 STDOUT，如果指定 --dest，可以保存到对应的表中。仅打印新的死锁。

2023-05-22 16:34:54 691

原创 linux-node_exporter突然挂掉（couldn‘t get dbus connection）

突然收到一台机器挂掉的告警，去上面查看发现机器正常，uptime正常，没有重启情况，UID 20029的用户是tidb,su - tidb的时间较长，node_exporter有如下报错。

2023-04-20 17:28:23 1487

原创 pt工具的使用（7） pt-archiver的使用

pt-archiver 是归档表的工具，在 sql 中写入高效归档和清除作业。目标是在不对 OLTP 查询产生太大影响的情况下，将旧数据从表中蚕食掉，从而实现低影响、仅向前的作业。您可以将数据插入到另一个表中，而不必在同一台服务器上。您也可以将其写入适合 LOAD DATA INFILE 格式的文件。或者你两者都不能做，在这种情况下它只是一个增量删除。

2023-04-13 17:46:31 1665

原创 mongo-db相关方法

一、参数名称描述 db.adminCommand() 针对admin数据库运行命令。 db.aggregate() 运行不需要基础集合的管理/诊断管道。 db.cloneDatabase(hostname) 不推荐使用。当针对MongoDB 4.0或更早版本运行时，将数据库从远程主机复制到当前主机。针对MongoDB 4.2或更高版本运行时不受支持

2023-04-06 15:46:50 444

原创 mysql-online-ddl是否需要rebuild

源码地址/**/**源码地址/**public :/*/**/**/**/**初次探索源码，有很多地方可能理解的不对，之后会学习些DDL相关的如加MDL锁，rebuild等等的具体操作，欢迎各位大佬指出不足之处。

2023-03-17 19:00:38 784

原创 LINUX-df和du的统计结果不同

有一套TiDB集群，其中tikv的机器出现了磁盘报警，查看之后发现除了数据过多之外，还有node_exporter的日志过大的问题，日志内容如下可以看到，这是因为tidb会无限重启node_exporter，但是9100的端口被占用，所以一直启动不起来。

2023-03-06 15:12:47 104

原创 TIDB-analyze table所引起的Data Too Long问题

我所使用的TIDB版本是4.0.13,对于analyze 产生的data too long的问题有两种，下面分别介绍下两种问题的现象和解决方案。

2023-03-03 18:35:26 443

原创 go- rdb-bigkeys安装与故障解决

注释632-635行，然后提交变更，这里我感觉这快的version校验没有任何意义，且我的go还不太熟悉，所以这里接直接注释了，如果你有更好的办法也可以自己改。将github.com/cupcake/rdb的项目fork到自己的github账户下，只需要在github上对应项目界面点击fork按钮集合。报错原因主要是因为代码对rdb解析的时候获取版本的处理有问题。这样下来就可以正常的运行了。

2023-02-28 18:16:38 478

原创 TIDB-记录一次cdc同步报错处理

具体架构上游是tidb,经由cdc同步到mysql,同步出错的原因是因为不支持的ddl语句，一共有两个ddl同时执行以前总能碰到mysql的DDL在tidb上不支持，这种情况下的DDL是特别注意的，但是tidb用习惯后，没有注意这一点，查了才发现，确实是不支持字段的rename操作，可以通过change column等来达到效果。

2023-02-24 16:45:23 540

原创 aws-cli相关操作

s3:下载数据到本地：# BUCKET1：桶名称# dir/my_images.tar.bz2：s3中的对象# my_images.tar.bz2 复制到本地的名称# aws-cof：aws配置的项目名（将aksk配置到配件里，这样就不用在环境变量中写aksk了）aws s3api get-object --bucket BUCKET1 --key dir/my_images.tar.bz2 my_images.tar.bz2 --profile aws-cof......

2023-02-01 15:23:51 518