FaN()

FuxkDB.com

MySQL大表传输表空间的坑

MySQL大表传输表空间的坑 最近刚帮业务线拆分完数据库, 源环境遗留了一张700G的大表, 虽说现在不用了, 但是业务方还是不希望删掉, 于是打算把这张表迁移到归档库, 这样有需要是还可以查询. 700G的表想了想, 如果是逻辑导出再导入的话, 感觉会很慢. 于是决定使用传输表空间方式恢复到归档...

2019-06-22 19:24:48

阅读数 17

评论数 0

mysqldump限速防止网卡打满

限制备份速度防止资源饱和 最近在做拆库, 于是就做了很多表迁移工作, 需要使用mysqldump远程备份数据, 然后发现备份时很容易就把源库网卡打满了. 想过用tc命令限速, 发现有点复杂. 今天无意间看xtrabackup文档发现一个方法 Throttling the throughput to...

2019-06-12 03:53:24

阅读数 32

评论数 0

分库分表的一些杂乱记录

文章目录如何平衡资源如何合理设置innodb_buffer_pool_size使用EXCEL整理信息 拆分数据库感觉更多还是应该从业务上去拆分. 那么我们需要业务方协助, 由他们细化业务类别. 之后DBA要做的是如何合理分配资源 如何平衡资源 有时候一个数据库实例一拆就能拆除10几个业务. 那么可...

2019-05-15 09:19:49

阅读数 16

评论数 0

ProxySQL Error: Access denied for user问题处理

我们有一个监控脚本. 很简单类似如下 import pymysql import time for i in range(2000): conn=pymysql.connect(host='192.168.3.xxx',port=16042,user='user',password='pa...

2019-03-15 21:34:44

阅读数 232

评论数 0

MGR周期性性能下降原因

MySQL Goup Replication周期性性能下降原因 MySQL版本:5.7.22 在我的压测中发现一个有意思的现象: 16-256的各个负载下qps波谷有重合 当时觉得很不理解.想不明白原因, 从图上看, 这个性能衰减还是很严重的 下面这篇文章也有体现 https://cloud.t...

2019-03-14 10:20:50

阅读数 75

评论数 0

oracle重新编译失效对象的几种方法

oracle重新编译失效对象的几种方法 手工重编译 查看失效对象 COLUMN object_name FORMAT A30 SELECT owner, object_type, object_name, status FROM dba_objects...

2019-03-14 10:11:27

阅读数 232

评论数 0

修改sysbench输出格式为csv或json, 添加自定义指标

修改sysbench输出格式为csv或json, 添加自定义指标 在oltp_common.lua添加(二选一) -- 输出csv -- function sysbench.hooks.report_intermediate(stat) -- sysbench.report_csv(...

2019-03-12 17:56:16

阅读数 45

评论数 0

使confluent_kafka支持SASL_PLAINTEXT

文章目录安装confluent-kafka安装librdkafka替换库文件验证 同事之前一直使用kafka-python开发. 上了ACL以后发现kafka-python居然不支持SASL_PLAINTEXT https://kafka-python.readthedocs.io/en/mas...

2019-03-08 18:54:51

阅读数 180

评论数 0

The Python ssl extension was not compiled. Missing the OpenSSL lib?

首先yum install openssl openssl-devel 确保版本大于等于1.0.2 如果还不行 [root@node024212 17:42:57 ~] #find / -name libssl.so.1.0.0 /root/my...

2019-03-04 17:46:47

阅读数 154

评论数 0

假如Kafka集群中一个broker宕机无法恢复, 应该如何处理?

假如Kafka集群中一个broker宕机无法恢复, 应该如何处理? 坐地铁时想到这个问题, 印象中书中说添加新的broker, 是不会自动同步旧数据的. 笨办法 环境介绍 三个broker的集群, zk,kafka装在一起 | broker | IP | broker.id | |--------...

2019-02-22 13:38:00

阅读数 916

评论数 0

ansible_role_canal_instance

需求: 在一个服务器添加多个canal_instance. 笨办法定义一个var ha_group_name: mgr_dev1 master_address: 172.18.12.211:3307 journal_name: master_position: master_timestamp: ...

2019-02-22 13:37:25

阅读数 36

评论数 0

Kafka SASL/SCRAM+ACL实现动态创建用户及权限控制

文章目录SASL_SCRAM+ACL实现动态创建用户及权限控制使用SASL / SCRAM进行身份验证1. 创建SCRAM Credentials创建broker建通信用户(或称超级用户)创建客户端用户fanboshi查看SCRAM证书删除SCRAM证书2. 配置Kafka Brokers客户端配...

2019-01-26 21:50:11

阅读数 613

评论数 0

CRT日志配置

/Users/TiM/Documents/crt/%Y-%M-%D/%H/%S-%h:%m:%s.log [START] [END] [%Y-%M-%D %h:%m:%s]

2019-01-17 21:33:39

阅读数 69

评论数 1

如何确定Single-Primary模式下的MGR主节点

如何确定Single-Primary模式下的MGR主节点(文档 ID 2214438.1) MySQL 5.7 可以通过global status group_replication_primary_member确定 mysql> SELECT VARIABLE...

2018-08-25 23:04:10

阅读数 423

评论数 0

限制sql文件执行频率

  对于pxc, 为了避免流控, 可以在导入.sql文件时, 先对文件做处理 awk '1;NR%1000==0{print "select sleep(1);"}' xxx.sql > xxx_dba.sql 上面...

2018-08-20 22:38:59

阅读数 115

评论数 0

如何做好MySQL的备份

如何做好MySQL的备份 物理备份还是逻辑备份? 其实物理备份和逻辑备份并没有好坏之分, 关键是要适合你的场景. 两种备份方式的备份工具有: 逻辑备份工具: [mysqldump, mysqlpump, mydumper, select into out file] 物理备份工...

2018-04-28 00:05:50

阅读数 1041

评论数 0

Percona server的Backup Locks

Backup Locks Percona Server在5.6.16-64.0中实现了这一功能,以作为用于物理和逻辑备份的FLUSH TABLES WITH READ LOCK的轻量级替代。现在有三个新的语句可供使用:LOCK TABLES FOR BACKUP, LOCKBINLOG FOR ...

2018-04-27 10:10:05

阅读数 267

评论数 0

Load data奇怪的问题

本文永久连接: http://fuxkdb.com/2018/03/03/Load-data%E5%A5%87%E6%80%AA%E7%9A%84%E9%97%AE%E9%A2%98/ 盗转死妈 Load data奇怪的问题 公司一套所谓的BI库(5.5 innodb引擎),由于太大了,考...

2018-04-15 20:10:14

阅读数 306

评论数 0

延迟关联优化SQL一例

昨日下午和今日凌晨出现较多告警 经排查发现时又下面SQL导致 SELECT * FROM pre_forum_post ORDER BY pid ASC LIMIT 7332000,1000 Limit愈来愈大,导致走全表扫描加文件排序 root@localhost 10:...

2018-03-30 10:26:10

阅读数 320

评论数 0

HDFS NFS Gateway 无法启动、挂载失败问题

转自:http://blog.csdn.net/feloxx/article/details/49099397 如遇到NFS启动失败,或者其他机器挂载NFS失败,错误字样有如下 挂载失败关键字: mount.nfs: requested NFS version or transport pr...

2018-03-06 15:29:36

阅读数 812

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭