- 博客(10)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 MySQL性能剖析工具(pt-query-digest)
MySQL性能剖析工具(pt-query-digest)【转】这个工具同样来自percona-toolkit该工具集合的其他工具MySQL Slave异常关机的处理 (pt-slave-restart)验证MySQL主从一致性(pt-table-checksum&pt-table-sync)http://www.linuxidc.com/Linux/2014-07/1...
2019-03-22 15:58:18
511
转载 mysql__一个神奇SQL引发的故障
一个神奇SQL引发的故障【转】前几天一个客户数据库主实例告警，诊断过程中发现是由一个慢SQL导致的数据库故障，而在排查逐步深入之后却发现这个现象的不可思议。问题描述2016年12日09日，大概9点26分左右，一个客户的生产库主实例发出告警，告警信息如下：MySQL实例超过五分钟没有更新。这个告警信息简单解释下就是持续五分钟无法获取该实例的信息。同时开发人员还反映，从12月09日...
2019-03-22 15:50:05
325
转载 从MySQL全库备份中恢复某个库和某张表【转】
一、全库备份-A[root@mha2 backup]#mysqldump -uroot -p123456 --default-character-set=utf8 --single-transaction --extended-insert=false --hex-blob --master-data=2 --log-error=/tmp/test.err --routines --trigge...
2019-03-22 15:22:32
482
转载 pt-table-checksum工具对Mysql主从数据一致性校验（Master、Slave端口不同）
一、简介pt-table-checksum是著名的 percona-toolkit 工具集的工具之一。它通过在主库执行基于statement的sql语句来生成主库数据块的checksum，把相同的sql语句传递到从库，并在从库上计算相同数据块的checksum，最后，比较主从库上相同数据块的checksum值，由此判断主从数据是否一致。这种校验是分表进行的，在每个表内部又是分块进行...
2019-03-21 13:49:10
757
原创 【Shell循环进程并行处理】利用简单的语句实现for循环并行处理命令
在生信分析中，经常会遇到不同的重复和处理，这样的分析过程有时是非常费时且占用资源并不是很多的，可以同时在后台运行以节约时间，这是并行处理的意义。除了需要并行处理，循环迭代来遍历整个文件夹的需要分析的数据也是非常消耗精力和时间的，按照宁可花费机器一分钟绝不浪费程序员一秒钟的精神，我决定开始探索并行循环处理的应用。首先摆在我面前的是tab分割的按行分布的不同的采样策略，这样一个文件我们要进行...
2019-03-20 15:43:21
2740
原创 Linux下通过软链接转移mysql目录，解决分区空间不足
当存放数据库分区的空间不足时，可以采取对数据库目录进行迁移的方法，具体步骤如下：1、先关闭数据库mysqladmin -p shutdown ##输入数据库管理员密码2、迁移数据库目录mv /var/lib/mysql /newdisk/mysql3、创建软连接ln -s /newdisk/mysql /var/lib/mysql4、启动数据库mysqld_safe --us...
2019-03-20 11:00:27
1528
转载 搭建高可用mongodb集群（一）——配置mongodb
在大数据的时代，传统的关系型数据库要能更高的服务必须要解决高并发读写、海量数据高效存储、高可扩展性和高可用性这些难题。不过就是因为这些问题Nosql诞生了。NOSQL有这些优势：大数据量，可以通过廉价服务器存储大量的数据，轻松摆脱传统mysql单表存储量级限制。高扩展性，Nosql去掉了关系数据库的关系型特性，很容易横向扩展，摆脱了以往老是纵向扩展的诟病。高性能，Nosql通过简单...
2019-03-19 16:44:14
148
转载 搭建高可用mongodb集群（二）—— 副本集
在上一篇文章《搭建高可用MongoDB集群（一）——配置MongoDB》提到了几个问题还没有解决。主节点挂了能否自动切换连接？目前需要手工切换。 主节点的读写压力过大如何解决？ 从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？ 数据压力大到机器支撑不了的时候能否做到自动扩展？这篇文章看完这些问题就可以搞定了。NoSQL的产生就是为了解决大数据量、高扩展性、高性能、灵活...
2019-03-19 16:41:18
187
转载 搭建高可用mongodb集群（四）—— 分片
按照上一节中《搭建高可用mongodb集群（三）—— 深入副本集》搭建后还有两个问题没有解决：从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？ 数据压力大到机器支撑不了的时候能否做到自动扩展？在系统早期，数据量还小的时候不会引起太大的问题，但是随着数据量持续增多，后续迟早会出现一台机器硬件瓶颈问题的。而mongodb主打的就是海量数据架构，他不能解决海量数据怎么行！不行！“...
2019-03-19 16:34:08
536
转载 mongodb 3.4 集群搭建：分片+副本集
mongodb是最常用的nodql数据库，在数据库排名中已经上升到了前六。这篇文章介绍如何搭建高可用的mongodb（分片+副本）集群。在搭建集群之前，需要首先了解几个概念：路由，分片、副本集、配置服务器等。相关概念先来看一张图：从图中可以看到有四个组件：mongos、config server、shard、replica set。mongos，数据库集群请求的入口，所有的...
2019-03-19 16:29:35
198
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人