diaochanglei2024-CSDN博客

转载 ES 6.1.2集群安装

1、下载java，并设置环境变量sudo tar -zxvf jdk-8u191-linux-x64.tar.gz -C /usr/local/sudo vim /etc/profile在最后添加export JAVA_HOME=/usr/local/jdk1.8.0_191 export PATH=$JAVA_HOME/bin:$PATHexpo...

2019-05-08 21:47:00 198

转载 ES更改参数max_result_window

今天开发那边说翻页超过10000报错。早上来查阅官网手册，说from/size默认是10000。通过参数index.max_result_window进行控制。那么直接改这个参数即可。1、先看看默认配置curl -XGET 10.46.2.100:9200/carnoc_jobapply/_settings{ "carnoc_jobapply": {...

2019-04-22 14:37:00 3226

转载 percona 5.7二进制安装

1、建立用户和组sudo groupadd mysqlsudo useradd -g mysql -s /sbin/nologin mysql2、下载二进制包Percona-Server-5.7.25-28-Linux.x86_64.ssl101.tar.gz。解压，并移至安装目录tar -zxvf Percona-Server-5.7.25-28-Linux...

2019-04-17 11:52:00 476

转载 windows如何通过端口查看对应程序

今天打开SSR报错，说端口被占用。打开的软件有点多，又不想重启。就需要找到占用的软件，关闭了即可。打开cmd，输入netstat -aon能看到所有的使用端口其中1080端口是预留给SSR使用的。在输入netstat -aon | findstr "1080"来查看那个PID占用的PID是15404。在通过命令tasklist | findstr "154...

2019-04-11 10:08:00 2020

转载 MySQL参数log_bin_trust_function_creators

问题：执行创建函数的sql文件报错如下；[Err]1418-ThisfunctionhasnoneofDETERMINISTIC,NOSQL,orREADSSQLDATAinitsdeclarationandbinaryloggingisenabled(you*might*wanttousethelesssafelog_b...

2019-04-03 14:04:00 528

转载 mysqldump备份以tmp_开头的表

需要备份warehouse这个DB下所有以tmp_开头的表名。直接说结论：　　1 mysqldump -h*** -u** -p* warehouse $(mysql -h*** -u** -p* -Dwarehouse -Bse "show tables from warehouse where tables_in_warehouse like 'tmp_l%'") |...

2019-04-02 17:21:00 380

转载将慢日志汇总发送邮件脚本

1、DB服务器操作一、在各个DB服务器编写脚本，来获取当天的慢日志并分析vi /monitor/slow_pt.sh#!/bin/bash#作者：***#创建时间：2018-04-24#功能：每天的慢日志进行处理，在迁移至跳转机date=`date +%y%m%d`SLOW_PATH=/data/mysql_data/DBB01-slow.log ...

2018-05-03 17:48:00 201

转载 ssh免密登录

原文地址：https://www.linuxidc.com/Linux/2017-10/147377.htm本节索引场景分析ssh免密登录pssh工具批量管理SHELL自动化脚本本篇总结场景分析作为一个运维工程师，不是每个人工作的环境都想阿里、腾讯那样，动不动就上亿的PV量，上万台服务器。我们通常还是...

2018-04-24 15:41:00 277

转载 ES聚合报错

在测试Elasticsearch聚合的时候报了一个错误。具体如下：GET /megacorp/employee/_search{ "aggs": { "all_interests": { "terms": { "field": "interests" } } }}报错信息{ "error": { ...

2018-02-08 17:03:00 285

转载 elasticsearch外网访问设置

默认情况下安装elasticsearch之后是无法进行外网访问的，可以通过设置来完成这一目的1、更改配置文件[***@elk01 ~]$ vim elk/config/elasticsearch.yml找到network.host这一行，更改为network.host: 0.0.0.0注意：:后面需要一个空格，格式不正确会报错误2、重启...

2018-01-26 18:28:00 234

转载 the ssl module in Python is not available错误解决

在使用pip安装pymongo的过程中报错，提示如下：1 $ pip3 install pymongo2 pip is configured with locations that require TLS/SSL, however the ssl module in Python is not available.3 Collecting pymongo4 Cou...

2018-01-10 15:45:00 1707

转载 python升级到版本3

一、下载python3下载python3版本 wget https://www.python.org/ftp/python/3.7.0/Python-3.7.0a3.tgz二、安装依赖包sudo yum install make gcc gcc-c++ zlib zlib-devel libffi-devel三、解压安装tar -zxvf ...

2018-01-10 15:02:00 76

转载 yum源安装Percona

yum源安装更为简单，方便。话不多说，开始吧。1、下载yum源yum -y install https://www.percona.com/redir/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm2、安装Percona yum install -y Percona...

2017-09-14 17:08:00 719

转载 mysql5.7 Your password does not satisfy the current policy requirements问题解决

安装mysql5.7rpm包，在更改密码的时候，提示错误这是由于Mysql5.7默认对于密码的要求强度较高，设置的密码过于简单不予通过。要解决这个问题，涉及到的参数有validate_password_policy和validate_password_length。validate_password_policy有以下取值：PolicyTests Perfo...

2017-07-03 17:34:00 255

转载 Percona Toolkit安装、使用

percona-toolkit是一组高级命令行工具的集合，用来执行各种通过手工执行非常复杂和麻烦的mysql和系统任务，这些任务包括：l 检查master和slave数据的一致性l 有效地对记录进行归档l 查找重复的索引l 对服务器信息进行汇总l 分析来自日志和tcpdump的查询l 当系统出问题的时候收集重要的系统信息percona-...

2017-03-24 17:18:00 82

转载 Mysql 5.6主从搭建

mysql设置主从的重要性和必要性不必多说，下面开始详细说明如何搭建主从。1、主服务器上创建一个用于复制的账户。mysql> GRANT REPLICATION SLAVE ON *.* TO 'repl'@'192.168.47.3' IDENTIFILED BY '1234';mysql> flush privileges;2、主服务器参数修改...

2017-03-14 17:00:00 111

转载 mysql 表压缩

mysql中经常出现历史表，这些表不会进行修改数据的操作，只有读操作。那么我们可以对其进行压缩处理，缩减磁盘空间。Innodb表和MyISAM表的压缩指令不一样。下面分别来讨论：一、InnoDB表参考文章：http://blog.csdn.net/linghaowoneng/article/details/51491800。简而言之就一下几点：1、确保开启参数innodb...

2017-03-10 15:37:00 111

转载 Percona5.6源码安装

---恢复内容开始---系统环境：CentOS 6.81、安装依赖包yum install gcc-c++ make cmake bison bison-devel ncurses-devel libaio-devel perl readline-devel2、创建MySql用户groupadd mysqluseradd -g mysql -s /sb...

2017-03-03 12:02:00 162

转载 InnoDB: The innodb_system data file 'ibdata1' must be writable错误

重新安装percona5.7过程中，启动mysql服务总是报如下的错误2017-02-10T02:31:36.781070Z 0 [ERROR] InnoDB: The innodb_system data file 'ibdata1' must be writable2017-02-10T02:31:36.781096Z 0 [ERROR] InnoDB: The inno...

2017-02-10 10:40:00 1484

转载 XtraBackup备份

1、基础知识InnoDB有个商业的InnoDB Hotbackup，可以对InnoDB引擎的表实现在线热备。而percona出品的Xtrabackup，是InnoDB Hotbackup的一个开源替代品，可以在线对InnoDB/XtraDB引擎的表进行物理备份。mysqldump支持在线备份，不过是逻辑备份，效率比较差。xtrabackup是开源的MySQL备份工具，物理备份，效...

2017-02-09 18:06:00 69

转载 .frm和.ibd恢复数据

昨日晚上开发告诉我不小心truncate两个表的数据，要求还原。结果在阿里云上找到了备份内容，结果是物理备份文件.frm、.ibd。心中一万个草泥马啊。。没办法，开始还原吧。1、查看测试机Mysql配置文件位置[root@localhost mysql]# which mysqld /usr/sbin/mysqld[root@l...

2017-01-18 17:34:00 112

转载解决Navicat无法连接到Mysql

Navicat无法连接到Mysql，返回的错误码是Lost connection to MySQL server at ‘reading initial communication packet’, system error: 0参考了文章MySQL远程连接丢失问题解决方法（Lost connection to MySQL server）停止Mysql服务[root@lo...

2017-01-18 16:10:00 332

转载 -bash: ./bak_1.py: /usr/bin/python^M: bad interpreter: 没有那个文件或目录

在Windows的PyCharm中编写了一个Python文件，然后上传至CentOS中，已经添加执行权限，但是仍然会报如下的错误：代码如下：#!/usr/bin/python# -*- coding:UTF-8 -*- ＃必须在第一行或者第二行显示中文# Filename:bak_1.pyimport osimport time#第一步：需要备份的...

2017-01-17 16:35:00 220

转载 Percona 5.7安装

一、从官网下载Percona5.7地址：https://www.percona.com/downloads/Percona-Server-5.7/LATEST/需要注意是服务器的版本。我这里选择的是Percona-Server-5.7.16-10-ra0c7d0d-el6-x86_64-bundle.tar二、解压tar xvf Percona-Server-5.7....

2016-12-22 18:23:00 333

转载 show status和show variables区别解析

1.show status查看系统运行的实时状态，便于dba查看mysql当前运行的状态，做出相应优化，动态的，不可认为修改，只能系统自动update。MariaDB [(none)]> show status like '%conn%';+--------------------------+----------+| Variable_name ...

2016-12-21 16:08:00 406

转载 sed命令

Linux sed命令是利用script来处理文本文件。sed可依照script的指令，来处理、编辑文本文件。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。语法sed [-hnV][-e<script>][-f<script文件>][文本文件]参数说明：-e<script>或--expressi...

2016-12-19 16:22:00 70

转载 information_schema.TABLES

获取所有表结构(TABLES)SELECT * FROM information_schema.TABLES WHERE TABLE_SCHEMA='数据库名'; TABLES表：提供了关于数据库中的表的信息（包括视图）。详细表述了某个表属于哪个schema，表类型，表引擎，创建时间等信息。各字段说明如下: 字段含义Tab...

2016-12-14 14:36:00 190

转载 mongodb遇到的错误

1、[root@localhost bin]# ./mongod -dbpath /data/db --logpath /usr/local/mongodb/log 2016-12-13T18:11:39.909+0800 F CONTROL [main] Failed global initialization: FileNotOpen: logpath "/usr/lo...

2016-12-13 18:29:00 1044

转载 MySQL优化的奇技淫巧之STRAIGHT_JOIN

原文地址：http://huoding.com/2013/06/04/261问题通过「SHOW FULL PROCESSLIST」语句很容易就能查到问题SQL，如下：SELECT post.*FROM postINNER JOIN post_tag ON post.id = post_tag.post_idWHERE post.status = 1 AND p...

2016-12-05 17:02:00 58

转载 mongodb安装

1、从官网下载安装包mongodb-linux-x86_64-rhel62-3.2.11.tgz2、解压，并重命名tar zxvf mongodb-linux-x86_64-rhel62-3.2.11.tgzmv mongodb-linux-x86_64-rhel62-3.2.11 /usr/local/mongodb3、将MongoDB 的可执行文件添加到PAT...

2016-11-29 18:30:00 76

转载 XtraBackup安装

1、从官网下载XtraBackup2.4.4。percona-xtrabackup-24-2.4.4-1.el6.x86_64.rpm2、安装依赖包 yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL3、rpm安装rpm -ivh percona...

2016-11-18 17:12:00 108

转载提高mysql千万级大数据SQL查询优化30条经验（Mysql索引优化注意）

转自http://blog.163.com/zhangjie_0303/blog/static/9908270620146951355834/1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：selec...

2016-11-16 18:19:00 75

diaochanglei2024的博客