mysql
LSY_csdn_
交流请联系QQ:1174928874
展开
-
mysql性能调优——缓存命中率innodb_buffer_pool_size
1、简介:众所周知,系统读取数据时,从内存中读取要比从硬盘上速度要快好几百倍。故现在绝大部分应用系统,都会最大程度的使用缓存(内存中的一个存储区域),来提高系统的运行效率。MySQL数据库也不例外。在MySQL5.5之前,广泛使用的和默认的存储引擎是MyISAM。MyISAM使用操作系统缓存来缓存数据。InnoDB需要innodb buffer pool中处理缓存。所以非常需要有足够的Inno...原创 2020-02-27 11:28:01 · 4713 阅读 · 0 评论 -
ELK生态系统——shell脚本定时执行logstash命令同步增量数据到es
1、需求目的:关系型数据库与elasticsearch之间的数据同步可通过logstash实现,并且logstash可全量、增量同步数据。全量同步数据值需要手动执行一次即可,但是增量同步数据需要定时执行,logstash的配置conf配置文件中jdbc连接可以配置定时表达式,但是本人感觉不太直观,所以conf配置文件中不配置定时表达式,通过shell脚本定时执行logstash命令来完成定时增...原创 2019-07-03 21:24:14 · 1971 阅读 · 0 评论 -
RDBMS(关系型数据库)BLOB类型字段存储图片迁移问题完美解决方案
目录1、问题描述:2、问题查找:3、解决方法:(1)表输入:(2)执行SQL语句修改:1、问题描述:项目在RDBMS(关系型数据库)的mysql中使用BLOB类型字段存储了图片,由于需求问题,需要迁移图片到另外的一个RDBMS(关系型数据库)中去,思路是借助ETL工具kettle迁移数据,由于图片存储较大,kettle会比较耗费内存,设备内存不是特别的大,所以设置...原创 2019-07-03 08:38:14 · 1156 阅读 · 2 评论 -
ELK生态系统——增量数据从RDBMS到ES迁移
目录1、增量同步数据mysql到es思路:2、增量同步操作具体步骤:(1)创建mysql前置表:(2)创建logstash数据同步配置文件:A、配置jdbc连接mysql信息:B、配置时区编码SQL常用信息:C、配置定时增量同步数据信息:D、配置数据在es中存储index和type信息(附加):E、配置数据输出到elasticsearch的信息:log...原创 2019-06-12 08:28:34 · 359 阅读 · 0 评论 -
ELK生态系统——全量数据从RDBMS到ES迁移
目录1、手动全量导入数据:(1)创建*.conf格式配置文件:(2)修改*.conf文件格式:(3)部署*.conf文件到服务器:(4)后台运行*.conf文件迁移数据:(5)查看es中导入的数据:2、创建索引别名:注意:如果es中mappring是自己手动创建的那就没问题了,如果es中mappring自己不创建,需要es根据导入的数据自动创建,那么要检查要导...原创 2019-06-12 08:28:15 · 234 阅读 · 0 评论 -
常用关系型数据库(RDBMS)之间数据迁移解决方案
一、mysql到dm数据库迁移方案:将mysql的表结构先整合到oracle数据库中,再将oracle中表结构整合到dm中,最后通过Kettle配置作业将mysql中数据抽取到dm数据库中去;二、mysql到dm数据库迁移过程:1、表结构迁移:(1)通过esf_dbcv_pro.msi软件将mysql中表结构整合到oracle数据库中;(2)通过pl/Sql工具将oracl...原创 2019-06-15 16:21:29 · 1006 阅读 · 1 评论 -
linux服务器中安装mysql数据库及配置
目录(1)软件下载(2)上传文件(3)创建mysql用户及组(4)创建需要的目录(5)解压文件并移动(6)修改目录为mysql用户所有(7)mysql配置(8)设置环境变量:(9)设置开机启动:(10)初始化数据库(11)开放默认防火墙端口(12)登陆测试:(13)修改密码(1)软件下载下载地址:https://download...原创 2019-06-15 16:34:44 · 3021 阅读 · 0 评论 -
shell脚本备份mysql5.7.8以后数据库异常通过sendEmail25端口发邮件
目录1、安装sendEmail工具:2、查看sendEmail使用说明:(1)查看sendEmail帮助文档:(2)sendEmail使用基本参数:3、发送邮件命令demo:4、shell脚本发送邮件代码如下:(1)配置文件:(2)代码:(3)配置参数说明:(4)使用注意事项:1、安装sendEmail工具:操作见网址:https://blog...原创 2019-06-11 08:19:30 · 477 阅读 · 0 评论 -
shell脚本备份mysql5.7.8以后数据库异常通过mail465端口发邮件
shell脚本备份mysql5.7.8以后数据库异常通过mail465端口发邮件代码如下:1、配置文件:username=rootpassword=123456backupsFileStr=/dataBack/mysqlbackupsFileDay=7threadCounts=6mysqldumpStr=/usr/local/mysql/bin/mysqlpumpcopydb...原创 2019-06-11 08:19:12 · 314 阅读 · 0 评论 -
shell脚本备份mysql5.7.8以后数据库
shell脚本备份mysql5.7.8以后数据库代码如下:1、配置文件:username=rootpassword=123456backupsFileStr=/dataBack/mysqlbackupsFileDay=7threadCounts=6mysqldumpStr=/usr/local/mysql/bin/mysqlpumpcopydb=hebei,countryJg...原创 2019-06-10 08:29:14 · 242 阅读 · 0 评论 -
shell脚本备份mysql5.7.8以前数据库异常通过sendEmail25端口发邮件
目录1、安装sendEmail工具:2、查看sendEmail使用说明:(1)查看sendEmail帮助文档:(2)sendEmail使用基本参数:3、发送邮件命令demo:4、shell脚本发送邮件代码如下:(1)配置文件:(2)代码:(3)配置参数说明:(4)使用注意事项:1、安装sendEmail工具:操作见网址:https://blog...原创 2019-06-10 08:28:17 · 363 阅读 · 0 评论 -
shell脚本备份mysql5.7.8以前数据库异常通过mail465端口发邮件
shell脚本备份mysql5.7.8以前数据库异常通过mail465端口发邮件代码如下:1、配置文件:username=rootpassword=123456backupsFileStr=/wocloud/db/backupsbackupsFileDay=3mysqldumpStr=/usr/bin/mysqldumpcopydb=hebei,reportSystemsem...原创 2019-06-10 08:28:06 · 310 阅读 · 0 评论 -
shell脚本备份mysql5.7.8以前数据库
shell脚本备份mysql5.7.8以前数据库代码如下:1、配置文件:username=rootpassword=123456backupsFileStr=/wocloud/db/backupsbackupsFileDay=3mysqldumpStr=/usr/bin/mysqldumpcopydb=hebei,reportSystem2、代码:注意:不同linux...原创 2019-06-10 08:27:49 · 210 阅读 · 0 评论 -
Mysql主主复制汇总整理
目录一、Mysql主主、主从复制主要思路:1、mysql复制实质:2、Mysql主从复制:3、Mysql主主复制:二、Mysql主主复制操作步骤:1、在主库中创建从库登录的账号、密码,并对账号进行授权:2、修改mysql配置文件:A库配置文件增加以下配置信息:B库配置文件增加的配置信息:3、设置编码格式(否则中文容易出现乱码):4、重新启动mysql数据...原创 2018-01-11 14:08:01 · 451 阅读 · 1 评论