mysql

最新推荐文章于 2024-09-15 08:03:51 发布
最新推荐文章于 2024-09-15 08:03:51 发布
阅读量49 收藏
点赞数
文章标签： 数据库 运维 操作系统
原文链接：https://segmentfault.com/a/1190000015900328
版权

一.安装mysql

yum install wget
wget http://repo.mysql.com/mysql57-community-release-el7-8.noarch.rpm
yum localinstall mysql57-community-release-el7-8.noarch.rpm
yum install mysql-server

启动服务

service mysqld start

刚刚安装好的mysql其实会有默认的数据库密码

cat /var/log/mysqld.log |grep password

获取密码之后，进入数据库

mysql -uroot -p

修改密码

set password = password('你要设置的密码')

在设置密码的过程很中有可能遇到一下设置密码错误的问题

ERROR 1819 (HY000): Your password does not satisfy the current policy requirements

遇到这种问题的原因是mysql会对你设置的密码有些要求，类似于要多少位啊，大小写啊这些。这个其实与validate_password_policy的值有关。详细的设置请参考（https://www.cnblogs.com/ivict...）

设置好密码之后就可以开始神奇的mysql之旅啦！

二：了解mysql复制，是实现高可用的基础

复制解决了什么问题
  • 实现了在不同服务器上的数据分布
  • 实现了数据读取的负载均衡
  • 增强了数据安全性
  • 实现了数据库高可用和故障切换
  • 实现了数据库的在线升级
在了解mysql复制之前，我们还是先了解下什么叫做二进制日志，他是mysql复制的关键
  • 二进制日志是存储在mysql的服务层中，它记录了所有对mysql数据库的修改事件，包括对数据库的增删改查事件和对表结构的修改事件
记录二进制日志有几种模式

我们先了解一下如何确定二进制日志的模式

show variables like 'binlog_format';

该命令可以设置当前mysql使用的二进制日志模式

set session binlog_format='statement';

该命令是设置mysql的模式，该命令是把二进制日志设置成了statement模式

插曲一
我在查找我的二进制日志的时候发现 ERROR 1381 (HY000): You are not using binary logging 目测是我的二进制日志的设置没有开启，需要找到mysql.ini文件

在mysqld配置项下面加上log_bin=mysql_bin以及server_id = 1(举个例子，在集群中该值不能重复)

clipboard.png

一开始我就是只设置了log_bin参数，没有设置server_id的参数，搞了半天还不行，渣渣伤不起

插曲二

找不到mysql的配置文件，数据保存的文件，日志文件等，如果是通过上述所说的步骤安装的话，前面提到的文件都会默认的在以下路径中

/etc/my.cnf #mysql的主配置文件
/var/lib/mysql #mysql数据库的数据库文件存放位置
/var/log #mysql数据库的日志输出存放位置
二进制日志记录模式的类型以及优缺点
  1. satement
  2. row
  • 它会记录下所有的行，比如update t set name = 'mm' where id in (2,3,4,5)。 他会在日志中记录update t set name = 'mm' where id = 2.....
  • 这个模式先会让日志文件变得很大，所有会有额外的参数帮忙来解决这个问题binlog_row_image = [FULL|MINIMAL|NOBLOB]
  • 一张表有20列，如果只修改一个列的数据，FULL 参数表示还是会记录所有列的数据
  • 一张表有20列，如果只修改一个列的数据，MINIMAL 参数表示只会记录修改列的数据（建议）
  • 一张表有20列，如果只修改了一个不是blob属性列的数据，NOBLOB 参数表示会记录所有除了blob属性列之外的所有数据
  1. mixed
  • 这种模式是混合的statement和row类型，储蓄的方式完全靠SQL自身去确定
mysql复制的原理
  1. 主数据库将变更写入二进制日志中
  2. 从数据库将读取主数据库的二进制日志并写入到relay_log(中继日志)中
  3. 在从数据库上将重现relay_log中的日志
  • 基于SQL段（statement）的日志是在从库上重新执行记录的SQL语句
  • 基于行（row）的日志则是在从库上直接应用对数据库行的修改
mysql复制之基于日志点复制

步骤：

在主数据库上建立复制账号

CREATE USER 'repl' @ 'IP段' IDENTIFIED BY 'password';

对账号进行授权，使该账号可以有复制的权利

GRANT REPLICATION SLAVE ON *.* TO 'repl' @ 'IP 段 '

对主数据库进行配置，在my.cnf文件中（前面有介绍）

log_bin=mysql-bin
server_id=XXX#这个值在整个集群中必须唯一

在从数据库中进行配置，也是在my.cnf文件中

log_bin=mysql-bin
server_id=XXX#这个值在整个集群中必须唯一
relay_log=mysql-bin#中继日志的名称
log_slave_update=on#[可选]意思是，是否将中继日志的内容也存放在本机的二进制日志中，如果该从库也要对另外一个集群作为主库的话，这个参数必须打开
read_only = on#[可选]

初始化从数据库的数据，其实就是数据备份，需要在主数据中执行一下命令

mysqldump --all-databases -uroot -p >all.sql

注：更多参数以后在补充

把备份好的数据库发送给从库所在的服务器上，如果主从的数据库数据已经一致，可以忽略这一步

scp all.sql（发送的文件） root@对方服务器:目标目录

在从库上启动复制链路

change master to master_host = 'master_host_ip',master_user = 'repl', master_password = 'xx', master_log_file = '主库的日志文件',master_log_pos='偏移量';

注意：
主库的日志文件名称和偏移量是在哪里找呢？可以在主库中使用

show master status;

clipboard.png

开启slave

start slave;

查看slave状态

show slave status;

插曲：
我在启动slave的过程中，发现并没有连接成功，在show slave status中看到一下错误

clipboard.png

分析了一下会发现主数据的服务器并没有给3306开放对外的端口

firewall-cmd --list-port #查看现在开放的端口有哪些
firewall-cmd --add-port=3306/tcp --permanent #添加3306为开放的端口
firewall-cmd --reload #重新刷新服务器开放的端口
mysql复制之基于GTID复制（版本>=5.6)
原理：
  1. 从库会告诉主库他已经执行完成的GTID值
  2. 主库会发送从库未执行事务的GTID值
  3. 这能保证同一个事务只在指定的从库执行一次
什么是GTID
  • GTID即全局事务ID，其保证为每一个在主库提交的事务在复制集群中都可以生成一个唯一的ID。
步骤：

在主数据库上建立复制账号，该步骤和基于日志点复制是一样的。所以不多做介绍

在主数据库中的配置，在基于日志点配置的基础上加上了

gtid-mode = on
enforce-gtid-consistency=on
log-slave-updates=on#mysql 5.7之后就不需要了

注意：在使用了enforce-gtid-consistency参数之后会对mysql有一些限制

  • 不能使用create table ....select 来创建表
  • 在事务中使用create temporary table建立临时表时，不能使用关联更新事务表和非事务表（我没试过，看文档时这么写的）

在从库中的配置,同样也是在基于日志点的复制配置基础上

gtid-mode = on
enforce-gtid-consistency=on
log-slave-updates=on#mysql 5.7之后就不需要了
read_only=read#[建议]
master_info_repository=table#[建议]
relay_log_info_repository=table#[建议]

最后的命令我们完成之后再补充

初始化从数据库，该过程和基于日志点的复制语句是一样的

启动基于GTID的复制

CHANGE MASTER TO MASTER_HOST=master_host_ip, MASTER_USER='repl', MASTER_PASSWORD='13659787422tt', MASTER_AUTO_POSITION=1;

剩下的步骤是和基于日志点的步骤是一样的

GTID 的优缺点
  • 优点：
  1. 可以很方便地进行故障转移
  2. 从库不会丢失主库的任何数据
  • 缺点：
  1. 故障处理比较复杂
  2. 对执行的SQL有一些限制

三.mysql复制性能优化

影响主从延迟的因素
  • 主库写入二进制日志的时间（解决办法：控制主库的事务大小，分割大事务）
  • 二进制日志传输时间，主要是二进制文件的大小（解决办法：二进制文件格式可以设为mixed，或者使用row的话，要记得设置set binlog_raw_image=minimal）

  • 默认情况下从库只有一个SQL线程，主库上并发的修改在从库上变成了串行（解决办法：使用多线程复制，以下是启动多线程的步骤，适用于版本>=5.7）

    1. stop slave (停止链路复制)
    2. set global slave_parallel_type='logical_clock' (确认以逻辑时钟方式启动多线程复制，我也暂时不同什么叫做逻辑时钟，以后再去讨论)
    3. set global slave_parallel_workers = 4(确认并发处理的线程数)
    4. start slave (开启链路复制)

四.利用MHA工具实现mysql高可用

MHA主从切换的过程
  1. 尝试从出现故障的主数据库保存二进制文件
  2. 从多个备选从服务器中选举出新的备选主服务器
  3. 在备选主服务器和其他从服务器之间同步差异二进制数据
  4. 应用从原来主数据库服务器上保存二进制日志，但是在这一步如果出现了主键的重复，将会导致故障转移的出错
  5. 提升备选主数据库服务器为新的数据库服务器
  6. 迁移集群中的其他从数据库服务器作为新的主数据库的从服务器
配置步骤
  • 首先说明的是MHA工具是可以支持基于GTID的复制和基于日志点的复制。在本次的练习中，我们也是基于GTID。

配置集群内所有主机的SSH免认证登陆

ssh-keygen

使用 ssh-keygen 命令之后，可以一直按回车键，当然，也可以根据个人需求来输入相关内容。最终，会生成 id_rsa 和 id_rsa.pub 两个文件。

然后，把本地的公钥添加到对方服务器的 /.ssh/authorized_keys 文件里。

ssh root@192.168.239.131 'mkdir -p .ssh && cat >> ~/.ssh/authorized_keys' < ~/.ssh/id_rsa.pub

这样设置之后，每次登录都不再需要输入密码了。

其他问题
可能因为某些操作之后，突然发现登录需要输入密码，但登录配置并没有任何修改的，通过检查发现 .ssh 目录的权限问题。最后，只需要重新修改权限就解决了。

chmod -R 700 .ssh

安装MHA-node软件包和MHA-manager软件包

安装MHA的依赖包，

在所有的服务器上

yum install perl-DBD-MySQL ncftp

在作为监控的服务器上，要需额外安装

yum -y install perl_Config_Tiny.noarch perl-Time-HiRes.x86_64 perl-Parallel-ForkManager perl-Log-Dispatch-perl.noarch perl-DBD-MySQL ncftp

注意：我是通过yum安装的，但是在yum的仓库并没有所有的安装包。其实，CentOS还有一个源叫做 EPEL (Extra Packages for Enterprise Linux)，为“红帽系”的操作系统提供额外的软件包，适用于RHEL、CentOS等，里面有1万多个软件，强烈建议安装。命令如下

yum install epel-release
yum update -y

安装好之后，再重新执行yum安装之前没有安装好的依赖包

建立主从复制集群

配置MHA管理节点，创建好一个专门存放MHA配置的文件夹，只需要在监管的服务器上设置即可

mkdir -p /etc/mha #我实践过程中mha配置文件存放的位置
mkdir -p /home/mysql_mha #mha工作目录，例如主库宕机了，用来存放主库的二进制文件

添加MHA所用到的账号，可以直接在主库上去添加，因为这样就可以同时同步到其他数据库上

grant all privileges on *.* to mha@'%' identified by '13659787422tt';

在MHA配置文件中进行配置

[server_default]
user = mha
password = 13659787422tt
manager_workdir = /home/mysql_mha
manager_log = /home/mysql_mha/manager.log
remote_workdir = /home/mysql_mha #需要在集群中的其他节点设置一样路径的目录
ssh_user = root#ssh免认证的用户，前面有设置好了，忘记了可以回头看看哦
repl_user = repl #用于数据库复制的账号和密码
repl_password = 13659787422tt
ping_interval = 1 #是用于监控服务器对master服务器检测是否正常的事件间隔，这里设置了1秒
master_binlog_dir = /var/lib/mysql #告诉监控服务器要去主数据库哪里获取二进制文件
secondary_check_script = #[可选]在安装好MHA时已经下载好的脚本，可以用于监控服务器多方面对master服务器进行连接检测，避免了一些网络的抖动引起主从切换
[server 1]
hostname = 192.168.239.129
candidate_master = 1 #该服务器是否用于作为主数据进行选举
[server 2]...#集群中有多少的服务器就相应设置多少
no_master = 1#不参与主数据的选举

clipboard.png

使用masterha_check_ssh和masterha_check_repl对配置进行检验
启动并检验MHA

masterha_check_ssh --conf=/etc/mha/mha.cnf

出现以下的显示，证明ssh检测成功

clipboard.png

masterha_check_repl --conf=/etc/mha/mha.cnf

出现以下的显示，证明MHA的配置成功

clipboard.png

现在就可以启动MHA了

nohup masterha_manager --conf=/etc/mha/mha.cnf #nohup是可以让程序后台运行

查看MHA的进程是否已经启动

ps -ef |grep masterha_manager

因为MHA是不能为主库创建虚拟IP的，所以需要收到到主库去创建虚拟IP，在之后的迁移中，虚拟IP就会主动得转移到新的主库中

因为我现在的主库是192.168.239.129，用以下命令创建虚拟IP

ifconfig ens33:1 192.168.239.90/24

ens33是对应的网卡（我理解的），根据自己的机器做相应的改动

clipboard.png

配置到这里MHA算是配置完成了。（未完）

weixin_34295316
关注
MySQL定期整理磁盘碎片
weixin_44976692的博客
01-23 2万+
通过本博客，我们深入探讨了为什么需要定期整理MySQL磁盘碎片，以及如何进行这一操作。合理使用这些方法可以有效提升数据库性能，确保系统长时间稳定运行。希望这些信息对读者在实际应用中有所帮助。在下一篇博客中，我们将继续探讨MySQL数据库的其他方面，敬请期待！
MySQL常规连接地址
郭宝的博客
04-24 3723
MySQL连接地址如下： jdbc:mysql://localhost:3306/ry?useUnicode=true&useJDBCCompliantTimezoneShift=true&useLegacyDatetimeCode=false&serverTimezone=PRC&characterEncoding=UTF8 注意：其中ry表示数据库的名称，需要修改为自己的数据库名称 ...
mysql5.7 gitd作用_MySQL5.7 GTID 浅析
weixin_42140846的博客
01-26 367
GTID 简介GTID (global transaction identifier)在MySQL5.6时引入，GTID是事务的全局唯一标识。GTID结构如下GTID = source_id:transaction_idsource_id:执行事务的原始实例的sever_uuid, 此事务GTID在备库apply时也不变。transaction_id:事务的执行编号，binlog_order_co...
mysql安装教程【安装版】
CY的博客
02-21 38万+
mysql安装教程【安装版】
安装mysql
weixin_46371752的博客
05-10 3462
一、到官网下载mysql 地址：https://dev.mysql.com/downloads/mysql/ 二、将mysql压缩包采访到要安装的文件夹中【我要安装到 D:\softwareAPP中】 三、在D:\softwareAPP\mysql-8.0.28-winx64 路径下新建data文件夹和my.ini文件 四、打开my.ini文件，进行如下配置 ，【下面是路径的，都改成你自己的路径】 [mysqld] # 设置3306端口 port=3306 # 设置mysql..
MySQL心得体会
weixin_50383598的博客
04-06 2万+
春风逝，烈阳照，四月匆匆来袭，针对上个月的MySQL学习做一个小的总结。 数据库运维是什么？准确来说我到现在也只停留在很浅显的认知，作为一名统计学专业的学员，我不具备计算机的基础知识、命令认知、硬件了解，但在逐渐的学习中我也在汲取计算机有关知识，努力让自己不显得那么狼狈。 学习的过程比想象中的要难，上课听不太懂，没法将所学知识串联，有的时候开小差，没有听到老师讲的知识点，这就导致了以后的学习无法顺利进行，使得学习起来十分困难，但老师也在鼓励我们只要坚持一切皆有可能，成长的过程，就是从一个熟悉的领域出发，
MySQL数据库忘记密码怎么办？教你一招
人生处处是围城，一切都是最好的安排！
09-23 8万+
MySql修改登录密码
MYSQL escape用法
依步_的专栏
03-17 7609
在sql like语句中，比如 select * from user where username like '%hello%'; select * from user where username like '_hello'; % 作为通配符匹配任意多个字符（含0个）； _ 作为通配符匹配一个字符。 那如果要查询username中含有 % 或 _ 的字符串，则需要使它们不再作为通配符。 需要在like语句中，对 % 和 _ 进行转义，以 _ 为例： 转义前： select * fro
MySQL安装配置教程（保姆级，包含环境变量的配置）适合小白
m0_63112274的博客
05-06 3万+
从0到1教你如何下载MySQL,并安装配置环境变量，一看就懂，适合小白
mysql分组排序
yangzsirr的博客
07-17 1万+
在平常开发中我们经常可能会遇到这样的问题，如在一个年级中，我们需要根据根据班级成绩排名，选出每个班前三名同学，那么这个地方就涉及到分组排序，那么对于mysql来说如何实现分组排序呢。 我们以学生表student为例，找出每个班成绩排名前三的同学姓名及成绩。 学生表： 在mysql低版本中不支持类似于sqlserver中row_number() over(partition by ...)等语句，那么只能采用变量的形式曲线救国。 select * from ( select x.cla.
mysql jdbc连接驱动jar包（适用于mysql5.7版本，亲测可用）
08-17
MySQL JDBC连接驱动是Java应用程序与MySQL数据库之间通信的桥梁，使得开发者可以使用Java语言来执行SQL语句，处理数据库中的数据。本驱动适用于MySQL 5.7版本，并且经过实际测试，确认可用。这个jar包是完全免费的，...
mysql-connector-java-8.0.27
12-24
MySQL Connector/J 8.0.27 是MySQL数据库与Java应用程序之间的重要桥梁，它是一个实现了JDBC（Java Database Connectivity）接口的驱动程序，允许Java开发者在应用中无缝地访问MySQL数据库。MySQL Connector/J使得...
mysql驱动jar 文件适用MySQL5.7
01-18
MySQL驱动jar文件是Java应用程序与MySQL数据库之间通信的关键组件，主要功能是提供Java Database Connectivity (JDBC) API，使得Java开发者能够通过编写Java代码来执行SQL语句，从而操作MySQL数据库。标题提到的...
mysql驱动（适用于mysql5.7版本）
12-07
MySQL驱动是Java应用程序连接到MySQL数据库的关键组件，它允许程序通过Java Database Connectivity (JDBC) API与MySQL服务器进行通信。本压缩包包含了两个适用于MySQL 5.7版本的驱动文件：`mysql-connector-java-...
MySQL安装配置教程（超级详细、保姆级）
热门推荐
Soloversion的博客
03-26 42万+
一、 下载MySQL Mysql官网下载地址https://downloads.mysql.com/archives/installer/ 1. 选择想要安装的版本，本篇文章选择的是5.7.31版本，下面的那个文件，点击Download下载 二、 安装MySQL 1. 选择设置类型 双击运行mysql-installer-community-5.7.31.0.msi 这里选择是自定义安装，所以直接选择“Custom”，点击“Next” “Developer Default”是开发者默认
4.网络编程
weixin_45476535的博客
09-14 453
程序注册端口：1024-49151。单个协议下，端口号不能冲突。公有端口0-1023。
【学习笔记】手写 Tomcat 三
LearnTech_123的博客
09-12 1105
响应动态资源不需要写文件名了，只需要写功能的名称即可。比如登录功能，可以定义名称为 doLogin
55 mysql 的登录认证流程
最新发布
970655147的专栏
09-15 810
这里我们来看一下 mysql 的认证的流程我们这里仅仅看 我们最常见的一个 认证的处理流程我们经常会登录的时候 碰到各种异常信息大概的流程是这样客户端和服务器建立连接之后, 服务器向客户端发送 salt然后 客户端根据 salt 将客户端传入的密码加密之后, 以及相关登录信息传递给服务器然后 服务器进行验证, 验证失败, 响应对应的错误信息给客户端服务器发送 salt 的信息如下客户端发送的认证请求如下服务器响应的认证失败信息如下。
110个oracle常用函数总结
m516387177的博客
09-12 821
nvl2 (expr1, expr2, expr3) ->expr1不为null，返回expr2；为null，返回expr3。nvl(expr1, expr2)->expr1为null，返回expr2；不为null，返回expr1。求最大值,all表示对所有的值求最大值,distinct表示对不同的值求最大值,相同的只取一次。求最小值,all表示对所有的值求最小值,distinct表示对不同的值求最小值,相同的只取一次。nullif (expr1, expr2) ->相等返回null，不等返回expr1。
MySQL 8.0.20 安装教程
"该资源是关于MySQL 8.0.20在Linux系统上的安装教程。" 在Linux环境中安装MySQL 8.0.20是一个系统性的过程，下面将详细介绍这个过程中的关键步骤： 1. 创建用户和组： 首先，需要创建一个名为`mysql`的用户组和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值