mysql技术2--体系结构及基础管理

一.mysql体系结构

1.MySQL C/S结构介绍

1.1 两种连接方式：

	TCP/IP（远程、本地）：mysql -uroot -p123 -h 10.0.0.51 -P3306
	Socket（仅本地）：mysql -uroot -p123 -S /tmp/mysql.sock

1.2 MySQL实例的构成

实例： mysqld（守护进程）+  master thread   + 干活的Thread  + 预分配的内存

2.MySQL中mysqld服务器进程结构

2.1 SQL语句引入

结构化的查询语言
DQL   数据查询语言
DDL   数据定义语言
DML   数据操作语言
DCL   数据控制语言
mysql> select user,host from mysql.user;

2.2 连接层

（1） 提供连接协议
		Socket  
		TCPIP
（2） 验证用户名（root@localhost）密码合法性，进行匹配专门的授权表。

（3） 派生一个专用连接线程（接收SQL，返回结果）
	  mysql> show processlist;

2.3 SQL层（优化方面至关重要的）

（1）验证SQL语法和SQL_MODE
（2）验证语义
（3）验证权限
（4）解析器进行语句解析，生成执行计划（解析树）
（5）优化器（各种算法，基于执行代价），根据算法，找到代价最低的执行计划。
	代价：CPU  IO  MEM
（6）执行器按照优化器选择执行计划，执行SQL语句，得出获取数据的方法。
（7）提供query cache(默认不开)，一般不开，会用redis
（8）记录操作日志（binlog），默认没开

2.4 存储引擎层

真正和磁盘打交道的一个层次
根据SQL层提供的取数据的方法，拿到数据，返回给SQL，结构化成表，再又连接层线程返回给用户。

3.MySQL逻辑存储结构

库 											  ----》Linux目录
create database wordpress charset utf8mb4;    ----》mkdir /wordpress
show databases;							      ----》ls /
use wordpress;								  ----》cd /wordpress

表 											  ----》Linux的文件
列（字段） 										无
列属性											无
数据行（记录）								  ----》Linux数据行
表属性（元数据）							  ----》Linux 文件属性

4.MySQL物理存储结构

库： 使用FS上的目录来表示 
表： 
MyISAM(ext2)
 user.frm  ： 存储的表结构（列，列属性）
 user.MYD  :  存储的数据记录
 user.MYI  ： 存储索引
 
InnoDB(XFS)
 time_zone.frm ： 存储的表结构（列，列属性）
 time_zone.ibd ： 存储的数据记录和索引
 ibdata1       :   数据字典信息

 innodb 段 区 页
一般情况下（非分区表）
一个表就是一个段
一个段由多个区构成
一个区在（16k），64个连续的页，1M大小

二.mysql基础管理

1.用户和权限管理

1.1 作用

登录MySQL 
管理MySQL 

1.2 用户的定义

用户名@'白名单'

wordpress@'%'
wordpress@'localhost'
wordpress@'127.0.0.1'
wordpress@'10.0.0.%'
wordpress@'10.0.0.5%'
wordpress@'10.0.0.0/255.255.254.0'
wordpress@'10.0.%'

1.3 用户的操作

1.建用户
mysql> create user lbz@'10.0.0.%' identified by '123';
Query OK, 0 rows affected (0.00 sec)

说明：
8.0以前，可以自动创建用户并授权
mysql>  grant all on *.* to lsn@'10.0.0.%' identified by '123';

2.查询用户
mysql> select user,host from mysql.user;

3.修改用户密码
mysql> alter user lbz@'10.0.0.%' identified by '123456';


4.删除用户
mysql> drop user lbz@'10.0.0.%';

1.4 权限管理

1.权限列表
ALL 
SELECT,INSERT, UPDATE, DELETE, CREATE, DROP, RELOAD, SHUTDOWN, PROCESS, FILE, REFERENCES, INDEX, ALTER, SHOW DATABASES, SUPER, CREATE TEMPORARY TABLES, LOCK TABLES, EXECUTE, REPLICATION SLAVE, REPLICATION CLIENT, CREATE VIEW, SHOW VIEW, CREATE ROUTINE, ALTER ROUTINE, CREATE USER, EVENT, TRIGGER, CREATE TABLESPACE
with grant option（本地管理员具备，给别人授权的权限，加在语句的末尾）

2.授权命令
grant all on *.* to lsn@'10.0.0.%' identified by '123' with grant option;
语法:
grant 权限  on 作用目标  to 用户  identified by 密码 with grant option;

3.授权需求
1)创建一个管理员用户root，可以通过10网段，管理数据库.
grant all on *.* to root@'10.0.0.%' identified by '123' with grant option;
2)创建一个应用用户wordpress，可以通过10网段，wordpress库下的所有表进行SELECT,INSERT, UPDATE, DELETE.
grant SELECT,INSERT, UPDATE, DELETE on wordpress.* to wordpress@'10.0.0.%' identified by '123';

4.回收权限
show  grants for wordpress@'10.0.0.%';
mysql> revoke delete on wordpress.*  from 'wordpress'@'10.0.0.%';(回收delete权限）
mysql> show  grants for wordpress@'10.0.0.%';

5.关于生产中开用户
（1）如何沟通开用户
1. 是否有邮件批复
2. 对哪些库和表做操作
3. 做什么操作
4. 从什么地址来登录
（2）开发人员找你要root用户密码？
1. 走流程拒绝他
2. 如果是金融类的公司
	（1）原则上是不允许任何非DBA人员持有或申请root
	（2）如果有人私下索要root密码，即使举报。

2. 初始化配置

2.1 作用

(1)影响数据库的启动
(2)影响到客户端的功能

2.2 初始化配置的方法

(1)初始化配置文件(例如/etc/my.cnf) （常用）
(2)启动命令行上进行设置(例如:mysqld_safe  mysqld)
(3)预编译时设置(仅限于编译安装时设置)

2.3 初始化配置文件的书写格式

cat /etc/my.cnf
[标签]
xxx=xxx
[标签]
xxx=xxx

2.4 配置文件标签的归类

服务器端:
[mysqld]
[mysqld_safe]
[server]（不建议使用）

客户端: 
[mysql]
[mysqladmin]
[mysqldump]
[client](不建议使用）

2.5 配置文件设置样板(5.7)

vi /etc/my.cnf
#服务器端配置
[mysqld]
#用户
user=mysql   
#软件安装目录                
basedir=/application/mysql  
#数据路径
datadir=/data/mysql/data 
#socket文件位置
socket=/tmp/mysql.sock
#服务器id号（1-65535）
server_id=6
#端口号
port=3306
#客户端配置
[mysql]
#socket文件位置
socket=/tmp/mysql.sock（必须和服务器端一致）
配置完重启
[root@db01 ~]#/etc/init.d/mysqld start
socket文件是启动完生效的

2.6 配置文件读取顺序

[root@db01 ~]# mysqld --help --verbose |grep my.cnf
/etc/my.cnf /etc/mysql/my.cnf /usr/local/mysql/etc/my.cnf ~/.my.cnf 
(读取以最后的为准）

2.7 强制使用自定义配置文件

defautls-file 
[root@db01 tmp]#cp /etc/my.cnf /tmp/aa.txt
[root@db01 tmp]#vim aa.txt
socket=/tmp/mysql/sock1
[root@db01 tmp]#pkill mysqld
[root@db01 tmp]# mysqld_safe --defaults-file=/tmp/aa.txt &
[root@db01 tmp]# ll
[root@db01 tmp]#pkill mysqld(恢复原样）
[root@db01 tmp]#/etc/init.d/mysqld start

3. MySQL的连接管理

3.1 mysql 命令

注意:提前应该将用户授权做好
mysql> grant all on *.* to root@'10.0.0.%' identified by '123';
TCPIP :
mysql -uroot -p -h 10.0.0.51 -P3306 （可以不加-P，但是有-P的时候一定要有-h）
问题：区分本地登录和远程登陆
mysql>show processlist;
远程：主机名
本地：localhost
Socket  
mysql -uroot -p -S /tmp/mysql.sock

问题：mysql -uroot -p -S /tmp/mysql.sock -h 10.0.0.51 -P3306是本地登录还是远程登陆
mysql>show processlist;是远程登陆。

3.2 客户端工具

sqlyog
navicat

4. 多实例管理

4.1 准备多个目录

mkdir -p /data/330{7,8,9}/data

4.2 准备配置文件

cat > /data/3307/my.cnf <<EOF
[mysqld]
basedir=/application/mysql
datadir=/data/3307/data
socket=/data/3307/mysql.sock
log_error=/data/3307/mysql.log
port=3307
server_id=7
log_bin=/data/3307/mysql-bin
EOF

cat > /data/3308/my.cnf <<EOF
[mysqld]
basedir=/application/mysql
datadir=/data/3308/data
socket=/data/3308/mysql.sock
log_error=/data/3308/mysql.log
port=3308
server_id=8
log_bin=/data/3308/mysql-bin
EOF

cat > /data/3308/my.cnf <<EOF
[mysqld]
basedir=/application/mysql
datadir=/data/3308/data
socket=/data/3308/mysql.sock
log_error=/data/3308/mysql.log
port=3308
server_id=8
log_bin=/data/3308/mysql-bin
EOF

4.3 初始化三套数据

mv /etc/my.cnf /etc/my.cnf.bak
mysqld --initialize-insecure  --user=mysql --datadir=/data/3307/data --basedir=/application/mysql
mysqld --initialize-insecure  --user=mysql --datadir=/data/3308/data --basedir=/application/mysql
mysqld --initialize-insecure  --user=mysql --datadir=/data/3309/data --basedir=/application/mysql

4.4 systemd管理多实例

cd /etc/systemd/system
cp mysqld.service mysqld3307.service
cp mysqld.service mysqld3308.service
cp mysqld.service mysqld3309.service

vim mysqld3307.service
# 修改为:
ExecStart=/application/mysql/bin/mysqld  --defaults-file=/data/3307/my.cnf
vim mysqld3308.service
# 修改为:
ExecStart=/application/mysql/bin/mysqld  --defaults-file=/data/3308/my.cnf
vim mysqld3309.service
# 修改为:
ExecStart=/application/mysql/bin/mysqld  --defaults-file=/data/3309/my.cnf

[root@db01 system]# grep "ExecStart" mysqld3309.service
ExecStart=/application/mysql/bin/mysqld --defaults-file=/data/3309/my.cnf
[root@db01 system]# grep "ExecStart" mysqld3308.service
ExecStart=/application/mysql/bin/mysqld --defaults-file=/data/3308/my.cnf
[root@db01 system]# grep "ExecStart" mysqld3307.service
ExecStart=/application/mysql/bin/mysqld --defaults-file=/data/3307/my.cnf
[root@db01 system]# 

4.5 授权

chown -R mysql.mysql /data/*

4.6 启动

systemctl start mysqld3307.service
systemctl start mysqld3308.service
systemctl start mysqld3309.service

4.7 验证多实例

netstat -lnp|grep 330
mysql -S /data/3307/mysql.sock -e "select @@server_id"
mysql -S /data/3308/mysql.sock -e "select @@server_id"
mysql -S /data/3309/mysql.sock -e "select @@server_id"


连接
mysql -S /data/3307/mysql.sock
mysql -S /data/3308/mysql.sock
mysql -S /data/3309/mysql.sock