Linux系统——数据库Mysql

数据库的建立和维护功能：需要创建数据库、数据表、数据（修建大楼需要的蓝图，蓝图就是数据库的建立；维护就是修建大楼是否安全、稳固）包括建立数据库的结构和数据的录入与转换、数据库的转储与恢复、数据库的重组与性能监视等功能。
数据定义功能：定义数据库字段结构等（修建大楼的设计蓝图就是数据定义，其中蓝图定义了整个大楼的布局结构，有多少层、房间布局、房间大小）包括定义全局数据结构、局部逻辑数据结构、存储结构、保密模式及信息格式等功能。保证存储在数据库中的数据正确、有效和相容，以防止不合语义的错误数据被输入或输出。
数据操纵功能：修改数据，数据的定义就是属于数据操纵功能（大楼修建好后，客户对自己的房间进行安置，部署，打扫房间卫生等都属于数据操纵）包括数据查询统计和数据更新两个方面。
数据库的运行管理功能：数据库管理员对数据库的运维操作（大楼修建好后，有客户入住，要相对应的物业入驻，物业就属于对数据库的运行管理）这是数据库管理系统的核心部分，包括并发控制，存取控制、数据库内部维护等功能。
通信功能：数据库要和应用程序进行对接，可以和应用程序互相通信（数据库回应客户需求信息给Tomcat应用程序，Tomcat应用程序将数据返回给客户端）DBMS与其他软件系统之间的通信。

6.数据库系统

数据库系统是一个人机系统，由硬件、OS、数据库、DBMS、应用软件和数据库用户组成；用户可以通过DBMS或应用程序操作数据库，也可以通过应用程序操作数据库。

应用程序是利用DBMS为解决某个具体的管理或数据处理的任务而编制的一系列命令的有序集合。如果应用程序比较完善，能够提供友好的人机界面，并编译成可执行文件发行，使得普通用户不需要具备计算机的专业知识，在较短时间就学会使用，那么就称为数据库应用软件。

常用的数据库应用软件：人事管理、财务管理、图书管理等信息管理软件及各类信息咨询系统等

6.1数据库系统架构

单机架构
大型主机/终端架构
主从式架构（C/S）
分布式架构

6.2数据库管理员——DBA

数据库管理员（DatabaseAdministrator，DBA）负责数据库的更新和备份、数据库系统的维护、用户管理等工作，保证数据库系统的正常运行。

DBA一般由业务水平较高、资历较深的人员担任

7.各种数据库管理系统

7.1层次数据库

7.2网状数据库

7.3DBMS数据库管理系统工作模式

接收应用程序的数据请求和处理请求
将用户的数据请求（高级指令）转换为复杂机器代码（底层指令）
实现对数据库的操作
从数据库的操作中接收查询结果
对查询结构进行处理（格式转换）
将处理结果返回给用户

二、Mysql历史

MySQL的历史可以追溯到1979年，它的创始人叫作Michael Widenius，他在开发一个报表工具的时候，设计了一套API，后来他的客户要求他的API支持sql语句，他直接借助于mSQL（当时比较牛）的代码，将它集成到自己的存储引擎中。但是他总是感觉不满意，萌生了要自己做一套数据库的想法。

直到1996年，MySQL 1.0发布，Michael Widenius的大女儿的简称就是MY，Michael Widenius大概也是把MySQL当成自己的女儿一样来对待.仅仅过了几个月的时间，1996年10月MySQL 3.11.1当时发布了Solaris的版本，一个月后，linux的版本诞生，从那时候开始，MySQL慢慢的被人所接受。

1999年，Michael Widenius成立了MySQL AB公司，MySQL由个人开发转变为团队开发，2000年使用GPL协议开源。

2001年，MySQL生命中的大事发生了，那就是存储引擎InnoDB的诞生！Oracle在2005年收购了InnoDB，只不过InnoDB一直以来都只能作为第三方插件供用户选择。直到现在，MySQL可以选择的众多存储引擎中，InnoDB依然是第一选择

2008年1月，MySQL AB公司被Sun公司以10亿美金收购，MySQL数据库进入Sun时代。Sun为MySQL的发展提供了绝佳的环境，2008年11月，MySQL 5.1发布，MySQL成为了最受欢迎的小型数据库。

2009年4月，Oracle公司以74亿美元收购Sun公司，MySQL也随之进入Oracle时代。

2010年12月，MySQL 5.5发布，Oracle终于把InnoDB做成了MySQL默认的存储引擎，MySQL从此进入了辉煌时代。

然而，从那之后，Oracle对MySQL的态度渐渐发生了变化，Oracle虽然宣称MySQL依然尊少GPL协议，但却暗地里把开发人员全部换成了Oracle自己人，开源社区再也影响不了MySQL发展的脚步，真正有心做贡献的人也被拒之门外，MySQL随时都有闭源的可能……看着自己辛苦养大的MySQL被Oracle搞成这样，Michael Widenius非常失望，决定在MySQL走向闭源前，将MySQL进行分支化，依然是使用了自己小女儿的名字MariaDB（玛莉亚DB）。MariaDB数据库管理系统是MySQL的一个分支，主要由开源社区在维护，采用GPL授权许可 MariaDB的目的是完全兼容MySQL，包括API和命令行，使之能轻松成为MySQL的代替品。在存储引擎方面，使用XtraDB来代替MySQL的InnoDB。MariaDB由MySQL的创始人Michael Widenius主导，由开源社区的大神们进行开发。因此，大家都认为，MariaDB拥有比MySQL更纯正的MySQL血脉。最初的版本更新与MySQL同步，相对MySQL5以后的版本，MariaDB也有相应的5.1~5.5的版本。后来MariaDB终于摆脱了MySQL，它的版本号直接从10.0开始，以自己的步伐进行开发，当然，还是可以对MySQL完全兼容。

1979年：TcX公司 Monty Widenius，Unireg
1996年：发布MySQL1.0，Solaris版本，Linux版本
1999年：MySQL AB公司，瑞典
2003年：MySQL 5.0版本，提供视图、存储过程等功能
2008年：Sun公司以10亿美元收购MySQL
2009年：Oracle公司以 74 亿美元收购 sun 公司
2009年：Monty成立MariaDB

1.第一代数据库

自20世纪60年代起，第一代数据库系统问世，第一代数据库是层次模型与网状模型的数据库系统，为统一管理和共享数据提供了有力的支撑

层次模型与网状模型代表产品时1969年IBM公司研制的层次模型数据库管理系统IMS

2.第二代数据库

20世纪70年代初，第二代数据库——关系数据库开始出现；20世纪80年代初，IBM公司的关系数据库系统DB2问世，开始逐步取代层次与网状模型的数据库，成为行业主流。

到目前为止，关系数据库仍占领数据库应用的主要地位。1970年IBM公司的研究员E.F.Codd提出了关系模型，其代表产品为sysem R 和 Inges

3.第三代数据库

自20世纪80年代开始，适应不同领域的新型数据库系统不断涌现，面向对象的数据库系统，实用性强、适应面广；

20世纪90年代后期，形成了多种数据库系统共同支撑应用的局面。第三代数据库其实就是关系型数据库和非关系型数据库的组成，非关系型数据库Redis先将数据进行缓存，慢慢地将数据传输到Mysql关系型数据库中；非关系型数据库可以接收高并发，是因为其数据都存储在内存中

一些新的元素被添加进主流数据库系统中，例如Oracle支持的“关系-对象”数据库模型；

时序数据库，按照时间进行顺序排列，例如天气预报就是使用的时序数据库

Mysql三大主要分支

mysql
mariadb
percona Server

Mysql：https://www.mysql.com/

Mariadb：http://mariadb.org/

Percona Server：https://www.percona.com

版本演变：

MySQL：5.1 --> 5.5 --> 5.6 --> 5.7 ----->6.0 - --->7.0 --> 8.0

MariaDB：5.1 -->5.5 -->10.0--> 10.1 --> 10.2 --> 10.3 --> 10.4 --> 10.5

MySQL被Sun收购后，搞了个过渡的6.0版本，没多久就下线了,后来被Oracle收购后，终于迎来了像样的5.6版本，之后就是5.7、8.0版本。由于6.0版本号已被用过，7.x系列版本专用于NDB Cluster，因而新版本号从8.0开始

三、关系型数据库和非关系型数据库

1.RDBMS 关系型数据库

Relational Database Management System,关系模型最初由IBM公司的英国计算机科学家埃德加·科德(Edgar F. Codd)于1969年描述,1974年，IBM开始开发系统R，这是一个开发RDBMS原型的研究项目。然而，第一个商业上可用的RDBMS是甲骨文，于1979年由关系软件（现为甲骨文公司）发布。

1.1关系型数据库相关概念

关系数据库系统是基于关系模型的数据库系统，关系模型的数据结构使用简单易懂的二维数据表，关系模型可用简单的“实体-关系”（E-R）图来表示，E-R图中包含了实体（数据对象）、关系和属性三个要素

关系Relational ：关系就是二维表，其中：表中的行、列次序并不重要
行row：表中的每一行，又称为一条记录record
列column：表中的每一列，称为属性，字段，域field
主键Primary key：PK , 用于惟一确定一个记录的字段，一张表只有一个主键
域domain：属性的取值范围，如，性别只能是'男'和'女'两个值，人类的年龄只能0-150

关系数据库的存储结构是二维表格；在每个二维表中，每一行称为一条记录，用来描述一个对象的信息；每一列称为一个字段，用来描述对象的一个属性

1.2常用关系型数据库

MySQL: MySQL, MariaDB, Percona Server（甲骨文公司收购）免费、开源、体积小
PostgreSQL: 简称为pgsql，EnterpriseDB
Oracle（甲骨文公司产品）面向所有主流平台，安全、完善、操作复杂
MSSQL
DB2（IBM公司产品）面向所有主流平台，大型、安全、完善
SQL Server（微软公司产品）面向WIndows操作系统，简单、易用

数据库排名：DB-Engines Ranking - popularity ranking of database management systems

1.3关系数据库应用

关系型数据库	应用举例
Oracle、Mysql	12306用户信息系统
SQLServer、Sybase	淘宝账号系统
Informix、access	联通手机号信息系统
DB2、FoxPRO	银行用户账号系统
PostgreSQL	网站用户信息系统

1.4关系型数据库优点

易于维护：都是使用表结构，格式一致
使用方便：SQL语言通用，可用于复杂查询
复杂操作：支持SQL，可用于一个表以及多个表之间非常复杂的查询

1.5关系型数据库缺点

读写性能比较差，尤其是海量数据的高效率读写
固定的表结构，灵活度稍欠
高并发读写需求，传统关系型数据库来说，硬盘I/O是一个很大的瓶颈

2.关系型数据库理论

2.1实体联系模型E-R

实体Entity：也称为实例，客观存在并可以相互区分的客观事物或抽象事件称为实体,在E-R图中用矩形框表示实体，把实体名写在框内，对应现实世界中可区别于其他对象的“事件”或“事物”（银行客户、银行账户）
属性：实体所具有的特征或性质，一个实体可以有多个属性（银行客户实体集中的每个实体均具有姓名、电话等信息）
联系：联系是实体集之间的关联集合，是客观存在的应用链，也称为关系（银行客户和账户之间存在“储蓄“的关系）
实体内部的联系：指组成实体的各属性之间的联系。
实体之间的联系：指不同实体之间联系。例：学生选课实体和学生基本信息实体之间
实体之间的联系用菱形框表示

所有实体及实体之间联系的集合构成一个关系数据库

2.2联系类型

一对一联系(1:1)
一对多联系(1:n)：外键
多对多联系(m:n)：增加第三张表

2.3数据的操作

数据提取：在数据集合中提取感兴趣的内容。SELECT
数据更新：变更数据库中的数据。INSERT、DELETE、UPDATE

2.4数据库规划流程

收集数据，得到字段
收集必要且完整的数据项
转换成数据表的字段

3.非关系型数据库

3.1非关系型数据库定义

非关系型数据库也被称作NoSQL（Not Only SQL），存储数据不以关系模型为依据，不需要固定的表格式；适用于对关系很明确的数据建立模型、定义、存储数据，存储海量数据，给与”大数据“进行分析，筛选出有价值的部分。

非关系型数据库严格上不是一种数据库，应该是一种数据结构化存储方法的集合，可以是文档或者键值对等。

3.2非关系型数据库优点

格式灵活，应用场景广泛
数据库可高并发读写
对海量数据高效率存储与访问
数据库具有高扩展性与高可用性

3.3非关系型数据库缺点

不提供sql支持，学习和使用成本较高
无事务处理
数据结构相对复杂，复杂查询方面稍欠（数据表内容要一致）

3.3常用的非关系型数据库

Memcached
Redis
MongoDB
HBase

Redis持久化方式：以键值存储数据，数据保存在内存中，但会定期将数据写入磁盘（持久化方式）

四、安装Mysql

Mysql是一款Oracle旗下深受欢迎的开源关系型数据库，其遵守GPL协议，可以免费使用与修改

Mysql数据库特点：

性能卓越、服务稳定
开源、无版权限制、成本低
多线程、多用户
基于C/S（客户端/服务端）架构
安全可靠

编译安装

[root@localhost ~]#yum install gcc gcc-c++ ncurses ncurses-devel bison cmake -y
#gcc \                  #解包的工具
#gcc-c++ \              #解包的工具
#ncurses \				#字符终端下图形互动功能的动态库
#ncurses-devel \	    #ncurses开发包
#bison \				#语法分析器
#cmake					#mysql需要用cmake编译安装

[root@localhost ~]#useradd -s /sbin/nologin mysql
##创建程序用户管理

#准备软件包mysql-5.7.17.tar.gz  boost_1_59_0.tar.gz（boost是建设数据包）
[root@localhost ~]#tar zxvf mysql-5.7.17.tar.gz -C /opt
[root@localhost ~]#tar zxvf boost_1_59_0.tar.gz -C /usr/local/
[root@localhost ~]#mv /usr/local/boost_1_59_0 /usr/local/boost
[root@localhost ~]#cd /opt/mysql-5.7.17/

[root@localhost mysql-5.7.17]#cmake \
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \
-DSYSCONFDIR=/etc \
-DSYSTEMD_PID_DIR=/usr/local/mysql \
-DDEFAULT_CHARSET=utf8  \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_EXTRA_CHARSETS=all \
-DWITH_INNOBASE_STORAGE_ENGINE=1 \
-DWITH_ARCHIVE_STORAGE_ENGINE=1 \
-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \
-DWITH_PERFSCHEMA_STORAGE_ENGINE=1 \
-DMYSQL_DATADIR=/usr/local/mysql/data \
-DWITH_BOOST=/usr/local/boost \
-DWITH_SYSTEMD=1


#cmake \
#-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \		#指定mysql的安装路径
#-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \ #指定mysql进程监听套接字文件（数据库连接文#件）的存储路径
#-DSYSCONFDIR=/etc \                             #指定配置文件的存储路径
#-DSYSTEMD_PID_DIR=/usr/local/mysql \            #指定进程文件的存储路径
#-DDEFAULT_CHARSET=utf8  \                       #指定默认使用的字符集编码，如 utf8
#-DDEFAULT_COLLATION=utf8_general_ci \			#指定默认使用的字符集校对规则
#-DWITH_EXTRA_CHARSETS=all \						#指定支持其他字符集编码
#-DWITH_INNOBASE_STORAGE_ENGINE=1 \              #安装INNOBASE存储引擎
#-DWITH_ARCHIVE_STORAGE_ENGINE=1 \               #安装ARCHIVE存储引擎 
#-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \             #安装BLACKHOLE存储引擎 
#-DWITH_PERFSCHEMA_STORAGE_ENGINE=1 \            #安装FEDERATED存储引擎 
#-DMYSQL_DATADIR=/usr/local/mysql/data \         #指定数据库文件的存储路径
#-DWITH_BOOST=/usr/local/boost \                 #指定boost的路径，若使用mysql-boost集成包#安装则
#-DWITH_BOOST=boost
#-DWITH_SYSTEMD=1								#生成便于systemctl管理的文件

#注意：如果在CMAKE的过程中有报错，当报错解决后，需要把源码目录中的CMakeCache.txt文件删除，然后再重新CMAKE，否则错误依旧

[root@localhost mysql-5.7.17]#make
[root@localhost mysql-5.7.17]#make install
[root@localhost mysql-5.7.17]#chown -R mysql:mysql /usr/local/mysql/
#更改管理主/组
[root@localhost mysql-5.7.17]#chown mysql:mysql /etc/my.cnf
#为了mysql服务启用的时候可以调用my.cnf配置
[root@localhost mysql-5.7.17]#vim /etc/my.cnf
#修改配置文件   进入/etc/my.cnf配置后  先删除原有的配置  再键入新的配置内容
[client]									
port = 3306
default-character-set=utf8
socket=/usr/local/mysql/mysql.sock	

[mysql]									
port = 3306
default-character-set=utf8
socket=/usr/local/mysql/mysql.sock
auto-rehash

[mysqld]
user = mysql 
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
port = 3306	
character-set-server=utf8
pid-file = /usr/local/mysql/mysqld.pid
socket=/usr/local/mysql/mysql.sock
bind-address = 0.0.0.0
skip-name-resolve
max_connections=2048
default-storage-engine=INNODB
max_allowed_packet=16M
server-id = 1
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_AUTO_VALUE_ON_ZERO,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,PIPES_AS_CONCAT,ANSI_QUOTES




[client]									#客户端设置
port = 3306
socket=/usr/local/mysql/mysql.sock			

[mysqld]									#服务全局设置
user = mysql       							#设置管理用户
basedir=/usr/local/mysql					#指定数据库的安装目录
datadir=/usr/local/mysql/data				#指定数据库文件的存储路径
port = 3306									#指定端口
character-set-server=utf8					#设置服务器字符集编码格式为utf8
pid-file = /usr/local/mysql/mysqld.pid		#指定pid 进程文件路径
socket=/usr/local/mysql/mysql.sock			#指定数据库连接文件
bind-address = 0.0.0.0						#设置监听地址，0.0.0.0代表允许所有，如允许多个IP需空格隔开
skip-name-resolve							#禁用DNS解析
max_connections=2048						#设置mysql的最大连接数
default-storage-engine=INNODB				#指定默认存储引擎
max_allowed_packet=16M						#设置数据库接收的数据包大小的最大值
server-id = 1								#指定服务ID号

sql_mode常用值如下:
NO_ENGINE_SUBSTITUTION
如果需要的存储引擎被禁用或未编译,那么抛出错误。不设置此值时,用默认的存储引擎替代,并抛出一个异常

STRICT_TRANS_TABLES
在该模式下,如果一个值不能插入到一个事务表中,则中断当前的操作,对非事务表不做限制

NO_AUTO_CREATE_USER
禁正GRANT创建密码为空的用户

NO_AUTO_VALUE_ON_ZERO
mysql中的自增长列可以从O开始。默认情况下自增长列是从1开始的，如果你插入值为0的数据会报错

NO_ZERO_IN_DATE
不允许日期和月份为零

NO_ZERO_DATE
mysql数据库不允许插入零日期,插入零日期会抛出错误而不是警告

ERROR_FOR_DIVISION_BY_ZERO
在INSERT或UPDATE过程中，如果数据被零除，则产生错误而非警告。默认情况下数据被零除时MysQL返回NULL

PIPES_As_CONCAT
将"||"视为字符串的连接操作符而非或运算符，这和Oracle数据库是一样的，也和字符串的拼接函数Concat相类似

ANSI_QUOTES
启用ANSI_QUOTES后，不能用双引号来引用字符串，因为它被解释为识别符


[root@localhost mysql-5.7.17]#echo "PATH=$PATH:/usr/local/mysql/bin" >> /etc/profile
#设置环境变量  将mysql/bin文件追加到 /etc/profile之后  便于系统识别
[root@localhost mysql-5.7.17]#source /etc/profile
#刷新环境变量
[root@localhost mysql-5.7.17]#tail /etc/profile

[root@localhost mysql-5.7.17]#cd /usr/local/mysql/bin/
[root@localhost bin]#./mysqld \
--initialize-insecure \
--user=mysql \
--basedir=/usr/local/mysql \
--datadir=/usr/local/mysql/data




./mysqld \
--initialize-insecure \				#生成初始化密码为空
--user=mysql \                      #指定管理用户
--basedir=/usr/local/mysql \        #指定数据库的安装目录
--datadir=/usr/local/mysql/data		#指定数据库文件的存储路径


[root@localhost bin]#cp /usr/local/mysql/usr/lib/systemd/system/mysqld.service /usr/lib/systemd/system/
[root@localhost bin]#systemctl daemon-reload
#刷新systemd管理的服务  识别mysqld服务
[root@localhost bin]#systemctl start mysqld.service
[root@localhost bin]#systemctl enable mysqld
[root@localhost bin]#netstat -anpt | grep 3306
或者lsof -i:3306


[root@localhost bin]#mysqladmin -u root -p password "123456"
#设置Mysql初始化密码  执行该命令后直接按回车即可
[root@localhost bin]#mysql -u root -p123456
#登入数据库

1.Show databases——查看数据库内的内容

存放了数据库的用户信息，以及一些登录密码等

2.Use——切换数据库（类似于cd命令）

3.Show tables——查看数据表

五、总结

1.描述主流的数据库系统

主流的数据库系统是关系型数据库和非关系型数据库的结合，也就是第三代数据库，可以处理海量的并发量

关系型数据库是使用SQL语句进行查询，SQL语句查询需要数据库管理

关系型数据库：Mysql（Oracle公司）、SQL Server（微软），access（微软公司office产品）、Oracle、DB2（IBM公司）、sybase（sybase）等等PostgreSQL数据库

2.数据库管理系统DBMS 客户端获取数据过程

接收应用程序的数据请求和处理请求
将用户的数据请求（高级指令）转换为复杂机器代码（底层指令）
实现对数据库的操作
从数据库的操作中接收查询结果
对查询结构进行处理（格式转换）
将处理结果返回给用户

简单来讲就是客户端发送请求，需要调用数据库的数据，数据库管理系统收到该请求，由于用户的请求是高级语言（高级指令）数据库并不能够识别，数据库管理系统将高级语言（高级指令）转化为数据库可以识别的机器代码（底层指令），数据库操管理系统对数据库进行操作，从数据库中进行调度客户端所需求的结果，数据库管理系统对在数据库中查询到的结果进行处理（格式转换），将数据库反馈的（底层指令）转换为客户端可以查看的高级语言（高级指令），最后将处理结果反馈给客户