Mysql发展史
1、单机MySQL的年代
90年代,一个基本的网站访问量一般不会太大,更多的去使用静态网页 Html
,单个数据库完全足够,服务器根本没有太大的压力。
- 数据量如果太大、一台机器放不下了
- 数据的索引(B+ Tree),一台机器内存也放不下
- 访问量(读写混合),一台服务器承受不了
2、Memcached(缓存) + MySQL + 垂直拆分(读写分离)
网站80%的情况都是在读,每次都要去查询数据库的话就十分的麻烦,所以说我们希望减轻数据的压力,可以使用缓存
来保证效率!
发展过程:优化数据结构和索引 –> 文件缓存(IO)–> Memcached
3、分库分表 + 水平拆分 + MySQL集群
- 数据库的本质:(
读,写
) - 早些年的
MyIsam
:表锁,锁住整张表,十分影响效率,高并发下就会出现严重的锁问题。 - 后来转变
Innodb
:行锁,慢慢的就开始使用分库分表来解决写的压力! MySQL 当时推出了表分区
,但并没有受到广泛应用,MySQL 的集群,就很好的满足当时的所有需求。
4、 如今最近的年代
- 随着时代的发展,出现越来越多的新奇功能,例如
实时定位,音乐,热榜,播放量
,这都是需要实时更新的,并且数据量庞大的数据,这样MySQL 等关系型数据库就不够用了。 - MySQL 有的使用它来存储一些比较大的文件,博客,图片!数据库表很大,效率就低了,如果用一种数据库来专门处理这种数据,MySQL压力就变得十分小,大数据的IO压力下,表几乎没法更大。
- 类似用户的个人信息,社交网络,地理位置。这些由自己产生的数据,用户日志等等爆发式增长!这时候我们就需要使用NoSQL数据库的,Nosql 可以很好的处理以上的情况。
什么是Nosql
NoSQL = Not Only SQL
(不仅仅是SQL)- 关系型数据库:表格,行,列
- 泛指非关系型数据库的,随着
web2.0
互联网的诞生,传统的关系型数据库很难适用,尤其是超大规模的高并发的社区。 NoSQL
在当今大数据环境下发展的十分迅速,Redis
是很火热的,很多的数据类型例如用户的个人信息,社交网络,地理位置。这些数据类型的存储不需要一个固定的格式,不需要多余的操作就可以横向扩展(集群) 。
Nosql的特点
解耦!
- 方便扩展(数据之间没有关系,很好扩展!)
- 大数据量高性能(Redis 一秒写8万次,读取11万,NoSQL的缓存记录级,是一种细粒度的缓存,性能高)
- 数据类型是多样型的(不需要事先设计数据库,随取随用,如果是数据量十分大的表,很多人就无法设计了)
- 传统
RDBMS
和NoSQL
- 传统的RDBMS
1、结构化组织
2、SQL
3、数据和关系都存在单独的表中
4、row col- 操作操作,数据定义语言
5、严格的一致性- 基础的事务
- Nosql
1、不仅仅是数据
2、没有固定的查询语言
3、键值对存储,列存储,文档存储,图形数据库(社交关系)
4、最终一致性
5、CAP定理和BASE (异地多活:一个地方崩了,其他地方无影响)
6、高性能,高可用,高可扩
3V+3高
- 大数据时代的3V:主要是描述问题的
- 海量Volume
- 多样Variety
- 实时Velocity
- 3高:主要是对程序的要求
- 高并发
- 高可扩(随时水平拆分,机器不够了,可以扩展机器来)
- 高性能(保证用户体验和性能)
Nosql+RDBMS
关系型数据库+非关系型一起使用才是最强的!Nosql+RDBMS
关系型数据库+非关系型一起使用才是最强的!Nosql+RDBMS
关系型数据库+非关系型一起使用才是最强的!
Nosql的四大类型
-
KV
键值对:
新浪:Redis
美团:Redis + Tairbilibili
阿里、百度:Redis + memecach
-
文档型数据库(
bson
格式和json
一样):
MongoDB
:基于分布式文件存储的数据库,C++ 编写,主要用来处理大量的文档。MongoDB
:介于关系型数据库和非关系型数据中间的产品,MongoDB 是非关系型数据库中功能最丰富,最像关系型数据库的。ConthDB
- 列存储数据库
HBase
- 分布式文件系统
- 图关系数据库
- 他不是存图形,存放的是关系,如:朋友圈社交网络,广告推荐
Neo4j
,InfoGrid