1. NoSQL 概述
1、单机 MySQL 的年代
2、Memcached(缓存)+ Mysql + 垂直拆分(读写分离)
发展过程:优化数据结构和索引–>文件缓存(IO)–> Memcached(当时最热门的技术!)
3、分库分表 + 水平拆分 + MySQL集群
垂直是数据一致,水平业务分离,数据分离不一致
== 本质:数据库(读、写)==
早年MyISAM:表锁,十分影响效率!高并发下就会出现严重的问题
转战Innodb :行锁
慢慢的就开始使用分库分表来解决写的压力! --> MySQL表分区(未广泛使用)–> MySQL 集群
目前一个基本的互联网项目
为什么要用 NoSQL
用户的个人信息,社交网络,地理位置。用户自己产生的数据,用户日志等爆发式增长!
NoSQL 可以很好的处理以上的情况!
1.1 什么是 NoSQL
NoSQL
NoSQL = Not Only SQL (不仅仅是 SQL)
NoSQL 特点
1、方便拓展(数据之间没有关系,很好拓展!)
2、大数据高性能(Redis 一秒写8万次,读取11万,NoSQL的缓存记录级,是一种细粒度的缓存,性能会比较高!)
3、数据类型是多样性的!(不需要事先设计数据库,随取随用)
4、传统 RDBMS(关系型数据库)和 NoSQL
传统的 RDBMS
- 结构化组织
- SQL
- 数据和关系都存在单独的表中 row col
- 操作、数据库定义语言
- 严格的一致性
- 基础的事务
- …
NoSQL
- 不仅仅是数据
- 没有固定的查询语言
- 键值对存储,列存储,文档存储,图形数据库(社交关系)
- 最终一致性
- CAP定理和 BASE (异地多活)初级架构师
- 高性能,高可用,高可扩
- …
了解:3V + 3高
大数据时代的3V:主要是描述问题的
- 海量Volume
- 多样Variety
- 实时Velocity
大数据时代的3高:主要是对程序的要求
- 高并发
- 高可扩(随时水平拆分,机器不够了,可以拓展机器来解决)
- 高性能 (保证用户体验和性能)
真正在公司中的实践:NoSQL + RDBMS 一起使用才是最强的
1.2 NoSQL 的四大分类
KV键值对:
- 新浪:Redis
- 美团:Redis + Tair
- 阿里、百度:Redis + memecache
文档型数据库(bson (和 json一样))
- MongoDB(一般必须要掌握)
- MongoDB 是一个基于分布式文件存储的数据库, C++编写,主要用来处理大量的文档
- MongoDB 是一个介于RDBMS和NoSQL中间的产品,MongoDB是非关系型数据库中功能最丰富,最像关系型数据库的!
- ConthDB
列存储数据库
- HBase
- 分布式文件系统
图关系数据库
- 放的是关系,不是存图形,比如:朋友圈社交网络,广告推荐!
- Neo4j,InfoGrid;
四者对比
2. Redis入门
2.1 概述
Redis 是什么
Redis(Remote Dictionary Server)即:远程字典服务
Redis 能干嘛
1、内存存储、持久化,内存中是断电即失,所以说持久化很重要(RDB、AOF)
2、效率高,可用于高速缓存
3、发布订阅系统
4、地图信息分析
5、计时器、计数器(浏览量)
6、…
特性
1、多样的数据类型
2、持久化
3、集群
4、事务
…
2.2 Linux 下安装
Redis 配置文件
基本的环境安装
gcc-c++ 环境
[root@dixinkk redis-5.0.8]# yum install gcc-c++
[root@dixinkk redis-5.0.8]# gcc -v
[root@dixinkk redis-5.0.8]# make
[root@dixinkk redis-5.0.8]# make
[root@dixinkk redis-5.0.8]# make install
redis的默认安装路径:/usr/local/bin
新建文件夹存放 Redis 的配置文件
Redis默认不是后台启动的,修改配置文件
[root@dixinkk kuangconfig]# vim redis.conf
启动Redis服务
测试连通(使用redis客户端连接)
查看redis的进程是否开启
如何关闭redis服务
2.3 测试性能
redis-benchmark 是一个压力测试工具
官方自带的性能测试工具
redis-benchmar 命令参数
图片来自菜鸟教程
测试命令
[root@dixinkk bin]# redis-benchmark -h localhost -p 6379 -c 100 -n 100000
解读
2.4 基础知识
1、redis 默认有 16 个数据库,默认使用第0个,可以使用select进行切换
127.0.0.1:6379> select 3
OK
127.0.0.1:6379[3]> DBSIZE
(integer) 0
127.0.0.1:6379[3]>
2、查看数据库所有key
127.0.0.1:6379> keys *
1) "counter:__rand_int__"
2) "myset:__rand_int__"
3) "mylist"
4) "name"
5) "key:__rand_int__"
127.0.0.1:6379> get name
"dixinkk"
3、清除当前数据库 flushdb
清除所有数据库 flushall
Redis 是单线程的
(此处有问题,搜索下相关知识:redis 为什么快。IO多路复用机制)