为什么要用Nosql
早期模型
早期一个基本的网站访问量一般不会太大,单个数据库足够了。而且早期更多的使用的是静态的html网页,服务器压力很小,但是问题随之而来:这种网站的瓶颈是什么?
- 数据量很大的时候,一个机器放不下。
- 如果一个一个表的数据超过了300万,那么就一定要建立索引(B+Tree)了,如果索引太大了,一个机器内存也放不下
- 访问了(读写混合),一个服务器承受不了
只要有了以上三种情况之一,那么必须要进行架构升级
Memcached(缓存)+Mysql+垂直拆分 (读写分离)
网站80%的情况都是读操作,每次去查询数据库就很麻烦,所以我们希望减轻数据的压力,可以使用缓存来保证效率。
发展过程:优化数据结构和索引——>文件缓存(IO)——>Memcached(当时最热门的技术!)
分库分表+水平拆分+MYSQL集群
早些年MyISAM :表锁,十分影响效率,在高并发的情况下就会出现严重的锁问题。
转战Innodb:行锁
开始使用分库分表来解决写的压力
当今年代
2010–2020十年之间,世界已经发生了翻天覆地的变化;(定位,也是一种数据,音乐,热榜!)
MySQL等关系型数据库就不够用了!数据量很多,变化很快~!
MySQL有的使用它来存储一些比较大的文件,博客,图片!数据库表很大,效率就低了!如果有一种数据库来专门处理这种数据,MySQL压力就变得十分小,
为什么要用NoSQL
用户的个人信息,社交网络,地理位置。用户自己产生的数据,用户日志等等爆发式增长!
这时候我们就需要使用NoSQL数据库,Nosql可以很好的处理这种情况
什么是NoSQL
NOSQL = Not Only SQL
关系型数据库:表格:行、列
(NOSQL)泛指非关系型数据库,随着web2.0互联网的诞生,传统的关系型数据库很难对付web2.0时代,尤其是超大规模的高并发的社区!暴露出来很多难以克服的问题,NoSQL在当今大数据环境下发展的十分迅速,Redis是发展最快的,而且是我们当下必须要掌握的
一个技术!
很多的数据类型用户的个人信息,社交网络,地理位置。这些数据类型的存储不需要一个固定的格式!不需要多余的操作就可以横向扩展的 !Map<String,Object>使用键值对来控制
NoSQL特点
-
方便扩展,数据之间没有关系,很好扩展
-
大数据量高性能(Redis 一秒写8万次,读取11万次,NoSQL的缓存记录级,是一种细粒度的缓存,性能会比较高!)
-
数据类型是多样型的!(不需要事先设计数据库!随取随用)
-
传统RDBMS和NoSQL
传统的 RDBMS
-结构化组织 -SQL语句 -数据和关系都存在单独的表中 -严格的一致性 -基础的事务 -.....
NoSQL
-不仅仅是数据 -没有固定的查询语言 -键值对存储,列存储,文档存储,图形数据库(社交关系) -最终一致性 -CAP定理 和 BASE理论 -高性能,高可用,高可扩展性 ....
大数据时代的3V:主要是描述问题的
- 海量Volume
- 多样Variety
- 实时Velocity
大数据时代的3高:主要是对程序的要求
- 高并发
- 高可扩
- 高性能(保证用户体验和性能! )
NoSQL四大分类
KV键值对
- 新浪:Redis
- 美团:Redis + Tair
- 阿里、百度:Redis + memcache
文档型数据库(bson格式,和json类似)
-
MongoDB(一般必须要掌握)
MongoDB是一个基于分布式文件存储的数据库,由C++编写,主要用来处理大量的文档! MongoDB是一个介于关系型数据库和非关系型数据库的中间的产品,他是非关系型数据库中功能最丰富,最像关系型数据库的。
-
ConthDB
列存储数据库
- HBase
- 分布式文件系统
图关系数据库
- 不是存图形,而是存关系的,比如:朋友圈社交网络,广告推荐等等
- Neo4j,InfoGrid;
Redis入门
概述
Redis ( Remote Dictionary Server ),即远程字典服务!
是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。
redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从)同步。
免费和开源!是当下最热门的NoSQL技术之一!也被人们称之为结构化数据库!
redis能做什么
- 内存存储、持久化,内存中断电即失,所以持久化很重要(rdb,aof)
- 效率高,可以用于高速缓存
- 发布订阅系统
- 地图信息分析
- 计时器、计数器(浏览量)
特性
- 多样的数据类型
- 持久化
- 集群
- 事务
安装
Windows安装
- 下载安装包
- 解压到环境目录
- 双击运行服务即可
linux安装
-
上传压缩包
-
解压
-
进入解压后的文件夹
-
安装基本的环境
yum install gcc-c++ make make install
-
redis 默认安装路径 :/usr/local