NoSQL 入门和概述

最新推荐文章于 2024-08-07 16:56:34 发布
最新推荐文章于 2024-08-07 16:56:34 发布
阅读量178 收藏
点赞数 1
文章标签： nosql redis 架构 mysql memcached
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_52462015/article/details/117326372
版权

1、入门概述

（1）为什么用 NoSQL

下面按顺序逐步演进！！！

I、单机 MySQL

在这里插入图片描述

II、Memcached(缓存) + MySQL + 垂直拆分

在这里插入图片描述

III、MySQL 主从读写分离

在这里插入图片描述

IV、分表分库 + 水平拆分 + MySQL 集群

在这里插入图片描述

V、MySQL 的扩展性瓶颈

在这里插入图片描述

VI、今天是什么样子

在这里插入图片描述

VII、为什么使用 NoSQL

在这里插入图片描述

（2）NoSQL 是什么

在这里插入图片描述

（3）NoSQL 能干嘛

  • 易扩展：NoSQL 数据库种类繁多，但是一个共同的特点都是去掉关系数据库的关系型特性，数据之间无关系，这样就非常容易扩展。也无形之间，在架构的层面上带来了可扩展的能力。
  • 大数据量高性能：NoSQL 数据库都具有非常高的读写性能，尤其在大数据量下，同样表现优秀。这得益于它的无关系性，数据库的结构简单。一般 MySQL 使用 Query Cache，每次表的更新 Cache 就失效，是一种大粒度的 Cache，在针对 web2.0 的交互频繁的应用，Cache 性能不高。而 NoSQL 的 Cache 是记录级的，是一种细粒度的 Cache，所以 NoSQL 在这个层面上来说就要性能高很多了。
  • 多样灵活的数据模型：NoSQL 无需事先为要存储的数据建立字段，随时可以存储自定义的数据格式。而在关系数据库里，
    增删字段是一件非常麻烦的事情。如果是非常大数据量的表，增加字段简直就是一个噩梦。
  • 传统 RDBMS VS NOSQL：
    • RDBMS
      • 高度组织化结构化数据
      • 结构化查询语言（SQL）
      • 数据和关系都存储在单独的表中。
      • 数据操纵语言，数据定义语言
      • 严格的一致性
      • 基础事务
    • NoSQL
      • 代表着不仅仅是 SQL
      • 没有声明性查询语言
      • 没有预定义的模式
      • 键 - 值对存储，列存储，文档存储，图形数据库

（4）常见的 NoSQL 数据库

  • Redis
  • Memcache
  • MongDB

2、3 V + 3 高

（1）大数据时代的 3 V

  • 海量 Volume
  • 多样 Variety
  • 实时 Velocity

（2）互联网需求的 3 高

  • 高并发
  • 高可用
  • 高性能

3、NoSQL 数据模型简介

（1）聚合模型

  • key - value 键值
  • Bson
  • 列族
  • 图形

4、NoSQL 数据库的四大分类

（1）key - value 键值

  • 新浪：BerkeleyDB + redis
  • 美团：redis + tair
  • 阿里、百度：memcache + redis

（2）文档型数据库（Bson 格式比较多）

  • CouchDB
  • MongoDB

（3）列存储数据库

  • Cassandra, HBase
  • 分布式文件系统

（4）图关系数据库

  • 朋友圈、社交网络、广告推荐
  • Neo4J, InfoGrid

（5）四者对比

在这里插入图片描述

5、在分布式数据库中 CAP 原理 + Base

（1）传统的 ACID

  • A (Atomicity) 原子性：原子性很容易理解，也就是说事务里的所有操作要么全部做完，要么都不做，事务成功的条件是事务里的所有操作都成功，只要有一个操作失败，整个事务就失败，需要回滚。
  • C (Consistency) 一致性：一致性也比较容易理解，也就是说数据库要一直处于一致的状态，事务的运行不会改变数据库原本的一致性约束。
  • I (Isolation) 隔离性：所谓的独立性是指并发的事务之间不会互相影响，如果一个事务要访问的数据正在被另外一个事务修改，只要另外一个事务未提交，它所访问的数据就不受未提交事务的影响。
  • D (Durability) 持久性：持久性是指一旦事务提交后，它所做的修改将会永久的保存在数据库上，即使出现宕机也不会丢失。

（2）CAP

  • C：Consistency（强一致性）
  • A：Availability（可用性）
  • P：Partition tolerance（分区容错性）

（3）CAP 的 3 进 2

CAP理论就是说在分布式存储系统中，最多只能实现上面的两点。而由于当前的网络硬件肯定会出现延迟丢包等问题，所以分区容忍性是我们必须需要实现的。

所以我们只能在一致性和可用性之间进行权衡，没有 NoSQL 系统能同时保证这三点。
在这里插入图片描述

（4）经典 CAP 图

在这里插入图片描述

（5）Base

在这里插入图片描述

（6）分布式 + 集群简介

在这里插入图片描述

热爱可抵岁月漫长-yh
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
NoSQL入门和概述
bravemxx的博客
04-20 221
什么是NoSQL？ NoSQL(NoSQL = Not Only SQL )，意即“不仅仅是SQL”，泛指非关系型的数据库。随着互联网web2.0网站的兴起，传统的关系数据库在应付web2.0网站，特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心，暴露了很多难以克服的问题，而非关系型的数据库则由于其本身的特点得到了非常迅速的发展。NoSQL数据库的产生就是为了解决大规模...
NoSql入门概述
weixin_42561980的博客
05-20 122
应用层 ========= Dao层 ======= 一个Mysql实例 1.数据量大，一个机器放不下时。 2.数据的索引（B+ Tree）一内存放不下时。 3.访问量（读写混合）一个实例不能承受。 Dao层跑到Cache层。 数据库受伤害的比较大的，是频繁的查询。 如果频繁的查询一些比较固定的数据，可以把他拿出来放在缓存里面。 对于数据库的信息，写的操作放在主库。 读的操作放在从库。 主库的写压力开始出现瓶颈 MyISAM ...
NoSQL数据库入门
琅琊之榜
09-08 2045
NoSQL 是一种不同于关系数据库的数据库管理系统设计方式，是对非关系型数据库的统称，它所采用的数据模型并非传统关系数据库的关系模型，而是类似键/值、列族、文档等非关系模型。NoSQL 数据库没有固定的表结构，通常也不存在连接操作，也没有严格遵守 ACID 约束。因此，与关系数据库相比，NoSQL 具有灵活的水平可扩展性，可以支持海量数据存储。此外，NoSQL数据库支持 MapReduce 风格的编程，可以较好地应用于大数据时代的各种数据管理。
NOSQL简单实战
qq_59180100的博客
07-16 2293
List适用于构建简单的消息队列，特别是在需要处理实时或异步任务时。你可以使用List的左侧（或右侧）作为队列的入口，将消息按照一定的顺序添加到List中。消费者可以从List的右侧（或左侧）获取消息，并在处理后将其移除。这样可以实现基本的消息发布和订阅模式。Hash适用于存储和缓存复杂的数据结构，如用户信息。你可以使用Hash来存储用户的属性和相应的值。每个用户可以被表示为一个独立的Hash对象，可以很方便地进行获取、更新和查询用户属性。注：这里因为我自己的素材没有重复所以增加了篮球和画画。
NoSql入门
fjigww
09-05 250
NoSql入门概述 1.入门概述 1.为什么使用NoSql 2.NoSql 3.特性 2.3V + 3高 1.大数据时代的3V 2.互联网需求的3高 3.NoSql数据模型简介 1.以一个电商客户、订单、订购、地址模型对比 2.聚合模型 4.NoSql数据库的四大分类 1.KV键值 2.文档型数据库(BSON格式较多) 3.列存储数据库 4.图关系数据库 5.在分布式数据库中 ...
NoSQL入门概述
炫炫的博客
03-23 431
互联网时代背景下大机遇，为什么使用nosql http://www.shaoqun.com/a/254327.aspxnosql 与 RDBMS 数据库对比 http://www.runoob.com/mongodb/nosql.html1、是什么NoSQL(NoSQL = Not Only SQL )，意即“不仅仅是SQL”， 泛指非关系型的数据库。 2、3V +3高大数据时代的3V 海
HBase技术介绍简介 NOSQL数据库 入门
12-30
### HBase技术介绍与NoSQL数据库入门 #### HBase概述 HBase，全称为Hadoop Database，是一款基于Apache Hadoop生态系统的开源、分布式、面向列的NoSQL数据库系统。它被设计用于提供高可靠性、高性能的数据存储解决...
Professional NoSQL
10-27
综上所述，《专业NoSQL》这本书涵盖了NoSQL数据库从入门到精通所需的所有核心知识和技术要点。通过学习本书，读者不仅能够掌握NoSQL数据库的基础理论，还能够学会如何在实践中有效地运用这些技术，解决实际问题。...
NoSQL权威指南
11-20
#### 二、NoSQL入门 - **NoSQL是什么以及为什么需要它**： - **NoSQL的特性**：包括但不限于模式灵活、易于扩展、高性能等。 - **应用场景**：例如社交网络、物联网、实时分析等场景下表现优异。 - **初次接触...
nosql 入门教程
10-25
第一部分 　NoSQL入门 第1章 　NoSQL的概念及适用范围　2 1.1 　定义和介绍　3 1.1.1 　背景与历史　3 1.1.2 　大数据　5 1.1.3 　可扩展性　7 1.1.4 　MapReduce　8 1.2 　面向列的有序存储　9 1.3 　键/值存储　11 1.4 　文档数据库　14 1.5 　图形数据库　15 1.6 　小结　16 第2章 　NoSQL上手初体验　17 2.1 　第一印象——两个简单的例子　17 2.1.1 　简单的位置偏好数据集　17 2.1.2 　存储汽车品牌和型号数据　22 2.2 　使用多种语言　30 2.2.1 　MongoDB驱动　30 2.2.2 　初识Thrift　33 2.3 　小结　34 第3章 　NoSQL接口与交互　36 3.1 　没了SQL还剩什么　36 3.1.1 　存储和访问数据　37 3.1.2 　MongoDB数据存储与访问　37 3.1.3 　MongoDB数据查询　41 3.1.4 　Redis数据存储与访问　43 3.1.5 　Redis数据查询　47 3.1.6 　HBase数据存储与访问　50 3.1.7 　HBase数据查询　52 3.1.8 　Apache Cassandra数据存储与访问　54 3.1.9 　Apache Cassandra数据查询　55 3.2 　NoSQL数据存储的语言绑定　56 3.2.1 　Thrift　56 3.2.2 　Java　56 3.2.3 　Python　58 3.2.4 　Ruby　59 3.2.5 　PHP　59 3.3 　小结　60 第二部分 　NoSQL基础 第4章 　理解存储架构　62 4.1 　使用面向列的数据库　63 4.1.1 　使用关系型数据库中的表格和列　63 4.1.2 　列数据库对比RDBMS　65 4.1.3 　列数据库当做键/值对的嵌套映射表　67 4.1.4 　Webtable布局　70 4.2 　HBase分布式存储架构　71 4.3 　文档存储内部机制　73 4.3.1 　用内存映射文件存储数据　74 4.3.2 　MongoDB集合和索引使用指南　75 4.3.3 　MongoDB的可靠性和耐久性　75 4.3.4 　水平扩展　76 4.4 　键/值存储Memcached和Redis　78 4.4.1 　Memcached的内部结构　78 4.4.2 　Redis的内部结构　79 4.5 　最终一致性非关系型数据库　80 4.5.1 　一致性哈希　81 4.5.2 　对象版本　82 4.5.3 　闲话协议和提示移交　83 4.6 　小结　83 第5章 　执行CRUD操作　84 5.1 　创建记录　84 5.1.1 　在以文档为中心的数据库中创建记录　85 5.1.2 　面向列数据库的创建操作　91 5.1.3 　键/值映射表的创建操作　93 5.2 　访问数据　96 5.2.1 　用MongoDB访问文档　96 5.2.2 　用HBase访问数据　97 5.2.3 　查询Redis　98 5.3 　更新和删除数据　98 5.3.1 　使用MongoDB、HBase和Redis更新及修改数据　98 5.3.2 　有限原子性和事务完整性　99 5.4 　小结　100 第6章 　查询NoSQL存储　101 6.1 　SQL与MongoDB查询功能的相似点　101 6.1.1 　加载MovieLens数据　103 6.1.2 　MongoDB中的MapReduce　108 6.2 　访问HBase等面向列数据库中的数据　111 6.3 　查询Redis数据存储　113 6.4 　小结　116 第7章 　修改数据存储及管理演进　117 7.1 　修改文档数据库　117 7.1.1 　弱schema的灵活性　120 7.1.2 　MongoDB的数据导入与导出　121 7.2 　面向列数据库中数据schema的演进　124 7.3 　HBase数据导入与导出　125 7.4 　键/值存储中的数据演变　126 7.5 　小结　126 第8章 　数据索引与排序　127 8.1 　数据库索引的基本概念　127 8.2 　MongoDB的索引与排序　128 8.3 　MongoDB里创建和使用索引　131 8.3.1 　组合与嵌套键　136 8.3.2 　创建唯一索引和稀疏索引　138 8.3.3 　基于关键字的搜索和多重键　139 8.4 　CouchDB的索引与排序　140 8.5 　Apache Cassandra的索引与排序　141 8.6 　小结　143 第9章 　事务和数据完整性的管理　144 9.1 　RDBMS和ACID　144 9.2 　分布式ACID系统　147 9.
尚硅谷Nosql文档资料redis
04-16
### NoSQL 入门与概述 #### 一、NoSQL 的背景与意义 在探讨NoSQL之前，我们先回顾一下关系型数据库（如MySQL）在单机时代的优势及其面临的挑战。 **1. 单机MySQL的美好时代** - **优势：** - 成熟的数据管理...
Neo4j图数据库概述.pdf
04-28
图数据库区别于传统的关系型数据库和其它类型的NoSQL数据库，它通过图论中的“图”概念存储和管理数据，每个数据项被视作图中的节点（Node），节点之间的关系（Relationship）通过边（Edge）来表示。 在当前的...
NoSQL 45分钟教程
编程中的点滴体验
12-14 1949
NoSQL( Not Only SQL ), 不同于关系数据库,所有新型数据库包括列族数据库、键/值数据库和文档数据. 其中最成功的就是键/值数据库. 成熟的产品有:MongoDB、CouchDB、HBase、Hypertable、Cassandra、Redis 和BerkeleyDB等等. NoSQL是为处理大数据而生的. 我们简单对比下关系数据库和非关系数据库 RDBMS vs
Nosql入门知识
热门推荐
shuming的专栏
04-30 2万+
1. NoSQL其实是关系型数据库相对应的，是no relational 即非关系型数据库；web2.0特别是一些用户访问量比较大的网站如：www.taobao.com weibo.com baidu.com  每秒的访问量可能是上万次(10K);传统的关系型数据库 mysql oracle 每秒进行10K次数据查询还可以勉强应付，但是如果是每秒10K次读写数据库，因为数据库的数据都是卸载磁盘中
NoSql入门和概述
qq_19827707的专栏
07-05 3202
NoSql入门和概述入门概述1 互联网时代背景下大机遇，为什么用nosql1. 单机MySQL的美好年代 在90年代，一个网站的访问量一般都不大，用单个数据库完全可以轻松应付。 在那个时候，更多的都是静态网页，动态交互类型的网站不多。 上述架构下，我们来看看数据存储的瓶颈是什么？ 1.数据量的总大小 一个机器放不下时 2.数据的索引（B+ Tree）一个机器的内存放不下时 3.
NoSQL数据库入门概述
void
08-27 1万+
NoSQL数据库入门概述、包括Memcached、Redis、Tokyo Tyrant等NoSQL数据库的简单了解
一天入门redis-为什么要学nosql
卡莱相位折跃研究所
11-23 3161
早年的单机mysql架构 应用层-数据访问层-数据库当前的互联网时代：3V+3高Volume+Variety+Veloctiy，高并发+高可扩+高性能 出现瓶颈：索引、数据过大一台服务器放不下，读写没有分离，数据库压力过大Memcached的出现 通过mysql的垂直拆分，使用缓存技术缓解数据库压力，优化数据库结构和索引。使用Memcached的出现解决文件缓存共享的问题以及大量小文件缓存的问
非关系型数据库（NoSQL数据库
最新发布
2301_77836489的博客
08-07 363
非关系型数据库（NoSQL数据库
NoSQL入门指南：优势与挑战
首先，章节一"An Overview of NoSQL"为读者提供了一个全面的NoSQL概述。它解释了NoSQL的概念，包括对历史背景的回顾。这部分强调了NoSQL与传统的关系型数据库（RDBMS）的区别，如MySQL或Oracle等。作者阐述了NoSQL...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值