最新MongoDB分片原理篇，HTTP规范中的那些容易掉进去的坑

最新推荐文章于 2024-11-10 08:43:33 发布
最新推荐文章于 2024-11-10 08:43:33 发布
阅读量954 收藏 13
点赞数 12
分类专栏： 程序员 文章标签： java 面试 学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2301_76348206/article/details/138834693
版权

《MySql面试专题》

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

《MySql性能优化的21个最佳实践》

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

《MySQL高级知识笔记》

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

文中展示的资料包括：**《MySql思维导图》《MySql核心笔记》《MySql调优笔记》《MySql面试专题》《MySql性能优化的21个最佳实践》《MySq高级知识笔记》**如下图

全网火爆MySql 开源笔记，图文并茂易上手，阿里P8都说好

关注我，点赞本文给更多有需要的人

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

Hash分片

Hash分片是根据用户的shard key计算hash值（64bit整型），根据hash值按照『范围分片』的策略将文档分布到不同的chunk

优点Hash分片与范围分片互补，能将文档随机的分散到各个chunk，充分的扩展写能力，弥补了范围分片的不足，

缺点但不能高效的服务范围查询，所有的范围查询要分发到后端所有的Shard才能找出满足条件的文档。

合理的选择shard key

选择shard key时，要根据业务的需求及『范围分片』和『Hash分片』2种方式的优缺点合理选择，要根据字段的实际原因对数据进行分片，否则会产生过大的Chunk

Mongos

Mongos作为Sharded cluster的访问入口，所有的请求都由mongos来路由、分发、合并，这些动作对客户端driver透明，用户连接mongos就像连接mongod一样使用。

查询请求

  • 查询请求不包含shard key，则必须将查询分发到所有的shard，然后合并查询结果返回给客户端

  • 查询请求包含shard key，则直接根据shard key计算出需要查询的chunk，向对应的shard发送查询请求

写请求

写操作必须包含shard key，mongos根据shard key算出文档应该存储到哪个chunk，然后将写请求发送到chunk所在的shard。

更新/删除请求

更新、删除请求的查询条件必须包含shard key或者_id，如果是包含shard key，则直接路由到指定的chunk，如果只包含_id，则需将请求发送至所有的shard。

其他命令请求

Config Server

config database

Config server存储Sharded cluster的所有元数据，所有的元数据都存储在config数据库

Config Server可部署为一个独立的复制集，极大的方便了Sharded cluster的运维管理。

config.shards

config.shards集合存储各个Shard的信息，可通过addShard、removeShard命令来动态的从Sharded cluster里增加或移除shard

config.databases

config.databases集合存储所有数据库的信息，包括DB是否开启分片，primary shard信息，对于数据库内没有开启分片的集合，所有的数据都会存储在数据库的primary shard上。

config.colletions

数据分片是针对集合维度的，某个数据库开启分片功能后，如果需要让其中的集合分片存储，则需调用shardCollection命令来针对集合开启分片。

config.chunks

集合分片开启后，默认会创建一个新的chunk，shard key取值[minKey, maxKey]内的文档（即所有的文档）都会存储到这个chunk。当使用Hash分片策略时，也可以预先创建多个chunk，以减少chunk的迁移。

config.settings

config.settings集合里主要存储sharded cluster的配置信息，比如chunk size，是否开启balancer等

其他集合

  • config.tags主要存储sharding cluster标签（tag）相关的你洗

  • config.changelog主要存储sharding cluster里的所有变更操作，比如balancer迁移chunk的动作就会记录到changelog里

  • config.mongos存储当前集群所有mongos的信息

  • config.locks存储锁相关的信息，对某个集合进行操作时，比如moveChunk，需要先获取锁，避免多个mongos同时迁移同一个集合的chunk。

  • 要更多干货、技术猛料的孩子，快点拿起手机扫码关注我，我在这里等你哦~

写在最后

作为一名即将求职的程序员，面对一个可能跟近些年非常不同的 2019 年，你的就业机会和风口会出现在哪里？在这种新环境下，工作应该选择大厂还是小公司？已有几年工作经验的老兵，又应该如何保持和提升自身竞争力，转被动为主动？

就目前大环境来看，跳槽成功的难度比往年高很多。一个明显的感受：今年的面试，无论一面还是二面，都很考验Java程序员的技术功底。

最近我整理了一份复习用的面试题及面试高频的考点题及技术点梳理成一份“Java经典面试问题（含答案解析）.pdf和一份网上搜集的“Java程序员面试笔试真题库.pdf”（实际上比预期多花了不少精力），包含分布式架构、高可扩展、高性能、高并发、Jvm性能调优、Spring，MyBatis，Nginx源码分析，Redis，ActiveMQ、Mycat、Netty、Kafka、Mysql、Zookeeper、Tomcat、Docker、Dubbo、Nginx等多个知识点高级进阶干货！

由于篇幅有限，为了方便大家观看，这里以图片的形式给大家展示部分的目录和答案截图！

Java经典面试问题（含答案解析）

阿里巴巴技术笔试心得

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】](https://bbs.csdn.net/forums/4f45ff00ff254613a03fab5e56a57acb)收录**

需要这份系统化的资料的朋友，可以点击这里获取

2301_76348206
关注
专栏目录
MongoDB快速实战与基本原理
xajh_czbk的博客
10-03 1211
留有一个问题：如何做横向扩展？ 着重说一下：还需要创建这个目录可以后台启动 启动完成后这样就说明已经连接好了：看文档，里面有详细操作。里面还涉及远程连接的时候用户名和密码的形式。 上面创建好的，这样可以查看了，默认多了一个ID： 可以再添加的时候自定义ID并查看一下： monogdb自动生成的ID其实是有序的： 也可以去官网下载图形界面去进行mongo的CRUD工作： 演示主键冲突且有序的情况下的插入效果： 发现这有100的插入了。也就说在要求顺序的情况下，如果中间的ID冲突了，后面的将不再继续插入：
MongoDB
qingmengrao的博客
04-14 831
一、MongoDB MongoDB 4.2：MongoDB是一个文档数据库，旨在简化开发和扩展。 MongoDB中的记录是一个文档，它是由字段和值对组成的数据结构。MongoDB文档类似于JSON对象，字段的值可以包括其他文档，数组和文档数组。 1、介绍 使用文档的优点是： 文档（即对象）对应于许多编程语言中的本机数据类型； 嵌入式文档和数组减少了对昂贵连接的需求； 动态模式支持流畅的多态性。 集合/视图/按需实例化视图 MongoDB将文档存储在集合中，集合类似于数
瑞_MongoDB_MongoDB分片集群
阿瑞——从事Java后端，喜欢研读源码、自研框架、分享经验
07-07 1033
本文章为瑞_系列专栏之《MongoDB》的集群和安全整合篇的 MongoDB 分片集群-Sharded Cluster章节。详细搭建了MongoDB分片集群：两个分片节点副本集（3 + 3，一主一副本一仲裁）+ 一个配置节点副本集（3，一主二副本）+ 两个路由节点（1 + 1），共 11 （3 + 3 + 3 + 1 + 1）个服务节点
MongoDB入门笔记
weixin_44643253的博客
10-07 1603
数据库是按照数据结构来组织、存储和管理数据的仓库。我们的程序都是在内存中运行的，一旦程序运行结束或者计算机断电，程序运行中的数据都会丢失。所以我们就需要将一些程序运行的数据持久化到硬盘之中，以确保数据的安全性。而数据库就是数据持久化的最佳选择。说白了，数据库就是存储数据的仓库。MongoDB是为快速开发互联网Web应用而设计的数据库系统。MongoDB的设计自标是极简、灵活、作为Web应用栈的一部分。
MongoDB手册
qq_36864672的博客
03-02 1474
{ "_id" : ObjectId("56064886ade2f21f36b03134"), "title" : "MongoDB 教程", "description" : "MongoDB 是一个 Nosql 数据库", "by" : "菜鸟教程", "url" : "http://www.runoob.com", "tags" : [ "mongodb", "database", "NoSQL" ], "likes" : 100 }
MongoDB快速上手
以爱护甲,爱满枫林。
08-22 1005
MongoDB是一个开源、高性能、无模式的文档型数据库，当初的设计就是用于简化开发和方便拓展，是Nosql数据库产品中的一种。是最像关系型数据库（Mysql）的非关系型数据库。它支持的数据结构非常松散，是类似JSON的BSON格式，所以它既可以存储比较复杂的数据类型，又相当的灵活。
MongoDB 学习笔记
zxc_123_789的博客
10-22 586
一. MongoDB 简介 1.1 简介 MongoDB是一个开源、高性能、无模式的文档型数据库，当初的设计就是用于简化开发和方便扩展，是NoSQL数据库产品中的一种。是最像关系型数据库（MySQL）的非关系型数据库。 它支持的数据结构非常松散，是一种类似于 JSON 的 格式叫BSON，所以它既可以存储比较复杂的数据类型，又相当的灵活。 MongoDB中的记录是一个文档，它是一个由字段和值对（field:value）组成的数据结构。MongoDB文档类似于JSON对象，即一个文档认为就是一个对象。字段的数
Java：83-MongoDB介绍
qq_59609098的博客
08-06 1328
举例3：MongoDB是一个面向文档的数据库，目前由10gen（也可叫Mongo）开发并维护 它的功能丰富，齐全，基本完全可以替代MySQL 在使用MongoDB做产品原型的过程中，我们总结了MonogDB的一些亮点： 使用JSON风格语法，易于掌握理解：MongoDB使用JSON的变种BSON作为内部存储的格式和语法 针对MongoDB的操作都使用JSON风格语法，客户端提交或接收的数据都使用JSON形式来展现 相对于SQL来说，更加直观，容易理解和掌握 Schema-less，支持嵌入子文档：Mongo
MongoDB学习笔记
le6peer的博客
11-19 301
MongoDB 一、MongoDB简介 MongoDB 是一个基于分布式文件存储的数据库。由 C++ 语言编写。旨在为 WEB 应用提供可扩展的高性能数据存储解决方案。它是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。 二、MongoDB的安装 https://www.mongodb.com/download-center#community 1·选择...
MongoDB详细入门学习
我本可以
01-06 2316
MongoDB 是由C++编写的，是一个基于分布式文件存储的开源NoSql数据库系统。MongoDB 是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。Mongo最大的特点是他支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。
04-MongoDB集群和安全
weixin_45156610的博客
10-02 787
MongoDB集群和安全 v1.2.03_201909_BoBo MongoDB用起来-快速上手和集群安全系列 课程目标 MongoDB的副本集：操作、主要概念、故障转移、选举规则 MongoDB的分片集群：概念、优点、操作、分片策略、故障转移 MongoDB的安全认证 1. 副本集-Replica Sets 简介 MongoDB中的副本集（Replica Set）是一组维护相同数据集的mon...
JAVA-01-变量
LJH_laura_li的博客
11-08 435
在方法、构造函数或块内部定义的变量。
Java基于小程序公考学习平台的设计与实现（附源码，文档）
chusheng1840的博客
11-09 1035
Java基于小程序公考学习平台的设计与实现，小程序公考学习平台使用Java语言进行编码，使用Mysql创建数据表保存本系统产生的数据。系统可以提供信息显示和相应服务，其管理小程序公考学习平台信息，查看小程序公考学习平台信息，管理小程序公考学习平台。总之，小程序公考学习平台集中管理信息，有着保密性强，效率高，存储空间大，成本低等诸多优点。它可以降低信息管理成本，实现信息管理计算机化。关键词：小程序公考学习平台；Java语言；Mysql。
基于 SpringBoot 实现QQ邮箱验证码注册功能
2301_79201049的博客
11-06 657
找到并开通以下的邮件协议服务，而且服务开启也较为简单，需要我们发送一个短信到指定的号码，开启后平台会提供一个授权码，一定要记住这个授权码，发邮件的时候需要这个。host 是根据服务主机区分，网易邮箱是 smtp.163.com, qq邮箱是 smtp.qq.com。其中的 username 是你第一步中操作的邮箱账号，nickname 是接收者收到邮件中显示的发件人。发送邮件的核心依赖是 mail ，由于该项目还涉及其他依赖就全都导进来了。（1）首先打开QQ邮箱，点击设置并来到账号页面。
java_方法重写/覆盖(override)
HHppGo的博客
11-07 337
方法覆盖（重写）就是子类有一个方法，和父类的某个方法的名称、返回类型、参数一样，那么我们就说子类的这个方法覆盖了父类的方法。
在 C# 中，如何实现观察者模式？
Leo的博客
11-06 498
观察者模式是一种设计模式，它定义了一种一对多的依赖关系，让多个观察者对象同时监听某一个主题对象。当该主题对象的状态发生变化时，会通知所有观察者对象，使它们能够自动更新自己。这个模式常用于事件处理系统、通知系统等场景。
并发编程的基础：深入理解内存屏障（Memory Barriers）
2401_86353562的博客
11-06 1007
内存屏障是一种基础语言，在不同的计算机架构下有不同的实现细节。本文主要在x86_64处理器下，通过Linux及其内核代码来分析和使用内存屏障对大多数应用层开发者来说，“内存屏障”（memory Barrier）是一种陌生，甚至有些诡异的技术。实际上，他机制常被用在操作系统内核中，用于实现同步、驱动程序利用它，能够实现高效的无锁数据结构，提高多线程程序的性能表现。本文首先探讨了内存屏障的必要性，之后介绍如何利用内存屏障实现一个无锁唤醒振荡器（队列），用于在多个线程间进行高效的数据交换。
ArkTS--应用状态
最新发布
qq_63946637的博客
11-10 526
本文旨在帮助大家学习鸿蒙中的LocalStorage和AppStorage
greendao使用封装
白高林的专栏
11-07 449
greenDAO
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值