- 博客(186)
- 资源 (2)
- 收藏
- 关注
原创 mongo的索引操作
索引是特殊的数据结构,它以一种易于遍历的形式存储集合数据集的一小部分。索引存储一个或一组特定字段的值,按字段的值排序。索引项的排序支持有效的相等匹配和基于范围的查询操作。此外,MongoDB可以通过使用索引中的排序返回排序后的结果。mongo中使用 WiredTiger: B+单键索引如基于主键ID 进行的B+ tree 数据结构复合索引(复合索引只能支持前缀子查询)(A,B,C)基于name, age, position 建立的复合索引。
2026-10-23 17:58:49
56
原创 云服务器mongo搭建集群-分片
提供集群单一入口,转发应用端请求,选择合适的数据节点进行读写,合并多个数据节点的返回。客户请求应发给mongos,而不是 分片服务器,当查询包含分片片键时,mongos将查询发送到指定分片,否则,mongos将查询发送到所有分片,并汇总所有查询结果。还说明了下载指定操作系统版本包的方法,详细阐述了部署和验证工作,如准备配置文件、启动节点、初始化副本集等步骤。以复制集为单位,横向扩展最大1024分片,分片之间数据不重复,所有数据在一起才可以完整工作。每个分片集3个实例,2个分片集,一共6个实例。
2026-10-23 17:58:26
486
原创 mongodb集群模式的原理
mongo集群部署一起结合着方便理解云服务器mongo搭建复制集-CSDN博客本文详细介绍了在云服务器上通过离线资源包方式安装MongoDB的完整流程,包括创建目录、上传解压安装包、配置环境变量、编写mongodb.conf启动配置文件、创建数据与日志目录、以配置文件方式启动mongod服务,以及使用mongo客户端或Navicat连接验证。创建复制集文件夹,将mongodb-linux-x86_64-rhel70-4.4.8.tgz文件解压到新目录中。
2026-10-22 22:26:47
88
原创 云服务器mongo搭建集群-复制集
本文详细介绍了在云服务器上通过离线资源包方式安装MongoDB的完整流程,包括创建目录、上传解压安装包、配置环境变量、编写mongodb.conf启动配置文件、创建数据与日志目录、以配置文件方式启动mongod服务,以及使用mongo客户端或Navicat连接验证。创建复制集文件夹,将mongodb-linux-x86_64-rhel70-4.4.8.tgz文件解压到新目录中。# 进入任何一个mongo中,输入命令,查看复制集状态。
2026-10-22 22:23:56
338
原创 使用spring-data-mongodb操作mongo记录
提供了与两种方式访问mongodb操作简单,MongoTemplate操作灵活,我们在项目中可以灵活适用这两种方式操作mongodb的缺点是不够灵活,正好可以弥补不足。1、使用MongoTemplate2、使用MongoRepository。
2026-10-21 18:06:28
226
原创 mongoDB入门
在高负载的情况下,添加更多的节点,可以保证服务器性能。MongoDB 旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB 是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统。MongoDB 将数据存储为一个文档,数据结构由键值(key=>value)对组成。MongoDB 文档类似于 JSON 对象。字段值可以包含其他文档,数组及文档数组。
2026-10-17 22:30:52
287
原创 云服务器docker的安装
第三步:更新并安装Docker-CE。第一步:安装必要的一些系统工具。第四步:开启Docker服务。第五步、测试是否安装成功。第二步:添加软件源信息。# 安装docker。
2026-10-17 10:00:00
266
原创 redis实现秒杀功能-超卖&库存遗留问题的解决
库存恢复100,再次使用ab调用,查看redis库存,正常了。需要使用ab工具模拟并发。# 使用如下命令进行安装。# 准备testfile。使用redis事务解决。2.记录秒杀成功人员。# ab指定文件内容。# ab命令参数说明。重新使用ab模拟并发。
2026-10-15 18:36:52
306
原创 云服务器redis主从复制-哨兵模式
从上一篇改进为哨兵模式云服务器redis主从复制-一主二仆-CSDN博客主机数据更新后,自动同步到备机Master以写为主,Slave以读为主目的读写分离,性能扩展容灾快速恢复1 一个redis服务作为主机,主要负责写操作2 两个redis服务作为从机,主要负责读操作3 从机自动从主机同步数据下来4 从机主动找主机,而主机不会找从机!!注意:生产环境,主从复制每个服务都在不同的机器上,这里使用一台机器 不同端口模拟搭建真是环境。
2026-10-14 16:13:20
337
原创 云服务器redis主从复制-一主二仆
主机数据更新后,自动同步到备机Master以写为主,Slave以读为主目的读写分离,性能扩展容灾快速恢复1 一个redis服务作为主机,主要负责写操作2 两个redis服务作为从机,主要负责读操作3 从机自动从主机同步数据下来4 从机主动找主机,而主机不会找从机!!注意:生产环境,主从复制每个服务都在不同的机器上,这里使用一台机器 不同端口模拟搭建真是环境。
2026-10-14 14:58:01
423
原创 redis持久化
redis数据存储在内存中,断电后内存中的数据就没有了,重启后,redis通过持久化机制将数据重新加载到内存中。持久化方式有两种。
2026-10-13 22:40:38
160
原创 kafka顺序消费问题
将消息发送到同一分区中,可以保证消息的局部有序,kafka可以保证同一个分区的消息是严格有序的,并且要设置retries=0。如果允许了重试,失败了,重试,可能出现顺序靠后的优先失败的那个执行了。2、通过key将相同类型的消息发送到同一个分区中。1、针对一个topic只创建一个分区。
2026-10-11 23:55:20
225
原创 kafka为什么要分区,都有哪些分区策略
分区为了提供负载均衡的能力,实现系统的高伸缩性。分区策略是决定生产者将消息发送到哪个分区的算法,尽量避免造成数据"倾斜"kafka提供了默认的分区策略,同时也支持自定义的分区策略。
2026-10-11 10:30:00
211
原创 kafka消息可靠性传输
acks=-1(all):生产者发送过来数据,Leader和ISR(所有在线的副本)队列里面所有Follwer应答,可靠性高效率最低。acks=-1(all),一般用于传输重要不能丢失的数据(例如:钱、订单、积分等),对可靠性要求比较高的场景。acks=1:生产者发送过来数据,只需要Leader确认即可返回,可靠性中等,效率中等。acks=0:生产者发送过来数据,就不管了,可靠性差数据会丢,效率最高。acks=1,一般用于传输普通日志,允许丢个别数据;1.没写进去acks=0。acks=0 很少使用;
2026-10-10 17:37:48
324
原创 kafka一直restarting,报错InconsistentClusterIdException
问题出在这里由于使用down,只把容器删除了, 原来的数据挂载还保留原来的,导致再次up启动 clusterId和挂载的数据之前报错的不一致了,导致持续报错重启。# 复制到本地,改完后复制到容器中(或 直接进入到eagle容器内部直接改参数--可能没有vi命令,需要安装)通过docker compose up -d 启动,修改了yml内存配置,使用down删除容器在up启动。2.找到之前的挂载数据,修改clusterId,保持一致。# 停止容器 + 删除当前compose定义的全部数据卷。
2026-10-10 11:56:27
193
原创 kafka相关资源(kafka、efak、zookeeper)
链接: https://pan.baidu.com/s/1r30DOF8D_-ArDBafqUpYGw?pwd=s9xa 提取码: s9xa 复制这段内容后打开百度网盘手机App,操作更方便哦。
2026-10-07 23:23:11
52
原创 云服务器kafka环境搭建
新增一个docker-compose-kafka.yml文件,内容如下。修改docker-compose文件增加如下配置。访问eagle,报错了。
2026-10-07 23:20:08
513
原创 项目使用sentinel遇到的问题
- fixme 版本必须是 3.0.9 配合 spring alibaba的 2022.0.0.0-RC2版本 -->springboot版本使用4.1.1会报如下错误,需要把boot的版本降低。# springboot的版本使用 3.0.9。sentinel控制台可以看到实时监控了。springboodt项目引入依赖。启动/部署项目后访问测试。
2026-10-05 23:23:05
234
原创 云服务器sentinel搭建-控制台
控制台--Dashboard,基于springboot,打包后直接运行。用户密码:sentinel/sentinel。sentinel分为2部分。# 本地下载,上传到服务器。# 命令启动, 默认端口。核心库--java客户端。控制台-下载jar包。# 或 wget获取。
2026-10-05 21:47:22
438
原创 docker的备份与迁移
主要是四个命令对 容器①镜像②tar③镜像④容器 整个过程的转换。rz/sz (linux与windows)# 导出该新镜像为tar文件(可迁移)将tar文件在服务器直接进行传递。# 如果有数据挂载,需要单独备份。# 将当前容器状态提交为新镜像。# 加载tar为镜像。
2026-10-05 09:20:15
523
原创 云服务器nacos搭建-集群&持久化
部署了3个节点,上面多出了一个,是内网ip+端口,需要在application. 增加配置。部署了3个节点,上面多出了一个,是内网ip+端口,需要在application. 增加配置。--cluster.conf忘记配置,./startup.sh启动会报错上面的错误。# /conf下的cluster.conf确认是否自动添加了内网ip。# /conf下的cluster.conf确认是否自动添加了内网ip。上面所有配置修改完成后,复制另外2个节点并修改端口。/bin目录下的startup.sh修改。
2026-10-04 23:25:40
324
原创 云服务器nacos搭建-单机
默认:MODE="cluster"集群方式启动,如果单机启动需要设置-m standalone参数,否则,启动失败。账号密码:nacos/nacos。
2026-10-04 23:19:34
228
原创 通过kibana操作elasticsearch记录
操作路径创建索引查看所有索引查看单个索引删除索引多次操作 version会增加删除文档批量新增批量删除_doc查看映射must -- and关系should-- or关系如果should和must同时存在,他们之间是and关系filter 没有评分from+sizescoll高亮查询近似查询
2026-10-01 23:28:16
342
原创 docker安装常见软件集合
-p 参数:映射端口号,格式是“宿主机端口号:容器内端口号”。5672供客户端程序访问,15672供后台管理界面访问。# -e 参数:设置容器内的环境变量,这里我们设置了登录RabbitMQ管理后台的默认用户和密码。# -d 参数:后台运行 Docker 容器。# --name 参数:设置容器名称。# -v 参数:卷映射目录。
2026-10-01 22:13:47
68
原创 云服务器elasticsearch环境搭建-集群
下载链接:Elastic Stack 软件的过往版本 | Elastic正在寻找 Elasticsearch、Logstash、Kibana、es-hadoop、Shield、Marvel 或我们的语言客户端的过往版本?配置服务器集群时,集群中节点数量没有限制,大于等于2个节点就可以看做是集群了。# 注意 集群生成环境在3台机器以上,这里使用1台机器来安装集群环境。问题:上面的jvm内存参数配置错误了,注意是-Xms。#配置集群间通信的端口号。
2026-09-30 17:42:26
893
原创 云服务器kibana环境搭建
下载地址: https://www.elastic.co/cn/downloads/past-releases/kibana-7-8-0https://www.elastic.co/cn/downloads/past-releases/kibana-7-8-0https://www.elastic.co/cn/downloads/past-releases/kibana-7-8-0Kibana 的 Linux 安装过程主要分为解压、配置、启动和验证四个步骤。下面按顺序展开说明,并补充每一步的注意事项。解压完
2026-09-30 14:10:15
257
原创 云服务器elasticsearch环境搭建-单台
下载链接:Elastic Stack 软件的过往版本 | Elastic正在寻找 Elasticsearch、Logstash、Kibana、es-hadoop、Shield、Marvel 或我们的语言客户端的过往版本?您找对地方了。
2026-09-30 09:36:29
934
原创 云服务器mysql分库分表环境搭建(2库4表)
【推荐】单表行数超过 500 万行或者单表容量超过 2GB,才推荐进行分库分表。单表数据量太大, 分库不能解决,存在瓶颈,需要分表。
2026-09-29 16:56:10
284
原创 云服务器分布式事务seata AT环境搭建
Seata 是什么?Seata 是一款开源的分布式事务解决方案,致力于提供高性能和简单易用的分布式事务服务。Seata 将为用户提供了 AT、TCC、SAGA 和 XA 事务模式,为用户打造一站式的分布式解决方案。新人文档 | Apache SeataSeata分TC、TM和RM三个角色,TC(Server端)为单独服务端部署,TM和RM(Client端)由业务系统集成。简单理解上面的流程:三个角色:TC、TM、RM1、TM向TC申请全局事务,成功后生成XID2、XID在微服务上下文中传递。
2026-09-29 09:30:59
822
原创 云服务器mysql主从同步搭建
在读取 binlog 的内容的操作中,会对主节点上的 binlog 加锁,当读取完成并发送给从服务器后解锁。,读取relay log日志,并解析成具体操作,从而实现主从操作一致,最终数据一致。,性能高,但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题。# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id。# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id。# 中继日志名,默认xxxxxxxxxxxx-relay-bin。
2026-09-28 09:30:46
247
原创 解决在docker中部署的jenkins使用`withDockerContainer` 报错问题 Cannot run program “docker“: Exec failed
重新创建镜像,将主机的docker路径挂载到jenkins容器中。插件,本质是在节点上调用本地。
2026-09-27 11:00:00
166
原创 jenkins流水线参数化配置
docker images prune --错误。Jenkins 是一个开源自动化服务器。使用 Jenkinsfile。点击第二次运行后出现填写参数。参数添加到stages前面。下面的stage引用参数。
2026-09-26 21:55:14
82
原创 jenkins配置流水线将镜像推送到私有仓库harbor
保存后到流水线语法下,生成对应的命令,配上用户名密码参数。1.登录仓库(云服务器的私有仓库harbor)推送代码,重新触发流水线观察执行情况。2.打标签,符合仓库项目规范的标签。harbor中也有了。
2026-09-24 15:18:19
226
jp.gr.java-conf.ussiy.app.propedit,6.0.4
2017-08-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅