springboot中使用Java代码进行MongoDB集合数据备份

有时候mongo的集合中数据量太大,查询或翻页时可能会超过最大数量报错,可以给mongo的集合进行备份并保留最近一段时间的数据即可
下面是通过Java代码进行mongo的集合备份单元测试


import cn.hutool.core.date.DateUtil;
import com.nuoyi.study.dao.mongo.po.BehaviorLogPo;
import lombok.extern.slf4j.Slf4j;
import org.junit.jupiter.api.Test;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.boot.test.context.SpringBootTest;
import org.springframework.data.mongodb.core.MongoTemplate;

import java.util.Date;
import java.util.List;

/**
 * @desc: mongo备份单元测试
 * @Author: nuoyi
 * @Date: 2023/11/7 2:39 下午
 */
@SpringBootTest(classes = App.class)
@Slf4j
public class MongoBackTest {
    private final static String CollectionName = "NuoYi_Study_Behavior_Log";

    @Autowired
    private MongoTemplate mongoTemplate;

    /**
     * mongo指定集合备份
     * */
    @Test
    public void test(){
        long s = System.currentTimeMillis();
        String targetCollectionName = CollectionName +"_"+ DateUtil.format(new Date(),"yyyy_MM");
        // 创建备份集合A(如果不存在)
        if (!mongoTemplate.collectionExists(targetCollectionName)) {
            mongoTemplate.createCollection(targetCollectionName);
        }

        // 获取源集合B的数据并备份到集合A
        List<BehaviorLogPo> documents = mongoTemplate.findAll(BehaviorLogPo.class, "NuoYi_Study_Behavior_Log");
        mongoTemplate.insert(documents,targetCollectionName);
        long e = System.currentTimeMillis();
        System.out.println("数据备份完成!");
        System.out.println("总共耗时:"+(e-s));
    }

}

在这里插入图片描述
可以看到数据备份成功,在navicat中也能看到有125条数据

在这里插入图片描述

可配合定时器每月或每季度的凌晨备份数据并删除原集合中以往的数据,保留最近一段时间的数据即可,在生产中最好让DB或运维来操作备份数据库

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
使用Spring Boot在同一个应用使用MySQL和MongoDB双数据源可以通过以下步骤实现: 1. 添加依赖 在pom.xml文件添加MySQL和MongoDB的依赖: ```xml <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> </dependency> <dependency> <groupId>com.alibaba</groupId> <artifactId>druid-spring-boot-starter</artifactId> <version>1.1.10</version> </dependency> <dependency> <groupId>org.mongodb</groupId> <artifactId>mongo-java-driver</artifactId> <version>3.12.7</version> </dependency> <dependency> <groupId>org.springframework.data</groupId> <artifactId>spring-data-mongodb</artifactId> <version>2.2.6.RELEASE</version> </dependency> ``` 2. 配置数据源 在application.properties文件配置MySQL和MongoDB的数据源: ```properties spring.datasource.url=jdbc:mysql://localhost:3306/dbname?useUnicode=true&characterEncoding=utf-8&useSSL=false&serverTimezone=UTC spring.datasource.username=root spring.datasource.password=123456 spring.datasource.driver-class-name=com.mysql.jdbc.Driver spring.datasource.druid.initial-size=5 spring.datasource.druid.min-idle=5 spring.datasource.druid.max-active=20 spring.datasource.druid.test-on-borrow=true spring.datasource.druid.test-while-idle=true spring.datasource.druid.time-between-eviction-runs-millis=60000 spring.datasource.druid.validation-query=select 1 from dual spring.data.mongodb.uri=mongodb://localhost:27017/dbname ``` 3. 配置数据源连接池 在application.properties文件配置Druid连接池: ```properties spring.datasource.type=com.alibaba.druid.pool.DruidDataSource spring.datasource.druid.filters=stat,wall spring.datasource.druid.connection-properties=druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000 ``` 4. 配置JdbcTemplate和MongoTemplate 在Spring Boot应用程序,可以使用JdbcTemplate和MongoTemplate来访问MySQL和MongoDB数据源。 ```java @Configuration public class DataSourceConfig { @Bean @ConfigurationProperties(prefix = "spring.datasource") public DataSource dataSource() { return DruidDataSourceBuilder.create().build(); } @Bean public JdbcTemplate jdbcTemplate(DataSource dataSource) { return new JdbcTemplate(dataSource); } @Bean public MongoTemplate mongoTemplate(MongoDbFactory mongoDbFactory, MappingMongoConverter mappingMongoConverter) { return new MongoTemplate(mongoDbFactory, mappingMongoConverter); } } ``` 5. 使用数据源 在需要使用MySQL和MongoDB数据源的类,注入JdbcTemplate和MongoTemplate,并使用它们来访问数据库。 ```java @Service public class UserService { @Autowired private JdbcTemplate jdbcTemplate; @Autowired private MongoTemplate mongoTemplate; public void addUser(User user) { // 使用JdbcTemplate访问MySQL数据源 jdbcTemplate.update("INSERT INTO user (id, username, password) VALUES (?, ?, ?)", user.getId(), user.getUsername(), user.getPassword()); // 使用MongoTemplate访问MongoDB数据源 mongoTemplate.save(user); } } ``` 以上就是使用Spring Boot和Druid实现MySQL和MongoDB双数据源的步骤。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

oNuoyi

你的鼓励将是我创作的做大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值