Mybatis之分表设计与分表插入

最新推荐文章于 2024-08-16 17:18:04 发布

Surenon

最新推荐文章于 2024-08-16 17:18:04 发布

阅读量749

点赞数

文章标签： java 数据库

原文链接：http://www.cnblogs.com/gjq1126-web/p/11376937.html

版权

随着数据量增长，查询效率下降，本文介绍了如何通过Mybatis进行分表设计，包括分表逻辑、增删改查操作，以及controller层的写法，以提升数据库性能。

摘要由CSDN通过智能技术生成

现今数据量越来越大,表存储的数据越来越多，以至于查的时候非常慢，使工作效率明显的降低

所以对处理数据的保存就有比较常用的两个解决方案：分表，分区

在这里就说对分表和和通过mybatis对数据的增删改查

分表：是真正的分表，一张表分成很多表后，每一个小表都是完正的一张表

例如日志表：在数据库创建10张表XXXlog1,XXXlog2,XXXlog3,XXXlog4,XXXlog5........

然后通过操作的用户的ID去取模判断该用户的操作日志要插入哪个表

#${tb_sub}传入的参数值是取模后的数字：1，2，3.....   另外id属于自增不做插入

<insert id="insert" parameterType="Object" keyProperty="id">

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Surenon

关注关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

关于Oracle创建分区表以及如何在mybatis中插入分区表信息

qq_35357001的博客

09-13

4421

在做小程序的时候，经理让创建基于时间的分区表，由于以前没弄过，所以做起来做的磕磕碰碰的。现在总结下：首先需要知道的是： Oracle分区表分为四类：范围分区表；列表分区表；哈希分区表；组合分区表范围分区表创建一个按字段数据范围分区的表，分区置于指定的不同表空间中可以先创建一些分区，然后在把表和分区结合，也可以直接在创建表的时候结合分区名（分区会自动创

Mybatis批量Insert及水平分表

weixin_30908649的博客

03-19

225

工作中需要读取很多大数据量（1000w条）的文件并写入到mysql表里，涉及到的技术点主要是数据库的addbatch及水平分表。 数据库的写入场景包括：一条一条的写入和批量写入，这里数据库的批量增加使用mybatis框架完成。水平分表的意思是本来我们要将1000w的数据写入到一张表里，但为了考虑未来表容量的扩展，及表的性能要求，将本来写入一张表转换成写入多张表。我在这里没有使用...

参与评论您还未登录，请先登录后发表或查看评论

图解分库分表，写的太好了！

最新发布

java_2017_csdn的博客

08-16

因为是新增的一个group01组，所以就没有什么数据迁移概念，完全是新增的group组，而且这个group组照样就防止了热点，也就是【4000万，5500万】的数据，都均匀分配到三个DB的table_0表中，【5500万～7000万】数据均匀分配到table_1表中。我们看一下，id在【0，1000万】范围内的，根据上面的流程设计，1000万以内的id都均匀的分配到DB_0,DB_1,DB_2三个数据库中的Table_0表中，为什么可以均匀，因为我们用了hash的方案，对10进行取模。为什么要去表的总数？

分库分表插入（一）spring + mybatis（动态数据源）

咖啡的博客

03-25

1072

2、思路： spring动态数据源方式来实现分库分表，主要依靠数据库标志和表标志参数化，根据标志策略得到对应的不同的库，不同的表，然后依赖动态数据源加入事务管理， 数据库的映射关系实现库和表的对应操作。 ...

java+mybatis分表路由

HeKing124的博客

08-21

2882

概念：分表是将一个大表按照一定的规则分解成多张具有独立存储空间的实体表，我们可以称为子表，每个表都对应三个文件，MYD数据文件，.MYI索引文件，.frm表结构文件。这些子表可以分布在同一块磁盘上，也可以在不同的机器上。app读写的时候根据事先定义好的规则得到对应的子表名，然后去操作它。1、定义路由接口public interface RouteTableAble { /** * 共多少表,

MyBatis实现Mysql数据库分库分表操作和总结（推荐）

08-29

主要介绍了MyBatis实现Mysql数据库分库分表操作和总结,需要的朋友可以参考下

mybatis分表操作

jia1506的博客

01-11

855

有时候数据量庞大需要用到分表 1.首先创建一个表名，这个表名要有规则方便以后查询使用 String xsellTableName = "zp_suitcar_xsell_"+userDo.getId(); 2.创建表 @Update("create table ${tableName} (" + " id bigint(20) primary key not nul...

mysql mybatis分表查询_Mybatis 分表处理

weixin_30984749的博客

02-07

1539

项目到后期遇到分表查询处理，但是项目已经快要开发完了而且使用通用mapper不想在改，想了一个办法在mybatis与mysql数据库连接时处理sql语句替换相关表。第一步，springboot采用注解开发，添加相关配置监听mybatis.import org.apache.ibatis.session.SqlSessionFactory;import org.springframework.co...

Spring MVC +Spring + Mybatis 构建分库分表源码

03-10

它采用模型-视图-控制器（Model-View-Controller，MVC）设计模式，使得业务逻辑与展示层分离，提高了代码的可维护性和可测试性。开发者可以使用Spring MVC的注解驱动特性，如`@RequestMapping`，来处理HTTP请求，并...

Tdengine + MybatisPlus 实践

热门推荐

大宇Kerwin

02-17

1万+

背景在物联网领域，时序数据库一直以来都能占据一席之地，得益于它提供的以时间序列为基础的数据结构，以及充分满足物联网实际应用场景的特性，如聚合分析、预警等。简介在公司车联网应用中，来自车机的数据因为考虑数据集的量级及扩展，会选用大数据+微服务结合的架构，其中数据处理引擎会使用大数据架构中的流式处理+批式处理两种方式，来满足业务的监控及分析需求，但随着国内车企纷纷入局车联网，对私有云的车联网系统需求越来越多，但往往搭建一套完整的大数据架构涉及太多组件，不便于快速搭建及维护，同时大数据架构中使用流式处

分表代码，每天一张新表，用table_yyyy_MM_dd命名

01-21

使用elasticsearch查询数据，anglarjs前端展现。里面的结果表，采用分表策略，每天一张表。hbase java连接查询数据

springmvc +mybatis采用策略设计模式基于拦截器实现按年分表

07-04

springmvc +mybatis采用策略设计模式基于拦截器实现按年分表

使用Mybatis拦截器实现数据分表

04-04

3791

文章目录使用Mybatis拦截器进行数据分表实战分表注解Mybaits的拦截器实现参考使用Mybatis拦截器进行数据分表实战在项目中我们是用Mybatis + TKMapper + MYSQL存储了一些消息日志，但是现在随着业务数据暴增, 单表支撑不了这么多数据. 因此决定把表做水平切分, 按照月份来给表进行切分。这样当我们需要housekeep数据的时候，就可以直接drop掉表了，不论是备份还是删除效率都会比较高那我们就会是用到Mybaits的拦截器 Mybatis插件机制: 　　Mybatis

mybatis分表插入与查询(一)

一个想法

06-02

1616

目录分表原理操作步骤1、建表2、辅助类3、配置文件4、测试方法对于记录表，具有数据量大、频繁从表尾插入、经常检索最近数据等特点，若采用索引，数据量很大的时候索引也会占据不小的内存，且会增加插入数据的效率，分表查询是一种很不错的解决方案。分表原理记录表分表，采用时间分表，每隔一段时间，新的数据存入新表，查询的话，根据查询时间，对特定表进行查询，极大的缩减的检索范围，提高检索效率本文采用对季度进行分表，每一季度数据存储一张记录表操作步骤 1、建表 CREATE TABLE `record` (

Mybatis-Plus实现分表功能【简易版】

weixin_56241562的博客

08-04

2618

该字段是用于上传excel文件后，通过EasyExcel包的方法，对数据进行压缩处理，保存为csv格式的内容，再存入字段中。示例数据：数据库中内容：由于现在我对上传的文件进行了校验，只能上传1MB大小的文件，故字段内容不多，可若后需求需要加大时，该表的该字段就会‘负重前行’，故需要进行分表，才不会影响查询速度。

Mybaits拦截器实现水平分表

2302_77659577的博客

12-15

1101

*** 表名*//*** 算法策略*/// 需要分表的table的Mapper接口1.Mapper文件问题老系统比较混乱，存在多表关联查询，有些Mapper.xml对象对应的sql不是唯一表。这里需要注意，因为注解是针对整个Mapper文件的，只要是上面的sql都会拦截。但是需要分表的sql都必须要有分表字段。需要避免不分表的sql走策略算法。最好将需要分表的表拆成单表，逻辑在代码里处理。2.分页插件pagehelper导致自定义插件无效。

Mybatis-Plus官方分库分表神器，一个依赖轻松搞定！

石杉的架构笔记

06-27

2474

文章来源：http://suo.nz/18CuNV目录前言主要功能使用前言今天介绍一个 MyBatis - Plus 官方发布的神器：mybatis-mate 为 mp 企业级模块，支持分库分表，数据审计、数据敏感词过滤（AC 算法），字段加密，字典回写（数据绑定），数据权限，表结构自动生成 SQL 维护等，旨在更敏捷优雅处理数据。主要功能如下：字典绑定字段加密数据脱敏表...

【Mybatis】mybatis拦截器+自定义注解完成简单的水平分表

weixin_38538285的博客

08-26

2220

文章目录一、背景1.1 环境信息1.2 场景1.3 表信息二、实现思路2.1 概述2.2 代码实现2.2.1 自定义mybatis拦截器2.2.2 自定义注解2.2.3 策略管理者2.2.4 分表策略抽象类2.2.5 产品表分表策略2.2.6 产品描述表分表策略2.3 使用2.3.1 产品信息表mapper接口2.3.2 产品信息表mapper.xml2.3.3 产品描述表mapper接口2.3.4 产品描述表mapper.xml三、个人总结一、背景 1.1 环境信息依赖版本 wind

基于mybatis 手写分表

05-26

Mybatis并不提供分表的功能，但是可以通过自定义插件来实现分表。以下是一个简单的分表插件示例：首先，创建一个自定义插件类TableShardPlugin： ...以上就是一个简单的手写Mybatis分表插件实现。