- 博客(3)
- 收藏
- 关注
RSS订阅
原创 kettle-实现增量数据定时及服务器部署
kettle 按时间增量数据同步脚本1、数据库中最大时间为需要同步的最小时间，根据这个时间戳获取到待同步的数据，同时可手动设置需要同步的时间段数据 （修改etl表 中时间戳字段即可）2、如果两个表数据对比，出现差异数据，例如新增数据、待更新数据、待删除数据后，该程序会自动识别标记， 并根据标记 对目标表数据进行增删改操作3、存在两处缺点，1、增加时间段数据补录功能 2、增加自动识别缺失数据补录功能详细流程如下前言Kettle`对一张业务表数据（500万条数据以上）进行
2021-11-14 15:57:14
2650
原创 JVM性能调优-JVM内存区域划分
JVM性能调优-JVM内存区域划分1、程序计数器（线程私有） 结论： 程序计数器线程私有，并且分配的空间大小不会随程序执行改变，所以不存在内存溢出等异常情况。程序计数器（Program Counter Register），也有称作为PC寄存器。保存的是程序当前执行的指令的地址（也可以说保存下一条指令的所在存储单元的地址），当CPU需要执行指令时，需要从程序计数器中得到当前需要执行的指令所在存储单元的地址，然后根据得到的地址获取到指令，在得到指令之后，程序计数器便自动加1或者根据转移指针得
2021-11-16 21:48:05
574
原创 高性能mysql-索引策略
高性能的索引策略1、独立的列如果查询中的列不是对立的，则mysql不会使用索引，“独立的列”是指索引列不能是表达式的一部分，也不能是函数的参数。mysql无法自动解析这个方程式，这完全是用户行为。我们应养成简化where条件的习惯，始终将索引列单独放在比较符的一侧。[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-SWhiPGlO-1636810387652)(en-resource://database/1391:0)]2、前缀索引和索引选择性索引开始的部分字符
2021-11-13 21:34:04
602
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人