- 博客(7)
- 问答 (5)
- 收藏
- 关注
RSS订阅原创 Redis5.0.7的部署与集群搭建
Redis5.0.7的部署与集群搭建一、单机版部署第一步：下载最新稳定版wget http://download.redis.io/releases/redis-5.0.7.tar.gz第二步：解压tar -zxvf redis-5.0.7.tar.gz第三步：进入解压后文件夹并编译$ cd redis-5.0.7$ make第四步：运行$ src/redis-serve...
2019-11-22 16:12:50
1524
原创 Redis Cluster与Codis的选择
Redis Cluster与Codis的选择一、Codis1.1 Codis是什么Codis 是 Wandoujia Infrastructure Team 开发的一个分布式 Redis 服务, 用户可以看成是一个无限内存的 Redis 服务, 有动态扩/缩容的能力. 对偏存储型的业务更实用, 如果你需要 SUBPUB 之类的指令, Codis 是不支持的. 时刻记住 Codis 是一个分布...
2019-11-20 10:54:13
2587
原创 项目启动异常（已解决解决）
项目为canal adapter。jdk版本为：1.8.0_144报错日志：2019-11-15 16:49:26.126 [main] INFO o.s.c.annotation.AnnotationConfigApplicationContext - Refreshing org.springframework.context.annotation.AnnotationConfigAp...
2019-11-15 17:02:12
5412
原创 数据库归档的实现方案调研（二）
之前的文章里已经写了使用TokuDB进行数据压缩，准确的说，但 TokuDB并非是归档，而是对数据进行压缩，使得数据库在保存大量数据时有更好的表现，这节就是描述一个数据库归档方案。经过调研，发现一个比较好的工具： pt-archiver。1、原理通过给定的–where条件，查询出表中需要删除或者归档记录的主键信息，然后通过强制主键索引的方式，小批量（最小可以做到1行）的方式删除或者归档，最大...
2019-11-14 11:09:44
698
原创 数据库归档的实现方案调研（一）
公司最近说是数据库中数据量比较大，好多是15/16年的数据，基本不用，但是堆在数据库又严重影响性能，想找个方法解决掉它。所以，这个任务就这么放到了我的头上。一、 目前问题业务系统的业务表的数据量很大，严重影响性能，需要进行优化。二、 问题解决方案按照目前问题，对症下药，我们需要对数据进行归档。目前市面上有几个解决该问题的方案，可选用一种或多种进行优化三、 方案一3.1 TokuDBR...
2019-11-13 10:57:40
1028
4
原创 利用LogStash同步ORACLE数据至ES
1、LogStash1.1下载LogstashWget https://artifacts.elastic.co/downloads/logstash/logstash-6.5.4.tar.gz1.2项目结构解压缩后项目结构为：其中我们需要手动添加oracle的jar包作为logstash的驱动。1.3修改配置文件作用是：每秒增量更新，每分钟进行一次全量更新删除的话，目前logs...
2019-11-13 10:46:13
6933
1
原创 利用Canal全量/增量同步mysql数据至ES
Canal同步mysql数据至ES1、更改Mysql配置1.1 开启 Binlog 写入功能配置 binlog-format 为 ROW 模式，配置my.cnf[mysqld]log-bin=mysql-bin # 开启 binlogbinlog-format=ROW # 选择 ROW 模式server_id=1 # 配置 MySQL replaction 需要定义，不要和 cana...
2019-11-05 17:01:20
12920
22
空空如也
oracle数据库同步至ES
2019-11-06
canal集成kafka之后，每次mysql变更数据，会传递多条数据至kafka
2019-08-28
java客户端连接kafka出现异常
2019-08-19
项目中的依赖在新项目中无法下载
2019-08-14
spring与struts2整合之后，404错误，控制台不报错
2018-01-08
TA创建的收藏夹 TA关注的收藏夹
TA关注的人