- 博客(8)
- 资源 (19)
- 问答 (2)
- 收藏
- 关注
原创 logstash-input-jdbc 同步原理及相关问题解读
前言:基于logstash-input-jdbc较其他插件的稳定性、易用性、版本和ES同步更新的特点,以下研究主要针对 logstash-input-jdbc 展开。 针对logstash-input-jdbc常见的几个疑难问题,部分问题也在git和stackoverflow进行了激烈讨论,以下统一给出验证和解答。1、logstash-input-jdbc 的同步原理是什么?(1)、对于全量同步依
2016-06-30 20:47:01 20840 20
原创 mysql 与elasticsearch实时同步常用插件及优缺点对比
1. 目前业界有以下几个插件实现ES与Mysql的同步操作。|序号 | 插件名称 |地址 | ——:———————— :————————————————- | 1 | elasticsearch-jdbc | https://github.com/jprante/elasticsearch-jdbc | ——:———————— :————————————————- |
2016-06-27 21:53:06 19569 1
原创 go-mysql-elasticsearch实现mysql 与elasticsearch实时同步深入详解
引言:go-mysql-elasticsearch 是国内作者开发的一款插件。测试表明:该插件优点:能实现同步增、删、改、查操作。不足之处(待完善的地方): 1、仍处理开发、相对不稳定阶段; 2、没有日志,不便于排查问题及查看同步结果。 本文深入详解了插件的安装、使用、增删改查同步测试。1. go-mysql-elasticsearch 插件安装步骤1:安装goyum install go步骤
2016-06-27 21:36:16 23790 12
原创 logstash-input-jdbc实现mysql 与elasticsearch实时同步深入详解
引言:elasticsearch 的出现使得我们的存储、检索数据更快捷、方便。但很多情况下,我们的需求是:现在的数据存储在mysql、oracle等关系型传统数据库中,如何尽量不改变原有数据库表结构,将这些数据的insert,update,delete操作结果实时同步到elasticsearch(简称ES)呢? 本文基于以上需求点展开实战讨论。1.对delete操作的实时同步泼冷水到目前为止,所有
2016-06-23 22:39:17 56965 134
原创 程序员,如何写好文档?
听说要写文档,程序员的第一反应是:为什么要写文档?不写!程序员的我们善于编码、善于讨论方案、争辩技术,大多不善于交流、尤其不善于写文档。记得我们团队有的童鞋的周报就一句话:修改bug:TDXXXX,TDXXX2,TDXXX3…. 那么问题就来了,程序要要不要写文档?为什么要写文档?如何写好文档。1、文档有哪些?沟通纪要、会议纪要、周报、工作总结、需求文档、总体设计文档、详细设计文档、单元测试文档、
2016-06-19 16:16:06 11135 3
原创 毕业三年,初心你忘记了吗?
工作三年,由于各种因素,总感觉少了刚毕业的尽头和冲劲。 出发的久了,该停下来理一理当时为什么要出发? 特翻箱倒柜,找到了13年刚毕业入职写过的两篇文章。第一篇是入职培训后小结;第二篇是架构师访谈录。 现在读来,别有另一番滋味。 常读常新,以此再鼓励自己:不忘初心、方得始终!一滴水、一片海——研发培训心得“一滴水怎么样才能不干涸,放在空中会蒸发,放在土壤会被埋没,而只有放入大海才永远不会干涸…
2016-06-19 00:04:45 3329 1
原创 elasticsearch-jdbc实现MySQL同步到ElasticSearch深入详解
1.如何实现mysql与elasticsearch的数据同步?逐条转换为json显然不合适,需要借助第三方工具或者自己实现。核心功能点:同步增、删、改、查同步。2、mysql与elasticsearch同步的方法有哪些?优缺点对比?目前该领域比较牛的插件有:1)、elasticsearch-jdbc,严格意义上它已经不是第三方插件。已经成为独立的第三方工具。https://github.com/jp
2016-06-16 20:43:07 89106 50
原创 没有需求,我们开发个毛?
非标题党,最近接手公司一个新项目。该项目已经另一个同事接手一年多,有需求文档、架构设计、用户提供的方向文档等资料。看似资料很多。但真正跟两个资深同事去问:该项目的具体需求点到底是什么?他们说不清楚,并且说用户也不清楚。 你有没有碰到过这种奇葩情况?你是如何解决的? 1、反思同事为什么接手项目一年,需求都没有定?反思后,总结原因如下:1.1 商务合作形式一直没彻底谈拢。1)高层只是签署框架合作协议
2016-06-01 23:57:09 4857
Windows下libevent C++封装类实现
2016-12-11
C++内部培训讲义
2016-08-07
libcurl.lib下载(32bit和64bit)
2015-09-17
MFC动态划线实现源码
2013-03-30
(可视化文件消息一体化收发Socket实现V0.1说明文档
2013-03-17
可视化文件消息一体化收发Socket实现V0.1
2013-03-17
Windows Sockets 规范及应用
2010-12-20
路由器交换机配置命令详解.doc
2010-04-18
C++ 笔试面试宝典2009版.doc
2010-04-18
? Kerberos认证相关问题思路请教:
2013-11-03
求samba下的rpcclient工具使用方法?
2013-09-17
TA创建的收藏夹 TA关注的收藏夹
TA关注的人