日志收集初理解<一>

理解的日志主要有服务日志和数据库binlog

具体的理解也不清楚，大致的结构为

服务日志：Application-> LogAgent-> LogCollector-> Kafka

数据库binlog：DataBase-> Canal-> Kafka

binlog日志用于记录所有更新了数据或者已经潜在更新了数据（例如，没有匹配任何行的一个DELETE）的所有语句。语句以“事件”的形式保存，它描述数据更改。

canal 是阿里巴巴mysql数据库binlog的增量订阅&消费组件。

转载于:https://my.oschina.net/u/3853488/blog/1815249