由于docker虚拟化的特殊性导致日志收集方案的多样性和复杂性下面接收几个可能的方案
这个方案各大公司都在用只不过传输方式大同小异
中间件使用kafka是肯定的,kafka的积压与吞吐能力相当强悍,其实kafka就是专门为传输日志设计的,链路当中可以对日志进行压缩等。
这里与方案四不同的地方除了中间件不一样之外就是这里的日志输出是容器输出,不再是应用推送日志了!这样和应用没有关系。
使用docker容器部署之后因为容器和微服务app是一体的,app应用日志输出是可以体现到整个容器。
中间件日志传输与filebeat等扫描日志文件形式的日志传输的不同除了有中间环节不一样,其他就是使用方便,容器区分与日志区分很简单方便
其他方案见链接