Go小项目

本文介绍如何使用Go语言实现LogAgent,包括利用tailf读取日志,通过sarama将日志发送到Kafka。涉及的技术有tail库、Shopify sarama客户端和hpcloud的tail工具。
摘要由CSDN通过智能技术生成

写一个小日志采集系统

这个玩具的架构图如下:
在这里插入图片描述
自己实现一下 Log Agent \ Sys Agent \ Log transfer \ Sys transfer四个模块:

一、Log Agent

流程:

  • 读日志 : tailf 第三方库 ( github/hpcloud/tail)
  • 向kafka写日志: samara

注:

  • go get github.com/Shopify/sarama@v1.19.0 【这个是 go 的kafka客户端】
  • go get github.com/hpcloud/tail 【获取 tail 工具的包】

二、

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值