Flume NG源码分析（三）使用Event接口表示数据流

最新推荐文章于 2022-09-07 00:33:59 发布

iter_zc

最新推荐文章于 2022-09-07 00:33:59 发布

阅读量2.5k

点赞数

分类专栏： Java Flume NG Flume NG源码分析文章标签： Flume NG Event

本文链接：https://blog.csdn.net/iter_zc/article/details/46519119

版权

本文深入探讨Flume NG中的核心组件Event，它是数据流在Source、Channel和Sink之间传递的基础。Event通过header和body两部分封装数据，常用于如ExecSource这样的组件处理本地日志数据。

摘要由CSDN通过智能技术生成

Flume NG有4个主要的组件：

Event表示在Flume各个Agent之间传递的数据流

Source表示从外部源接收Event数据流，然后传递给Channel

Channel表示对从Source传递的Event数据流的临时存储

Sink表示从Channel中接收存储的Event数据流，并传递给下游的Source或者终点仓库

这篇看一下Event接口表示的数据流。Source, Channel, Sink操作的数据流都是基于Event接口的封装。

public interface Event {

  /**
   * Returns a map of name-value pairs describing the data stored in the body.
   */
  public Map<String, String> getHeaders();

  /**
   * Set the event headers
   * @param headers Map of headers to replace the current headers.
   */
  public void setHeaders(Map<String, String> headers);

  /**
   * Returns the raw byte array of the data contained in this event.
   */
  publ