Flume--Event定义及源码解析

奈斯Ekko

于 2019-10-18 11:36:58 发布

阅读量3.6k

点赞数 3

分类专栏： Flume 文章标签： Flume Event

本文链接：https://blog.csdn.net/weixin_42946624/article/details/102622590

版权

Flume中的Event是一行文本内容反序列化后的结构，最大2048字节，超过部分会切割。Event包含header（map类型）和body（字节数组）。header用于传输额外信息，body存储实际数据。Event产出时，可通过header进行定制和多路复用，源端设置不同key-value对，然后在sink端依据header分流到不同输出，但不建议在Flume内部修改body。利用拦截器自定义header和多路复用通道实现高效分流。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Flume基本构成与Event结构

1. Event定义

一行文本内容被反序列化成一个event。event的最大定义为2048字节，超过会被切割放到下一个event中。

public interface Event {
   
 
  /**
   * Returns a map of name-value pairs describing the data stored in the body.
   */
  public Map<String, String> getHeaders();
 
  /**
   * Set the event headers
   * @param headers Map of headers to replace the current headers.
   */
  public void setHeaders(Map<String, String> headers);
 
  /**
   * Returns the raw byte array of the data contained in this event.
   */
  public byte[] getBody();
 
  /**
   * Sets the raw byte array of the data contained in this event.
   * @param body The data.
   */
  public void