flume channle 参数

本文深入解析Flume内存通道的关键参数,如capacity、transactionCapacity及byteCapacity等,探讨它们如何影响数据处理性能。适用于追求高性能且能接受数据丢失风险的场景。
摘要由CSDN通过智能技术生成

,batchsize <=transactionCapacity<=capacity
batchsize 一次从channle transactionCapacity取出多少发送
capacity 最大容量
transactionCapacity 事物容量,默认100,take失败后丢回此队列
capacity 内存最大容量 默认100
batchsize 一次取出多少,默认100

1、内存通道memory-channel

时间存储在内存队列中,对于性能要求高且能接受agent失败时数据丢失的情况是很好的选择

capacity:默认该通道中最大的可以存储的event数量是100,

trasactionCapacity:每次最大可以source中拿到或者送到sink中的event数量也是100

keep-alive:event添加到通道中或者移出的允许时间

byte**:即event的字节量的限制,只包括eventbody

a1.channels = c1
a1.channels.c1.type = memory
a1.channels.c1.capacity = 10000
a1.channels.c1.transactionCapacity = 10000
a1.channels.c1.byteCapacityBufferPercentage = 20
a1.channels.c1.byteCapacity = 800000

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值