java与flink,Apache Flink的吞吐量和延迟

我们在纱线上运行的 生产环境 流工作中运行自定义指标,如米,计 .

以下是步骤:

对pom.xml的额外依赖

org.apache.flink

flink-metrics-dropwizard

${flink.version}

我们使用的是1.2.1版

然后将meter添加到MyMapper类 .

import org.apache.flink.api.common.JobExecutionResult;

import org.apache.flink.api.common.functions.RichMapFunction;

import org.apache.flink.configuration.Configuration;

import org.apache.flink.dropwizard.metrics.DropwizardMeterWrapper;

import org.apache.flink.metrics.Meter;

import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;

public class Test {

public static void main(String[] args) throws Exception {

StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

env

.readTextFile("/home/LizardKing/Documents/Power/Prova.csv")

.map(new MyMapper())

.writeAsCsv("/home/LizardKing/Results.csv");

JobExecutionResult res = env.execute();

}

private static class MyMapper extends RichMapFunction {

private transient Meter meter;

@Override

public void open(Configuration parameters) throws Exception {

super.open(parameters);

this.meter = getRuntimeContext()

.getMetricGroup()

.meter("myMeter", new DropwizardMeterWrapper(new com.codahale.metrics.Meter()));

}

@Override

public Object map(String value) throws Exception {

this.meter.markEvent();

return value;

}

}

}

希望这可以帮助 .

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值