52、Flink 使用 Parametertool 获取应用参数代码示例

1、获取配置参数-1

import org.apache.flink.api.java.utils.ParameterTool;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;

import java.io.IOException;
import java.util.Map;

public class _01_ParameterToolReadArgs {
    public static void main(String[] args) throws IOException {
        StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

        // 配置值来自 .properties 文件
//        String propertiesFilePath = "*";
//        ParameterTool parameterTool = ParameterTool.fromPropertiesFile(propertiesFilePath);

//        File file = new File("*");
//        ParameterTool parameterTool = ParameterTool.fromPropertiesFile(file);

//        FileInputStream fileInputStream = new FileInputStream(new File("*"));
//        ParameterTool parameterTool = ParameterTool.fromPropertiesFile(fileInputStream);

        // 配置值来自命令行
        // 输入
        // --input hdfs:///mydata
        // --elements 42
        // 输出
        // input=hdfs:///mydata
        // elements=42
//        ParameterTool parameterTool = ParameterTool.fromArgs(args);

        // 配置值来自系统属性,VmOptions
        // 输入
        // -Dinput=hdfs:///mydata
        // 输出
        // input=hdfs:///mydata
        ParameterTool parameterTool = ParameterTool.fromSystemProperties();

        for (Map.Entry<String, String> entry : parameterTool.toMap().entrySet()) {
            if ("input".equals(entry.getKey())) {
                System.out.println(entry.getKey() + "=" + entry.getValue());
            }
        }
    }
}

2、获取配置参数-2

import org.apache.flink.api.common.functions.RichMapFunction;
import org.apache.flink.api.java.utils.ParameterTool;
import org.apache.flink.streaming.api.datastream.DataStreamSource;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;

import java.util.Map;

/**
 * 输入 --input myGlobalParamsInput
 * 输出 myGlobalParamsInput
 */
public class _02_ParameterToolGlobalParams {
    public static void main(String[] args) throws Exception {
        StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

        ParameterTool parameters = ParameterTool.fromArgs(args);
        env.getConfig().setGlobalJobParameters(parameters);

        DataStreamSource<Integer> source = env.fromData(1, 2, 3);
        source.map(new MyRichMapFunc()).print();

        env.execute();
    }
}

class MyRichMapFunc extends RichMapFunction<Integer, String> {

    @Override
    public String map(Integer value) throws Exception {
        Map<String, String> globalJobParameters = getRuntimeContext().getGlobalJobParameters();
        return globalJobParameters.get("input");
    }
}
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

猫猫爱吃小鱼粮

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值