Apache Flink Prometheus Connector 安装与使用指南

Apache Flink Prometheus Connector 安装与使用指南

flink-connector-prometheusApache flink项目地址:https://gitcode.com/gh_mirrors/fl/flink-connector-prometheus

目录结构及介绍

在克隆了 Flink Prometheus Connector 的仓库之后, 你会看到以下主要的目录和文件:

• asf.yaml: 通常用于管理项目元数据的 YAML 文件.
• gitignore: 配置 Git 忽略模式的文件.
• LICENSE: 包含项目使用的许可证类型的信息文件.
• NOTICE: 提供项目中使用的第三方组件版权和许可声明的文件.
• README.md: 主要的 Markdown 文档, 描述了项目的目的, 特性以及如何构建和运行该连接器.

此外, 还有一个重要的子目录:

• flink-prometheus-aws-request-signer: 存放 Amazon Managed Prometheus 请求签名实现的相关代码. 此包将遵循独立版本控制以匹配连接器的主要次要版本, 具有兼容的签名API.

启动文件介绍

尽管在库根目录下没有明显的启动脚本或文件, 编译过程（通过执行 mvn clean package -DskipTests）将产生可执行的 JAR 文件, 可被部署于实际环境中进行测试或生产使用.

这些 JAR 文件位于各个模块的目标目录中 (target 文件夹), 核心功能依赖于此. 对于开发和测试目的, 你需要利用这些编译产物来创建和运行应用程序, 或者以插件的形式集成到更大的 Flink 环境中去.

配置文件介绍

配置 Flink Prometheus 连接器时, 你可以通过以下方式指定参数:

在代码中构造连接器时设置属性

// 使用流沉降的方法设置Prometheus远程写入URL和其他必要的请求属性 
stream.sinkTo(PrometheusSink.builder()
    .setPrometheusRemoteWriteUrl("endpoint-url")
    .setRequestSigner(new AmazonPrometheusRequestSigner(
        PropertiesBuilder.buildAWSCredentials())
    .build());

此示例展示了如何设定PrometheusSink的远程写入端点以及定义一个AmazonPrometheusRequestSigner对象, 用以处理AWS身份验证相关的事宜.

如果你打算将此连接器配置为直接与Amazon Managed Prometheus服务交互, 则需要在Properties对象中添加如下的 AWS 凭证和区域设置：

• AWS_ACCESS_KEY_ID
• AWS_SECRET_ACCESS_KEY
• AWS_REGION

然后传递这些设置给 AmazonPrometheusRequestSigner 构造函数中的 requestSignerProperties 参数.

请注意, 生产环境应用应避免硬编码敏感凭证并考虑从更安全的位置加载它们, 如系统环境变量或Kubernetes Secret. 最后更新日期: Sep 24 2023

---

感谢你的耐心阅读! 如果有任何疑问或需求进一步解释的地方, 欢迎反馈. 我们期待着帮助你在数据处理旅程中顺利前行! 以上就是今天的内容了, 希望对你的学习之旅有所帮助. 祝您万事如意, 天天开心!

---

参考文献 & 致谢: Apache Flink
Apache Flink Prometheus Connector Repository
如果您对我们的教程感兴趣并希望获得更多的技术指导和支持, 不要犹豫—请随时联系我们在邮件列表上的开发者和社区成员. 我们乐意为您答疑解惑!
Apache Flink Prometheus Connector Team 版权所有 © 2023 敬请持续关注即将发布的教程和案例研究. 我们期待您的访问. 再见, 并期待下次见面! 如果您喜欢这篇教程并且想要支持我们团队继续创作更多高质量的资源, 考虑分享它给你的朋友和同事, 或是赞助我们! 您的支持对我们来说意义重大. 再见, 愿所有美好与您同行!

flink-connector-prometheusApache flink项目地址:https://gitcode.com/gh_mirrors/fl/flink-connector-prometheus