flink
flink
仙道Bob
我曾经跨过山和大海 也穿过人山人海 直到看见平凡才是唯一的答案
展开
-
flink内存模型介绍及优化
看这个:配置 Flink 进程的内存 | Apache Flink原创 2022-02-11 16:22:48 · 528 阅读 · 0 评论 -
flink从kafka读数据demo(java)
1.结构flink-demo--src --main --java --com.bob.demo --App --DemoRichSink --FlinkDemo --resources --consumer.properties --start.sh --pom.xml2.具体代码2.1 pom.xml<?xml version="1.0" encoding="UTF-8原创 2021-11-22 20:29:21 · 1310 阅读 · 0 评论 -
kafka踩坑:kafka内网地址nat后,consumer无法消费问题,及解决方案
一、项目背景二、问题描述三、解决方案四、实施五、总结原创 2021-11-20 16:34:55 · 6463 阅读 · 3 评论 -
flink并行度
【17】Flink 之 并行度(Parallel)及设置_努力学习的大小宝-CSDN博客_flink设置并行度原创 2021-11-12 18:43:45 · 1278 阅读 · 0 评论 -
flink web页面中文乱码解决
flink on yarn运行,web页面task managers logs和stdout中文显示均乱码(全都问号),解决办法如下:修改flink-1.11.0/conf/flink-conf.yaml增加一行: env.java.opts: "-Dfile.encoding=UTF-8"重启flink程序即可原创 2021-10-29 16:17:51 · 2627 阅读 · 2 评论 -
Flink1.11.2 on YARN滚动日志配置
Flink1.11 on Yarn默认日志是log4j MainAppender非滚动的。如果是流式任务,任务就会常驻,这样日志文件会越来越大(尤其是Task Managers日志),不加处理磁盘空间就会越占越大,页面日志加载响应也会卡顿。所以可以对Flink的日志做一个滚动配置,这样就可以控制日志文件大小。flink on yarn用的log配置默认是flink/conf/log4j.properties配置文件,可修改为:# 滚动日志的配置# This affects logging fo.原创 2021-04-14 20:29:41 · 1741 阅读 · 0 评论 -
Flink on YARN应用启动全流程
https://baijiahao.baidu.com/s?id=1645634162871796956&wfr=spider&for=pc原创 2021-04-13 20:59:44 · 369 阅读 · 0 评论