1.Available Task Slots究竟是干什么用的翻译过来就是可用任务槽,当我们使用flink的页面启动了一个任务后就会发现这个东西会变为0,当没有Available Task Slots的时候再启动任务就会报错,没有可用的Slots
看来要想任务顺利执行,首先要保证slot数量够用,目前机器内存是够用的,那么就把slot数量调大些吧
根据官方文档的指导,应该修改conf目录下的flink-conf.yaml文件中taskmanager.numberOfTaskSlots的值,如下图红框所示,文档地址:https://ci.apache.org/projects/flink/flink-docs-master/ops/config.html
首先 看一下taskManager 点第一个可以看到tm的详细配置信息,内存,cpu等资源信息
点击第二个logs,就可以看到taskmanage的日志,但是会比较卡,因为所有的日志都在一个文件里面,接着主要说一下第三个stdout,这里面可以看到我们打印的结果信息,这里为了方便看,我向kafka写了一些数据,如下
然后看一下jobmanager的logs是我们当前任务的check-point
但是为什么jobmanager的stdout却没有任何的输出呢?这可就奇怪了(这个后续观察观察)
submit new job就很简单了就是上传一个jar包。然后指定主目录,然后指定并行度,指定环境变量,指定checkpoint的存放位置
相对比来说好像flink的图形化界面是比较简单一些的,但是相对来说也是太简单了,指标也比较少,但是该有的还是有的。