Flink 窗口 概述 Flink是一种流式计算引擎,主要是来处理无界数据流的,数据源源不断、无穷无尽。想要更加方便高效地处理无界流,一种方式就是将无限数据切割成有限的“数据块”进行处理,这就是所谓的“窗口”(Window)。【把窗口理解成一个“桶”,Flink则可以把流切割成大小有限的“储存桶”,把数据分发到不同的桶里,当窗口结束,就对每一个桶的数据进行收集处理】原理:建立一个窗口,在固定的额时间段内不断收集数据,到达结束时间的时候窗口结束收集数据,生成结果,窗口销毁。
在IDEA上使用Flink 无法消费Kafka 【一段时间后报错:TimeoutException: Timed out waiting for a node assignment. Call: d】 记录自己在学习Flink中遇到一个问题,在IDEA上写Flink消费者,想要消费Kafka,可是在Kafka生产者模式下生产数据却无法正常被消费确认了消费Kafka的服务器参数(setBootstrapServers),和消费主题(setTopics)无误后确认了zookeeper和kafka已经开启