java
文章平均质量分 95
mozhw
万丈高楼平地起
展开
-
时间窗口(Time Windows)的原理和使用
概述flink中支持多种窗口,包括:时间窗口,session窗口,count窗口等,本文简单介绍这些窗口的原理,并通过例子说明如何使用这些窗口。时间窗口(Time Windows)最简单常用的窗口形式是基于时间的窗口,flink支持两种时间窗口:一种是翻滚时间窗口(tumbling time window) 一种是滑动时间窗口(sliding time window)翻滚时间窗口(tumbling time window)翻滚时间窗口的窗口是固定的,比如设定一个1分钟的时间窗口,该时原创 2020-11-03 16:26:13 · 16785 阅读 · 0 评论 -
flink入门部署demo
flink 本地部署wget https://mirrors.bfsu.edu.cn/apache/flink/flink-1.11.2/flink-1.11.2-bin-scala_2.11.tgz[hadoop@slave1 soft]$ tar -zxvf flink-1.11.2-bin-scala_2.11.tgz[hadoop@slave1 soft]$ cd flink-1.11.2[hadoop@slave1 flink-1.11.2]$ pwd/home/hadoop/sof原创 2020-11-03 11:50:13 · 220 阅读 · 0 评论 -
周所在月周数
背景:每个月第一个周一作为第一周/** * 获取月首个周一日期 * @param monthStr * @return */ public static String findFirstMonthMondayDate(String monthStr) { try { Calendar cal = Calendar.getInstance(); Date firstMonthMondayDate = format.parse(monthStr + "01"); c原创 2020-10-30 18:00:37 · 129 阅读 · 0 评论 -
zookeeper总结
zookeeper,是一个分布式服务框架,是Apache Hadoop 的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。每个子目录项如 NameService 都被称作为 znode(目录节点),和文件系统一样,我们能够自由的增加、删除znode,在一个znode下增加、删除子znode,唯一的不同在于znode是可以存储数据的。有四种类型的znode: PERSISTENT-持久化目录节点...原创 2020-10-22 15:11:52 · 116 阅读 · 0 评论 -
centos 7+hadoop 2.7.3
hadoop 2.7.3 maven protobuf zookeeper ssh原创 2020-07-21 13:55:36 · 978 阅读 · 0 评论