flink
flink
赢一把就睡
做一件事最好的时间是十年前,其次是现在
展开
-
docker安装influxdb
docker pull quay.io/influxdb/influxdb:v2.0.4 docker run -p 8086:8086 --name=influxdb1 influxdb docker exec -it influxdb1 /bin/bash //创建用户名,密码 create user "root" with password 'root1234' with all privileges //创建数据库 create database flink; //创建保留的策略,这里是保留2周的.原创 2021-03-23 15:32:05 · 346 阅读 · 0 评论 -
flink 任务提交时之hadoop jar包冲突
1. Exception in thread "main" java.lang.NoSuchMethodError: org.apache.hadoop.security.authentication.util.KerberosUtil.hasKerberosTicket(Ljavax/security/auth/Subject;)Z at org.apache.hadoop.security.UserGroupInformation.<init>(UserGroupInformation原创 2021-01-26 17:29:18 · 953 阅读 · 0 评论 -
flink calcite 解析sql中的表 java语言实现
从网上看的的一个scala版本的实现,使用java翻译过来的 import org.apache.calcite.config.Lex; import org.apache.calcite.sql.SqlCall; import org.apache.calcite.sql.SqlIdentifier; import org.apache.calcite.sql.SqlInsert; import org.apache.calcite.sql.SqlJoin; import org.apache.ca原创 2020-10-18 19:25:56 · 784 阅读 · 0 评论 -
flink 基础及架构预览
一. flink是什么 flink是处理有界数据流和无界数据流的一个框架,是有状态的计算的分布式处理引擎(官网原文:Apache Flink is a framework and distributed processing engine for stateful computations overunbounded and boundeddata streams) 有界数据流:可以理解成传统的数据库里的或者一个文件里的数据,在某个时间点段内,这些数据都不会在变化,可以量化的数据流...原创 2020-09-14 23:07:48 · 214 阅读 · 0 评论 -
flink on yarn 高可用部署
Flink-conf.yaml high-availability: zookeeper high-availability.zookeeper.quorum: localhost:2181 high-availability.storageDir: hdfs:///flink/recovery high-availability.zookeeper.path.root: /flink ...原创 2020-05-02 19:29:11 · 1044 阅读 · 5 评论 -
flink源码打包
1.下载 2.打包命令 mvn clean install -Dmaven.test.skip=true-Dmaven.javadoc.skip=true -Dcheckstyle.skip=true -Drat.skip=true原创 2020-03-09 12:09:12 · 1002 阅读 · 0 评论 -
Flink standalone安装
1.环境准备 1.1操作系统 flink只能运行在类linux环境上,如苹果系统,red-hat等系统 1.2软件 java需要配置1.8以上的版本 如果要把flink部署在多个节点上,需要在各个节点间配置免密的ssh,并且安装的时候flink的安装目录需一致 2.配置flin...原创 2020-02-17 17:30:12 · 253 阅读 · 0 评论