- 博客(4)
- 收藏
- 关注
原创 PyFlink基础应用之kafka
PyFlink基础应用之kafka运行环境PyFlink需要特定的Python版本(3.5、3.6或3.7)。运行一下命令,以确保Python版本满足要求。$ python -VPyFlink已经发布到PyPi,可以直接安装:$ python -m pip install apache-flink拷贝三个jar包到FLINK_HOME/lib下。flink-connector-kafka_2.11-1.11.0.jarflink-sql-connector-kafka_2.11-1.11.0
2020-08-04 10:47:26 2876 4
原创 Flink自定义Catalog之oracle
分析Flink通过JdbcCatalog发起查询过程源代码,必定调用tableExists方法,该方法中级联调用获取数据库和每个库的表,如果表非常多,有一定的性能损耗(OracleCatalog实现中做了优化)。在getLimitClause方法中使用oracle12("FETCH FIRST " + limit + " ROWS ONLY")的语法,而产品线大量使用oracle11版本,需要改造为更通用的语法("WHERE ROWNUM
2023-03-16 12:24:17 692 1
原创 2020-12-04
标题pyflink消费kafka-connect-jdbc消息(带schema)1、数据接入通过kafka的restFul接口创建连接mysql的连接器并启动。{ "name": "mysql_stream_test", "config": { "connector.class": "io.confluent.connect.jdbc.JdbcSourceConnector", "timestamp.column.name": "", "
2020-12-04 17:00:07 147 1
原创 构建单页应用的免编译后台管理模板(简)
构建单页应用的免编译后台管理模板(Bootstrap4+vue+vue-router)单页应用(single page web application,SPA)的实践越来越多,尤其是vue-router的流行,如虎添翼,SAP的设计、开发更简单。本文只探讨vue全家桶的研发方案。Vue-cli配合npm+webpack是官网推荐的,下文统一使用vue-cli统称该研发方案。Vue-cli...
2018-09-02 16:38:27 1909
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人