tenmg-CSDN博客

原创参加阿帕奇“代码上的社区亚洲 2023”有感

大会的演讲内容充实，中英文分布均匀，主题环环相扣。与会嘉宾既包括阿帕奇基金会的董事及一些重要成员，又包含负责在亚洲、在中国运营的主要负责人和工作人员，同时还有很多开源社区的主要贡献者。主要包括Doris 2.0日志存储分析替换ES的解决方案，自如基于StreamPark的实时打宽应用，字节基于Calcite的SQL字段血缘及精细化权限管控的实践，Flink K8S Operator自动任务调优技术，等等。参加这次大会除了技术方面的收获之外，更重要的对开源事业有了新的理解，同时也被开源力量所震惊。

2023-09-12 09:33:29 291

原创如何实时同步数据到StarRocks

我们知道，是StarRocks基于Doris开发的，它在多表连接查询的性能方面引领OLAP市场，是一个很好用的结构化数据仓库。但是一直没有很好的工具能够实现业务数据库的数据实时同步到StarRocks分布式数据仓库集群中，本文将带领读者一起来通过flink-jobs的最佳实践来构建一个易于使用和运维的，异构数据库实时同步到StarRocks集群的方案。阅读前提阅读本文除了需具备StarRocks相关知识之外，还会涉及Flink、Debezium、Kafka、Zookeeper、MySQL（或者Pos

2021-11-22 11:49:15 3838 2

原创玩转Flink流批一体计算引擎

Flink简介Flink是一个优秀的流式处理引擎，不仅拥有完善的流式处理解决方案，而且将批处理视为有界流，完美实现了流批处理一体化。Flink能干啥流式分析Flink可持续不断得处理事件流，并明确支持一下三种时间语义：事件时间(event time)：事件产生的时间，记录的是设备生产(或者存储)事件的时间；摄取时间(ingestion time)： Flink 读取事件时记录的时间；处理时间(processing time)： Flink pipeline 中具体算子处理事件的

2021-10-20 16:48:13 914

原创 nginx安装部署

1.下载安装包wget http://nginx.org/download/nginx-1.18.0.tar.gz2.解压安装包tar -zxvf nginx-1.18.0.tar.gz3.移动到指定目录mv nginx-1.8.0 /usr/local/nginx4.安装编译插件yum install -y pcre pcre-devel openssl openssl-devel gcc gcc gcc-c++ ncurses-devel perl5.切换目录

2021-03-24 13:04:02 1765 6

原创 SpringBoot应用集成poi 5.0.0启动报错java.io.FileNotFoundException问题解决

目录问题描述：问题描述最近一个基于SpringBoot的WEB项目因为poi升级到5.0.0导致启动报了很多java.io.FileNotFoundException，全是batik相关的依赖包找不到。但是查看本地运行仓库，这些包都是有的，只是org.apache.tomcat.util.scan.StandardJarScanner这个类扫描的路径出现了错误。一开始以为是pom依赖配置的问题，但费劲心思调整pom都无法解决。详细报错如下：2021-03-16 13:02:53 [r.

2021-03-16 13:36:12 2507 1

原创利用sparktool解决Spark SQL传参难题

一、Sparktool简介Sparktool是运行Spark SQL的中间件，能够解决Spark SQL传参的难题。刚开始使用Spark时，发现分布式环境下传统的ORM框架无法正常使用，于是诞生了Sqltool；刚开始使用Spark SQL时，发现其不能像JDBC那样传参，于是sqltool的早期版本封装了SQL引擎以及相关的数据加载器。但是，Sqltool是一个通用的动态结构化查询语言（DSQL）解析和执行的框架，并非只能应用于Spark程序中。因此，分离专门应用于Spark程序之上的框架成为必然，S

2021-02-18 16:34:47 1300

原创 Echarts海南地图过小解决方案

if(显示海南地图) { //由于海南地图包括南海及南海诸岛在内的大片区域，所以显示海南地图时，要将地图放大，并设置海南岛居中显示option.series[0].center = [109.844902, 19.0392];option.series[0].layoutCenter = ['50%', '50%'];option.series[0].layoutSize = "600

2017-03-08 15:22:10 5759 1

csdn779343484的博客