![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
BD
文章平均质量分 65
BD
iceland9
这个作者很懒,什么都没留下…
展开
-
kettle源码远程debug调试
在java执行参数的末尾添加debug参数 address为debug端口。windows下,修改bat执行文件,同理 linux修改sh执行文件。一、kettle启动时指定debug端口号。然后点击Spoon.bat启动kettle。二、idea配置debug并启动。三、面板拖入要测的功能并测试。原创 2023-06-29 16:51:42 · 458 阅读 · 0 评论 -
kettle架构图
2)中间是开发层,在开发阶段我们接触最多的就是通过spoon进行开发,通过Spoon.bat或者spoon.sh即可启动客户端,开发文件调试之前要先保存,开发阶段可以选择保存到本地,保存之后的文件后缀名有两种:转换文件后缀名是ktr,job文件后缀名是kjb。4)通过spoon研发好的kettle文件,部署到测试环境之后,可以通过命令行工具(pan/kitchen),或者通过Carte服务进行部署运行,后续会单独进行讲解。1)最底层的是kettle的核心引擎层,相关的jar在lib目录下。原创 2023-06-28 13:57:14 · 339 阅读 · 0 评论 -
Kettle的安装以及简单使用
ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据, ETL是BI(商业智能)项目重要的一个环节。下载好后将文件解压,将里面的 mysql-connector-java-8.0.28.jar 放到,kettle解压的lib下面( \data-integration\lib)。1) 新建转换:可以直接Ctrl+N,也可以右键转换新建,双击转换也行。执行成功之后,可以在mysql查看,stu2的数据。原创 2023-01-11 18:13:10 · 4379 阅读 · 0 评论 -
Kettle源码启动运行
可以看到kettle的压缩包pdi-core-ce-9.3.0.0-SNAPSHOT.zip,解压后,可以看到Spoon.bat文件,在控制台执行定位到解压目录,执行【spoon.bat】即可在windows环境下启动kettle客户端。在以下路径中找到pentaho-kettle-master/ui/src/main/java/org/pentaho/di/ui/spoon/Spoon.java,右击,选择【run ‘Spoon.main()’】,启动它。kettle的所需依赖包,在国内没有镜像。原创 2023-01-16 22:21:44 · 1974 阅读 · 5 评论 -
DataX使用入门
DataX 实现了包括 MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS 等各种异构数据源之间高效的数据同步功能。下载对应的MySQL驱动版本:https://static.runoob.com/download/mysql-connector-java-8.0.16.jar。方法二、下载DataX源码,自己编译:DataX源码。原创 2023-01-17 15:33:30 · 3053 阅读 · 0 评论