Kettle
x²+(y-√³x²)²=1
你的穷途末路,却带给其他人未知的过往。
展开
-
kettle9.0+ 连接Hadoop报错
kettle bug原创 2022-06-03 17:10:42 · 1204 阅读 · 3 评论 -
kettle将文件存储为orc或者parquet
以下是在kettle8.3版本进行测试的。在kettle9.2版本,无法使用组件Windows本地得配置Windows-Hadoop的环境变量orc设置orc output的压缩方式,下面是设置的snappy压缩可以不设置。有个bug是,orc无法设置字段的编码。如果有中文数据,则会显示乱码parquet,可以设置UTF8设置压缩方式......原创 2022-05-24 23:49:19 · 1074 阅读 · 0 评论 -
kettle官网下载地址
下载地址:https://sourceforge.net/projects/pentaho/files/原创 2022-05-18 22:46:57 · 2149 阅读 · 0 评论 -
使用Kettle循环处理数据(方式二)
接上文:使用Kettle循环处理数据(方式一),觉得流程比较繁琐,又琢磨到一种批量执行的方式。下面是批量执行的全转换流程。目的是统计某一个库中前缀相同的表的数据量。1、获取表名:可以批量将某一个数据库下的所有表获取到。2、过滤记录:过滤表名前缀是 nic_newtrack 的表3、公式:使用 公式 组件,将表名拼接到需要执行的 SQL 语句中公式 组件填写的详细信息:"insert into tablecount select '"&[tablename]&"',c原创 2021-12-10 15:05:34 · 2656 阅读 · 1 评论 -
使用Kettle循环处理数据(方式一)
1、loop1_step1转换流程:详细配置如下:(1)“从结果获取记录”组件“字段名称”需要手动填写(2)“设置变量”组件:只有在点击“获取字段”时,变量名才会是大写的2、loop1_step2转换流程:详细配置如下:(1)“表输入”组件:(2)“表输出”组件3、loop1_job1作业流程:详细配置如下:(1)“转换”1组件:(2)“转换”2组件:4、loop1_step3转换流程:详细配置如下:(1)“Excel输入”组件:(2)“复制记录到结果”原创 2021-12-10 12:50:56 · 3752 阅读 · 2 评论 -
MySQL 批量加载组件使用
使用 MySQL 批量加载的时候,报下面的错误java.io.IOException: Cannot run program "mkfifo": CreateProcess error=2, 系统找不到指定的文件。MySQL 批量加载.0 - Cannot run program "mkfifo": CreateProcess error=2, 系统找不到指定的文件。这是因为这个组件要在 Linux 下运行,MySQL 批量加载时会创建一个命名管道 mkfifo,在 Windows 下是不支持的。原创 2021-08-31 10:43:36 · 340 阅读 · 0 评论 -
kettle实现数据库迁移(复制多表向导)
1、首先,新建一个转换并在 DB连接 下新建数据库连接依次打开“工具—向导—复制多表向导”乱码characterEncoding,utf8zeroDateTimeBehavior=convertToNull原创 2021-07-12 10:05:12 · 1890 阅读 · 10 评论 -
Kettle:Unable to get timestamp from resultset at index……
问题:kettle在 ”表输入“ 中预览数据的时候,报如下错误解决方式:在数据库配置的时候,设置该参数 zeroDateTimeBehavior=convertToNull原创 2021-07-12 10:04:14 · 2304 阅读 · 0 评论 -
kettle报错:Unexpected problem reading shared objects from XML file:null
问题:保存 kettle 转换的时候,报错 Unexpected problem reading shared objects from XML file:null解决方式:1、找到C盘目录下,C:\Users\Windows登陆的用户名\.kettle2、打开 shared.xml 文件,删除标签 <sharedobjects> 里面的内容如下图所示<?xml version="1.0" encoding="UTF-8"?><sharedobjects>原创 2020-12-29 11:27:08 · 1819 阅读 · 0 评论