kettle自动化作业

已于 2022-01-28 17:42:19 修改
阅读量2.2k 收藏 1
点赞数
分类专栏： Kettle 文章标签： 自动化 etl big data
于 2022-01-28 17:40:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43278973/article/details/122734387
版权

kettle自动化作业

  • kettle 同时跑两个ktr文件,使用 作业 实现；

  • local_oracle表输入到local_mysql表输出 ktr
    在这里插入图片描述

  • local_oracle表输入到local_mysql表输出2 ktr
    在这里插入图片描述

  • local_oracle表输入到local_mysql表输出 作业
    在这里插入图片描述

  • local_oracle表输入到local_mysql表输出 转换
    在这里插入图片描述

  • local_oracle表输入到local_mysql表输出2 转换
    在这里插入图片描述

  • kettle 同时跑两个ktr文件,使用 作业 SUCCESS !!!
    在这里插入图片描述

  • 输出的日志文件
    在这里插入图片描述

  • local_oracle ——>test ——>local_mysql ——>test ——test SUCCESS ！！！
    在这里插入图片描述

  • local_oracle ——>test ——>local_mysql ——>test ——test2 SUCCESS ！！！
    ——>test ——test2 SUCCESS ！！！
    在这里插入图片描述

辉哥的博客
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
kettle转换、作业日志自动添加进资源库配置解决方案
02-25
Kettle 转换、作业日志自动添加进资源库配置解决方案 Kettle 是一个功能强大的数据集成工具，提供了许多有用的功能，...该解决方案可以帮助我们实现 Kettle 转换或作业日志自动配置问题，提高工作效率和自动化程度。
kettle 用cmd bat来运行ktr和kjb
baidu_32078207的博客
05-14 2415
pan /file x:\xxx\xxx.ktr kitchen /file x:\xxx\xxx.kjb bat写法 新建文本文档 改后缀为.bat,加入下面内容 @echo off cmd /k "cd /d kettle文件根目录 && kitchen /file x:\xxx\xxx\xxx.kjb " pause 保存双击执行
kttle 新建作业执行多个转换job按并行和顺序执行
热门推荐
兰辉
11-01 1万+
因为数据库有接近300个表，为了防止意外情况，某个表同步失败，不影响其他大量表同步，所以考虑了拆分，将10个表作为一个脚本，就算一个脚本中的某一个表有问题，也只是影响本脚本中的10个表（一个脚本中一个表失败会中断本脚本的继续执行；当然你可以跳过错误，但是这样数据就不准确了 ）；所以转换脚本有30个脚本；但为了执行的时候不出错遗漏执行，我们新建一个作业，一键化执行所有脚本 1，顺序执行：意
job kettle 执行多次_kettle使用windows计划任务定时执行job
weixin_39621488的博客
12-20 397
借的图，开心目录：一、KETTLE定时在实际工作中的场景二、编写kettle.bat脚本三、新建windows定时计划一、KETTLE定时在实际工作中的场景在现实工作中，是不需要在本地配定时任务，因为这样不规范，不好把控项目。更多是开发写好程序，我们设置执行时间、执行频率。不过当程序报错时，还是需要自己在本地配任务，所以基础还是得掌握啦。当初同事给我讲定时任务时，自己一脸懵，也没学会……一直觉得定...
kettle使用命令行的方式执行多个job_Kettle实战：邮件发送附件
weixin_39669638的博客
12-03 761
kettle发送邮件，是指利用kettle分析出的数据，通过邮件的形式，发送给一个或多个收件人。这里主要介绍以附件的方式发送给一个或多个收件人，用到的Kettle组件会在各个步骤中来详细讲解。首先，需要建立一个转换（Transformation），生成邮件发送需要的附件。第一步：选择【表输入】组件，连接数据库，并编写sql语言，得到用户需要的数据；【表输入】组件：得到源数据；拖拽该组件至文件中，双...
kettle使用命令行的方式执行多个job_企业中常用的分布式任务调度平台XXL-JOB
weixin_39523887的博客
11-29 978
一：简介1.1 概述XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。官网地址 http://www.xuxueli.com/xxl-job/中文文档1.2 特性简单：支持通过Web页面对任务进行CRUD操作，操作简单，一分钟上手；动态：支持动态修改任务状态. 启动/停止任务，以及终止运行中任务，即时生效；调度中心HA(中心式)：调度采用中心式设计，...
生成kettle作业的Java代码.rar
12-06
3. 自动化：便于自动化部署和执行，例如在持续集成/持续部署（CI/CD）流程中。 总结起来，这个压缩包提供的Java代码示例展示了如何使用Kettle的Java API来创建和运行作业。通过这种方式，开发者可以更灵活地控制...
java集成kettle执行作业文件.rar
07-08
Java集成Kettle执行作业文件是将Java程序与Pentaho Data Integration（Kettle）工具结合，以实现数据处理和转换的自动化。Kettle是一款强大的ETL（Extract, Transform, Load）工具，它允许用户通过图形化界面创建...
sql server定时作业调用Kettle job出错的快速解决方法
12-16
在SQL Server环境中，有时我们需要利用定时作业来自动化执行一些数据处理任务，这通常涉及到集成其他工具，如Kettle（Pentaho Data Integration）。Kettle是一款强大的ETL（Extract, Transform, Load）工具，用于...
Kettle简单参数化配置连接数据库
04-19
在Unix/Linux环境下，我们可以使用Shell脚本来自动化Kettle作业的执行： 1. **创建Shell脚本**：编写一个名为“sh执行kettle文件.sh”的脚本，内容如下： ``` #!/bin/bash kitchen.sh -param:DB_URL=$1 -param:...
kettle开发篇-作业调度-Day8
qq_29061315的博客
12-06 2406
前言： 前面我们介绍了kettle的一些常用组件，同步方法，缓存机制及怎么去处理kettle出现的小问题。今天我们讲两种kettle中常用的作业调度方法，kettle作为一款ETL工具负责将数据从ODS层处理至DWD层，主要负责数据的清洗、转换工作。kettle其实只有2个功能组合即转换和作业，转换负责组件间的协调配合，作业负责任务的执行，但是我们怎么能让kettle自动将任务跑起来，自己完成数...
kettle中调度kitchen.bat后面接参数，写定时更新任务
凯奥的专栏
05-17 7357
先普及一点知识 Kettle是一个开源的ETL（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程）项目，项目名很有意思，水壶。按项目负责人Matt的说法：把各种数据放到一个壶里，然后呢，以一种你希望的格式流出。Kettle包括三大块： Spoon——转换/工作(transform/job)设计工具 (GUI方式) Kitchen——工作(job)执
kettle使用命令行来运行ktr和kjb
weixin_34088598的博客
03-24 764
1：cmd方式运行 1.ktr的运行：运行transformation文件是通过Pan.bat来运行的。 打开cmd命令行窗口，转到Pan.bat所在的目录，如d:\data-integration,然后执行文件的命令为：pan /file D:\etltest\EtltestTrans.ktr 2.kjb的运行：运行job文件是通过kitchen.bat来运行的。 打开cmd命令行窗口，...
job kettle 执行多次_KETTLE-命令行执行JOB
weixin_39754398的博客
12-20 475
1.Kitchen——作业执行器(后缀名：kjb)是一个作业执行引擎，用来执行作业。这是一个命令行执行工具，参数说明如下。-rep:Repositoryname任务包所在存储名-user:Repositoryusername执行人-pass:Repositorypassword执行人密码-job:Thenameofthejobtolaunch任务包名称-dir:Thedirectory(don't...
使用一个bat 执行另外单个或多个bat文件
wyd_88l的博客
02-09 5784
使用bat 批处理命令来执行另外的bat文件或exe文件
BAT 批处理脚本教程
最新发布
我的博客
05-05 8528
介绍命令1、REM 和 ::REM为注释命令，一般用来给程序加上注解，该命令后的内容不被执行，但能回显。其次, :: 也可以起到rem 的注释作用, 而且更简洁有效;但有两点需要注意：第一, 任何以冒号:开头的字符行, 在批处理中都被视作标号, 而直接忽略其后的所有内容。有效标号：冒号后紧跟一个以字母数字开头的字符串，goto语句可以识别。
job kettle 执行多次_java程序控制KETTLE JOB的执行
weixin_39517859的博客
02-06 437
有时候我们想在java程序中触发远程服务器上kettle job的执行，并且获得执行结果。kettle的carte提供了远程执行job和transfer的功能。我使用的kettle是6.1版本，部署在linux服务器上，没有使用资源库。下面介绍下各个步骤：为了方便以windows系统为例1、开启carte服务，在kettle安装目录下，运行Carte.bat,直接上图直接打Carte.bat后面不...
利用kettle完成两个数据库的记录整合
qq_38650808的博客
08-19 1730
一、流程图如下 二、表删除 三、表输入一 四、表输入二 五、记录合并 六、字段选择 七、表输出 八、结果
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值