Linux之Kettle数据处理,转换,迁移ETL工具安装和使用

最新推荐文章于 2024-07-05 15:05:13 发布
最新推荐文章于 2024-07-05 15:05:13 发布
阅读量429 收藏
点赞数
分类专栏： 服务器 linux 后端 文章标签： kettle
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_32421489/article/details/120309400
版权
服务器 同时被 3 个专栏收录
88 篇文章 0 订阅
订阅专栏
后端
74 篇文章 0 订阅
订阅专栏
linux
56 篇文章 0 订阅
订阅专栏
本文介绍了如何在Linux环境下安装Java SE，包括下载并解压Java 8或9版本，配置环境变量，以及使用PDI（ Pentaho Data Integration）进行数据库连接、作业任务和转换任务的执行。还提供了错误处理和关键步骤的详细说明。
摘要由CSDN通过智能技术生成

java环境变量配置：

Linux之安装Java环境_梅坞茶坊的博客-CSDN博客下载地址：Java Archive Downloads - Java SE 8u211 and laterhttps://www.oracle.com/java/technologies/javase/javase8u211-later-archive-downloads.htmlJava Archive Downloads - Java SE 8u211 and laterJava Archive Downloads - Java SE 8u211 and laterhttps://www.oraclhttps://blog.csdn.net/qq_32421489/article/details/120307429

开始安装：

cd /home/etl/software/

rz

unzip pdi-ce-8.2.0.0-342.zip

或者

unzip pdi-ce-9.2.0.0-290.zip

上传mysql数据库连接文件mysql-connector-java-5.1.49.jar 到 /home/etl/software/data-integration/lib

上传从windows拷贝来的kjb或者ktr文件

记得修改kjb中转换文件ktr的路径

运行作业任务或者转换任务：

./pan.sh -file=/home/etl/software/job/stu1tostu2.ktr -norep

./kitchen.sh -file=/home/etl/software/job/jobtest.kjb -log=log.log

报错处理：

梅坞茶坊
关注
专栏目录
linux查看etl进程,linux上使用kettle迁移数据
weixin_31067983的博客
04-29 1238
接上一篇在本机用windows 跑kettle迁移，鉴于其中一张表每天增量200W左右，本地迁移速度太慢，加上vpn连接服务器不稳定经常断，kettle并不支持断点续传，决定把windows上的kettle配置放在linux环境上跑。一：linux安装jdk二：liunx部署kettlekettle是直接部署在了要转换的mysql服务器上，避免了中间的传输网络消耗，把windows下已解压的文件，...
开源ETL工具kettle--数据迁移
技术让梦想更有力量
06-11 5820
开源ETL工具kettle使用简单，功能强大
kettle8.3.0新版[ETL工具,可以在Windows、Linux、Unix上运行]
07-20
kettle8.3.0[可以在Windows、Linux、Unix上运行]的版本，提供了网盘下载地址。
ETL工具Kettle安装教程
weixin_46032860的博客
01-14 504
ETL工具Kettle在Win10安装教程（待更新）一、安装准备二、安装步骤三、问题解决 一、安装准备 Java环境变量配置 可以参考https://blog.csdn.net/weixin_46032860/article/details/112598411 我的电脑是win10，之前写了win10的配置方法 下载Kettle压缩包 网上找的地址都是要注册账户下载的，没继续用下去 最后找了这个地址：https://sourceforge.net/projects/pentaho/files/，不用注册直
windows-kettle安装与配置
最新发布
随性、自由、放旷
07-05 543
3.2、进入data-integration目录,点击Spoon.bat，运行kettle,呈现如下则安装成功。3.1、进入data-integration目录，编辑Spoon.bat；2.1、将获取到pdi-ce-9.2.0.0-290.zip包解压缩。
ETL项目kettle在linux系统中的部署
06-17 1072
说明：利用linux自带的定时任务，执行脚本的方式调用kettle客户端去执行相关kettle作业 【data-integration安装配置】 1、下载源码（版本号：8.2.0.0） cd /usr/local/src wget https://jaist.dl....
KETTLE ETL数据迁移工具 使用教程
liu957976432的博客
04-28 929
Kettle的建立数据库连接、使用kettle进行简单的全量对比插入更新：kettle会自动对比用户设置的对比字段，若目标表不存在该字段，则新插入该条记录。若存在，则更新。 Kettle简介：Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。Kettle 中文名称叫水壶，该项目的主程序员MATT 希望把各种数据放到一个...
kettle安装、启动
08-15 395
官网： https://community.hitachivantara.com/s/ 下载： https://sourceforge.net/projects/pentaho/files/
ETL数据抽取工具Kettle的安装配置
08-31
总的来说，Kettle是一个功能丰富的ETL工具，其图形化的界面和灵活的工作流程设计使得数据处理变得更加简单和高效。无论是数据迁移、数据清洗，还是复杂的数据整合，Kettle都能胜任，且其开源性质使得开发者可以根据...
ETL工具之Kettle.pdf
07-18
通过学习ETL工具之Kettle这份文档，可以掌握到Kettle的安装、配置、界面操作以及工作原理，进而利用Kettle完成各种数据处理任务，提高数据处理的效率和质量。对于大数据工程师而言，了解和熟练使用Kettle这样的ETL...
ETL工具Kettle简介和安装配置基本使用
09-19
通过上述介绍，我们可以看到Kettle作为一个全面的ETL工具，不仅具备强大的数据处理能力，还具有易用性和可扩展性。对于数据工程师和分析师来说，它是实现数据整合和迁移的强大武器。在实际项目中，熟练掌握Kettle能...
kettle9.2下载，亲测可用pdi-ce-9.2.0.0-290
06-13
kettle9.2下载，亲测可用pdi-ce-9.2.0.0-290
pentaho kettle PDI 9.2下载- 第一部分
02-09
pentaho kettle PDI 9.2下载
ETL工具-pdi-ce-9.1.0.0-kettle9.1压缩包分包2
12-24
开源ETL工具kettle，共三个分包，请在主页中将三个分包下载至同一文件夹解压（资源上传最大不得超过1000M，无奈）
pentaho kettle PDI 9.2下载- 第二部分
02-09
pentaho kettle PDI 9.2下载
kettle9.1编译后2020年6月份最新版本 jdk1.8以上（第2卷）data-integration.part2.rar
07-06
kettle9.1, 使用 Pentaho Kettle 9.1 源码编译的kettle，可直接运行，kettle9.1编译后2020年6月份最新版本分3卷,实际上自己下载打包也很简单就是费时间，太大了，【图省事的就下载我这个编译后的】，很多人用maven下载出错，主要是必须把maven的资源库settings.xml中新增kettle官网所提供的settings.xml pentaho true pentaho-public Pentaho Public http://nexus.pentaho.org/content/groups/omni true always true always pentaho-public Pentaho Public http://nexus.pentaho.org/content/groups/omni true always true always org.pentaho.maven.plugins com.pentaho.maven.plugins com.github.spotbugs 推荐两篇文章：https://blog.csdn.net/gongchengshiv/article/details/105211351 https://blog.csdn.net/ajiu_9999/article/details/83306305 我就是看了上边两篇文章编译成功的，感谢两位博主！！！
kettle数据迁移工具使用文档介绍
08-01
### Kettle 数据迁移工具使用详解 #### 一、Kettle 概述 Kettle 是一款功能强大的开源 ETL（Extract, Transform, Load）工具，它采用纯 Java 编写，支持在 Windows、Linux 和 Unix 等多种操作系统上运行。Kettle ...
最新版kettle9.2连接CDH
achao的博客
12-21 3143
文章目录第一步：kettle9.2下载第二步：获取hive jar包第三步：获取客户端配置最后一步：配置plugin.propertiesps 第一步：kettle9.2下载 kettle下载官方网址，下载你需要的版本，我这边下载的是目前最新的9.2 下载完成后解压得到data-integration文件夹 第二步：获取hive jar包 在hiveserver服务器的 /opt/cloudera/parcels/CDH/lib/hive/lib 路径下下载所有hive开头的jar包，拷贝到本地 d
一百六十一、Kettle——Linux上安装的kettle9.2开启carte服务（亲测、附流程截图）
tiantang2renjian的博客
08-19 702
Linux上安装的kettle9.2开启carte服务（亲测、附流程截图）
Kettle 5.x使用指南：数据集成和ETL工具
Kettle 5.x使用指南 Kettle是一个开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效...Kettle是一个功能强大且灵活的ETL工具，能够满足各种数据integration和数据处理需求。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

梅坞茶坊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值