数据集成用kettle，pdi还是apache-hop？

喜林.

已于 2025-01-24 10:18:45 修改

阅读量2.6k

点赞数 1

于 2022-02-06 20:47:35 首次发布

本文链接：https://blog.csdn.net/xllovestar/article/details/122801487

版权

数据仓库专栏收录该内容

3 篇文章

订阅专栏

apache-hop是什么？

来自于pdi的一个分支，运行速度远高于pdi。想学习一下，下载地址：

Apache Hop - Hophttps://hop.apache.org/

官方教程：

Hop User Manual :: Apache Hophttps://hop.apache.org/manual/latest/

数据库连接工具用什么dbeaver满足你查询的基本要求，可以连接各种数据库：Download | DBeaver Communityhttps://dbeaver.io/download/

各种数据库都会自动下载推荐驱动

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

喜林.

关注关注

1
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

这就是数据分析之数据集成

小白不白

12-04

2107

什么是数据集成 我们采集的数据经常会有冗余重复的情况。举个简单的例子，假设你是一个网络综艺节目的制片人，一共有 12 期节目，你一共打算邀请 30 位明星作为节目的嘉宾。你知道这些明星影响力都很大，具体在微博上的粉丝数都有标记。于是你想统计下，这些明星一共能直接影响到微博上的多少粉丝，能产生多大的影响力。然后你突然发现，这些明星的粉丝数总和超过了 20 亿。那么他们一共会影响到中国 20 亿人口么？显然不是的，我们都知道中国人口一共是 14 亿，这 30 位明星的影响力总和不会覆盖中国所有人口。那么如何

数据集成：数据挖掘的准备工作之一

weixin_42108731的博客

09-15

2484

数据集成：数据挖掘的准备工作之一

参与评论您还未登录，请先登录后发表或查看评论

Apache Hop从入门到精通第一课揭开Apache Hop神秘面纱

zhangjin1222的博客

01-10

1624

1、Hop 最初（2019年底）是作为 Kettle（Pentaho Data Integration，PDI）的一个分支而启动的。1、Apache Hop，简称Hop，全称为Hop Orchestration Platform，即Hop 工作编排平台，是一个数据编排和数据工程平台，旨在促进数据和元数据编排的所有方面。Hop让你专注于你想要解决的问题，而不会被技术所阻碍。由于Hop与Kettle/PDI有着共同的历史，Hop社区提供了一种方法，尽可能无缝地将现有的PDI/Kettle项目导入Hop。

起源于 Kettle 的新一代数据集成平台 Apache Hop 成为 Apache 顶级项目

过往记忆大数据

01-23

7197

Apache Hop（Hop Orchestration Platform 的首字母缩写）是一种数据编排（data orchestration ）和数据工程平台（data engineer...

Apache Hop：开源版本的Kettle

最新发布

Tony.Dong的专栏

02-22

1360

Apache Hop 最初来源于我们熟悉的 ETL 工具 Kettle（Pentaho Data Integration），并且在 2020 年成为 Apache 软件基金会的顶级项目。可视化开发，提供了图形界面用于设计工作流（workflow）和数据管道（pipeline），用户可以专注于业务逻辑而不是代码实现。跨引擎支持，工作流和数据管道支持原生 Hop 引擎的本地和远程运行，数据管道也可以通过 Apache Spark、Apache Flink 以及 Google Dataflow 运行。

巨杉大学SVP专家分享 | Apache Hop基于web的可视化流式批处理

巨杉数据库技术社区

12-16

5218

01 前言近年来，随着互联网技术的发展，数据早已成为各行业的生命源泉，数据管理的重要性不言而喻。日前，在「巨杉最具价值专家」技术交流会中，北京傲飞商智软件有限公司CEO初建军老师（ jianjunchu@apache.org）对Apache Hop基于web的可视化流式批处理平台主题进行了详细的讲解。 02什么是ApacheHop Apache Hop是Hop Orchestration Platform的缩写。它完全用Java编写，旨在提供广泛的数据编排工具，包括可视化开发环境，服务器，元数据..

Apache HOP (Hop Orchestration Platform) VS Data Integration (通常被称为 Kettle)

雨笋情缘的专栏

08-16

1207

适用场景如果你需要一个现代、灵活、易于集成的 ETL 平台，特别是在大数据环境中，那么 Apache HOP 可能是一个更好的选择。如果你更倾向于一个直观、易用的图形化工具，并且希望快速开发和部署数据集成任务，那么 Data Integration (Kettle) 可能更适合你。技术背景对于技术背景较强、熟悉 Java 和 RESTful API 的团队来说，HOP 的学习曲线可能不会太高。

Apache Hop使用

qq_41482600的博客

03-24

1567

hop

hop和kettle的对比

weixin_35750953的博客

12-21

344

Hop 指的是酿造啤酒时使用的压榨过的花草。它主要用于给啤酒增加香味和苦味，还可以帮助抑制细菌的生长。 Kettle 指的是一种器具，通常是用于烹饪或加热水的。它可以用电加热或者用煤气、天然气等加热。啤酒酿造过程中也会用到一种称为麦芽煮沸锅的器具，但这个锅并不是真正意义上的 kettle。总的来说，hop 和 kettle 是有区别的，hop 是啤酒酿造过程中使用的花草，而 kettle 则是一...

IDEA下编译运行kettle8.3

西京刀客

04-13

3931

环境 win10、IDEA、kettle8.0 操作步骤 pom修改：发现ui模块默认使用linux下的swt jar包，而我的环境是windows。进行如下修改，将jar更换为win org.eclipse.swt org.eclipse.swt.gtk.linux.x86_64 修改为 org.eclipse.swt org.eclipse.swt.win32.win32.x86_64...

在Kettle(PDI)跑Apache Spark作业

08-10

NULL 博文链接：https://qq85609655.iteye.com/blog/2205156

incubator-hop-website:Apache Hop网站

03-15

跃点网站该存储库用于生成Hop网站用于生成网站的工具：一个源代码管理工具，用于从不同的github仓库中获取文档源。是用于构建网站JavaScript运行时。您将需要使用Node.js版本10。了一种非常快速的依赖关系和程序包管理器工具，用于下载和管理所需的库。（通过纱线安装）一个任务自动化工具。用于构建Hop Antora UI主题。（通过纱线安装）静态站点生成器。简化的，它需要从文件content目录，并从应用模板layouts目录和使用任何一种资源整合在一起static目录下生成输出public目录。（通过纱线安装）文档站点生成器。它使用来自不同来源的Asciidoc文档。使用Node和yarn进行构建您可以使用Node.js和yarn工具在本地构建网站。准备工具节点确保已安装Node.js（在此为“ Node ”）。 $ nod

【数据治理与数据质量】：Kettle和Debezium中的元数据管理及实践

本文首先概述了数据治理和数据质量的重要性，介绍了Kettle工具和Debezium技术在数据集成和变更数据捕获方面的应用。随后，探讨了元数据管理的理论基础和实际操作，以及Kettle和Debezium在元数据应用中的具体实践。...

ETL数据抽取---Apache Hop

专注专业专心

08-11

3936

ETL数据抽取--Apache Hop

Apache Hop-使用介绍【持续完善中】

沧海之巅的专栏

12-05

6002

您在“创建管道”中学习了如何创建管道。您将在管道画布上执行许多操作，但是从管道编辑器的主工具栏中还可以获得许多额外的功能。还有另外两个重要的工具栏用于处理单元测试以及项目和环境。查看相关页面，了解有关管理项目和环境的更多信息，并了解如何为管道编写单元测试。让我们看看最上面的工具栏:管道是Hop项目的基本构建块。管道完成了繁重的工作:它们从各种来源读取数据，执行许多操作(合并、清理、完善、转换等)，并将数据写入某些目标平台。管道以预定义的顺序并并行地执行所有这些操作。在下面的图片中，一个非常简单的管道从数据库

apache使用技巧

~临风轻扬~

10-12

1468

1、如何设置请求等待时间在httpd.conf里面设置：　　TimeOut n　　其中n为整数，单位是秒。　　设置这个TimeOut适用于三种情况：　　2、如何接收一个get请求的总时间接收一个post和put请求的TCP包之间的时间　　TCP包传输中的响应（ack）时间间隔3、如何使得apache监听在特定的端口　　修改httpd.conf里面关于Listen的选项，例如：　　Listen

Apache Hop 搭建_client端_文件转换和简单运行转换

liuxianwen1990的博客

02-17

3887

Apache Hop 简单上手

Apache Hop 教程及指南

gitblog_00995的博客

08-07

883

Apache Hop 教程及指南 incubator-hop-docsApache hop项目地址:https://gitcode.com/gh_mirrors/in/incubator-hop-docs 1. 项目介绍 Apache Hop（以前称为Heuristics Optimization Platform）是一个数据集成平台，专注于提供灵活、可扩展的解决方案来处理数据转换和工作流自动化...

kettle pdi-ce-9.3.0.0-428.zip 阿里云盘

09-27

kettle pdi-ce-9.3.0.0-428.zip 是 Pentaho Data Integration (PDI) 开发工具的一个版本。PDI 是一个强大的数据整合工具，它允许用户从各种数据源（如关系型数据库、平面文件、Web服务等）中提取数据，并对其进行转换和加载。阿里云盘是阿里云提供的云存储服务，用户可以将文件上传到云盘中，并在需要的时候下载使用。因此，kettle pdi-ce-9.3.0.0-428.zip 文件可能是一个存储在阿里云盘上的压缩包。有了这个压缩包，用户可以在他们的计算机上安装和使用 PDI 工具进行数据整合和转换。用户可以解压缩该文件，并按照提供的安装说明进行安装。安装完成后，用户就可以开始使用 PDI 工具进行数据集成、转换和加载等操作。通过 PDI，用户可以轻松地处理各种数据任务，包括数据清洗、数据分析和数据挖掘等。总之，kettle pdi-ce-9.3.0.0-428.zip 是一个文件，它可能包含 Pentaho Data Integration (PDI) 工具的一个特定版本。该文件可以通过下载或从阿里云盘中获取，用于在用户的计算机上安装和使用 PDI 工具进行数据整合和转换。