国产ETL工具 etl-engine

13 篇文章 0 订阅
12 篇文章 0 订阅

什么是etl-engine

  • 产品由etl-engine引擎和etl-designer云端设计器及crontab调度组成,
  • etl-engine引擎负责解析etl配置文件并执行etl任务,
  • etl-designer云端设计器通过拖拉拽的方式生成etl-engine引擎可识别的etl任务配置文件,
  • crontab调度设计器负责按时间周期执行指定的etl任务,crontab调度还提供了查询etl任务执行日志功能,
  • 三部分组成了etl解决方案,可集成到任意使用场景。

run_crontab服务端

如何使用

run_graph(etl-engine)

  1. 使用手册
github.com/hw2499/etl-engine
  1. 命令行执行样本
run_graph -fileUrl <配置文件> -logLevel trace

run_crontab(集成etl-designer和etl-crontab)

  1. 使用手册
github.com/hw2499/etl-engine/wiki/etl-crontab%E8%B0%83%E5%BA%A6
  1. 命令行执行样本
run_crontab -fileUrl <配置文件>

如何下载

选择最版本使用

github.com/hw2499/etl-engine/releases
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
回答: ETL工具是指用于数据抽取(Extract)、转换(Transform)和加载(Load)的软件工具。在Java中,有多种ETL工具可供选择,其中一种是Kettle。Kettle是一个开源的ETL工具,它提供了一套强大的数据集成、数据转换和数据加载功能,可以通过编写Java代码来使用Kettle的API进行ETL操作。在使用Kettle时,可以通过指定jdbcUrl来连接数据库,并使用execRepositoryJobs方法执行Kettle的作业。\[1\]\[2\]此外,除了Kettle,还有其他的ETL工具可供选择,比如DataX。DataX也是一个开源的ETL工具,它的实现思路是通过定时任务从一个数据源读取数据并同步到另一个数据源中。感兴趣的开发者可以根据自己的需求选择适合的ETL工具进行数据处理。\[3\] #### 引用[.reference_title] - *1* *3* [一文带你入门ETL工具-datax的简单使用](https://blog.csdn.net/weixin_29634081/article/details/114079748)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [Etl工具之Kettle與java集成二](https://blog.csdn.net/weixin_34746495/article/details/115660842)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值