ETL工程师_个人职责

etl工程师是从事系统编程、数据库编程与设计,要掌握各种常用的编程语言的专业技术人员。也叫数据库工程师。

工作内容:

海量数据的ETL开发,抽取成各种数据需求。

参与数据仓库架构的设计及开发 。

参与数据仓库ETL流程优化及解决ETL相关技术问题。

熟悉主流数据库技术,如oracle、Sql server、PostgeSQL等。

精通etl架构,有一定的etl开发经验,了解日常作业的部署和调度。

会数据etl开发工具,如Datastage,Congos,Kettle等。

ETL中三个字母分别代表的是ExtractTransformLoad,即抽取、转化、加载。

  • 数据抽取:从源数据系统抽取目的数据系统需求的数据;
  • 数据转换:将从源数据源获取的数据按照业务需求,转换成目的数据源要求的形式,并对错误、不一致的数据进行清洗和加工;
  • 数据加载:将转换后的数据装载到目的数据源。
  • 4
    点赞
  • 40
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值