etl工程师面试题_ETL工程师笔试题

最新推荐文章于 2024-06-11 13:58:53 发布

孙靓

最新推荐文章于 2024-06-11 13:58:53 发布

阅读量1.1k

点赞数

文章标签： etl工程师面试题

本文链接：https://blog.csdn.net/weixin_33708562/article/details/112893175

版权

这篇博客提供了ETL工程师面试的题目，包括创建表结构和存储过程。存储过程用于根据条件从tb表中查询数据并插入到tc表。此外，还给出了两个SQL查询参考答案，用于在tb表中找出cx为'COHEV'和'ReIZ'的匹配记录。

摘要由CSDN通过智能技术生成

1、参考答案

1)建表

CREATE TABLE `ta` (

`id` int(11) NOT NULL AUTO_INCREMENT,

`cx` varchar(20) DEFAULT NULL,

`qy` varchar(20) DEFAULT NULL,

PRIMARY KEY (`id`)

) ENGINE=InnoDB AUTO_INCREMENT=13 DEFAULT CHARSET=utf8;

CREATE TABLE `tb` (

`id` int(11) NOT NULL AUTO_INCREMENT,

`cx` varchar(20) DEFAULT NULL,

`qy` varchar(20) DEFAULT NULL,

`jg` int(11) DEFAULT NULL,

PRIMARY KEY (`id`)

) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8;

CREATE TABLE `tc` (

`id` int(11) NOT NULL AUTO_INCREMENT,

`cx` varchar(20) DEFAULT NULL,

`qy` varchar(20) DEFAULT NULL,

`jg` int(11) DEFAULT NULL,

PRIMARY KEY

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

孙靓

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

1、ETL工程师经典面试题.md

02-15

1. 什么是数据准备区？在数据准备区中允许使用的数据结构有哪些？各有什么优缺点？ 2. 简述异构数据源中的数据抽取技术。 3. 数据质量检查的四大类是什么？为每类提供一种实现技术。 4. 简述数据仓库中的表的基本类型，以及为了保证引用完整性该以什么样的顺序对它们进行加载。 5. 在 ETL过程中四个基本的过程分别是什么？ 6. 从 ERP源系统中抽取数据最好的方法是什么？ 7. 简述直接连接数据库和使用，ODBC连接数据库进行通讯的优缺点。 8. 什么是代理键？简述代理键替换管道如何工作。 9. 什么叫缓慢维度变化？请分别阐述三大类维度处理方式。 10. 如何实现增量抽取，分别阐述各种增量抽取方式，并且比较各种方式的优劣，及你推荐的做法？ 11. 用过什么 ETL工具，以及该工具简单讲述特点。 12. ETL 工具一般有哪些组成部分，其中数据流中常用的控件有？ 13. 简述你在以前项目中的 ETL架构思想。

ETL面试题目

m0_66177444的博客

04-28

3241

存储过程是一段预编译的SQL代码，可以接受参数并返回结果。使用场景包括：提高数据库性能、简化代码、保证数据安全性、实现复杂业务逻辑。最近我参与了一个项目，在存储过程中实现了一个批量插入数据的逻辑，通过拆分数据为多个批次，减轻了数据库的负担，提高了效率。我曾使用过的ETL工具包括Talend和Pentaho。主要功能包括数据抽取、转换、加载，数据清洗和校验，数据转化和集成。使用场景包括：BI和数据仓库、数据转换和集成、数据迁移和备份。

参与评论您还未登录，请先登录后发表或查看评论

ETL工程师面试题

weixin_47139678的博客

11-02

2774

ls、cd、pwd、mkdir、rmdir、cp、rm、mv、cat、tac、nl、more、less、head、tail、df、du、seq、chmod、echo、wc、sort、su、find、zip、unzip、gzip、ps、grep、sed、awk等。5.高性能：数据仓库的构建将大大缩短获取信息的时间，数据仓库作为数据的集合，所有的信息都可以从数据仓库直接获取，尤其对于海量数据的关联查询和复杂查询，所以数据仓库分层有利于实现复杂的统计需求，提高数据统计的效率。DELETE FROM 删除；

高级ETL大数据工程师面试题

super_chenzhou

10-11

8689

高级ETL工程师面试题

oracle,etl工程师--面试题锦集

11-25

作为一位ETL工程师，你需要对数据的提取、转换和加载过程有深入的理解，并且熟悉Oracle数据库系统。以下是一些关于这两个主题的核心知识点： 1. **Oracle数据库系统**： - **SQL基础**：了解SQL语言，包括DML...

ETL工程师经典·收藏版面试题.rar

06-28

etl工程师面试必备。里面涉及ORACLE面试题及优化方案和常见的etl面试题。目录： DBA操作详细笔记 ETL面试资料 Oracle常见企业面试题集锦 Oracle常见企业面试题集锦-云端 Oracle面试题汇总 Oracle全方位学习笔记 ...

ETL架构师面试题.docx

06-04

本篇主要讨论了几个与ETL架构师面试相关的知识点，包括逻辑数据映射、数据探索阶段、起始来源数据的确定、ETL过程的四个基本阶段以及数据准备区中的数据结构。 1. **逻辑数据映射**：逻辑数据映射是ETL项目中关键的...

ETL面试题.docx

03-16

### ETL面试题知识点解析 #### 1. 逻辑数据映射及其对ETL团队的重要性 **知识点**：逻辑数据映射（Logical Data Map）是一种关键文档，用于详细记录源系统数据、目标数据仓库模型之间的关系，以及源数据转换至数据...

大数据测试之ETL测试入门_etl的测试能力(1)

2401_84182097的博客

04-27

727

ETL测试是为了确保从源到目的地数据经过业务转换完成后是准确的。同时它还涉及数据的验证，即从源到目的地数据各个不同阶段验证数据。ETL是Extract-Transform-Load的缩写。

ETL工程师常见面试题1

weixin_43703091的博客

05-07

1219

by可以通过将不需要的记录在group by之前过滤掉用where子句替换having子句用索引提高效率用>=替代>带有union、minus、intersect的sql语句都可以用其他方式重写尽量多使用commit 优化group。sql语句尽量用大写 select句中避免使用* 减少访问数据库的次数 Where条件筛选一般在索引列。避免在索引列上使用not,避免在索引列进行计算。2.数据仓库的架构（数据仓库的分层）分三层。1.数据你们公司数据量有多大。3.在工作中写过那些表。

ETL面试题

weixin_45083214的博客

09-21

1738

15.对于一个有大量数据的表，提高查询速度的方法有哪些？/或者请说sql优化的方式有哪些。34.什么情况下使用索引，建模过程表内哪些字段加索引(如何看一个sql语句有没有走索引)33.把b表的数据更新到a表中，有了就更新数据，没有就插入数据，用什么命令。41.简单说下全量表、增量表、快照表、拉链表各自特点和优缺点以及适用场景。29.在kettle中做了什么，做过复杂的转换吗。37.做过多少表，哪些表，有哪些字段。31.什么是数据仓库，有什么特点？35.ods层的数据清洗有哪些内容。

大数据面试总结 - scala & sqoop

zlmldylinke的博客

02-23

1612

1.7 Sqoop 1.7.1 Sqoop参数 /opt/module/sqoop/bin/sqoop import \ --connect \ --username \ --password \ --target-dir \ --delete-target-dir \ --num-mappers \ --fields-terminated-by \ --query "$2" ' and $CONDITIONS;' 1.7.2 Sqoop导入导出Null存储一致性问题 Hiv..

etl工程师 面试题_大数据岗位Spark面试题整理附答案

weixin_29477915的博客

12-30

2450

众所周知，Spark作为一个集群计算平台和内存计算系统，它是专门为速度和通用目标设计的。从事大数据岗位的工作者，像是ETL工程师、Spark工程师、Hbase工程师、用户画像系统工程师都需要熟练掌握Spark相关知识点，因此Spark也是常常会出现的必考面试题。下面我整理了一些Spark面试题，并附上了答案，一起来看看做一做吧！面试题1：Spark 运行架构的特点是什么？答案：每个 Applica...

etl工程师 面试题_关于数据仓库工程师的一般面试题目

weixin_30082367的博客

12-23

2731

相信会对即将投身于数据仓库事业中的同行们有点帮助！不过这只是针对初级数据仓库工程师的基本问题。本题只代表自己对数据仓库的肤浅认识，不代表任何公司的面试题目。对于高级数据仓库工程师的问题更侧重于各种工具的细枝末节。对于数据仓库架构师的问题更侧重于数据仓库的架构和总体认识。对于数据仓库项目经理的问题除了以上的问题外，就是一般项目管理的技能了吧。关于数据仓库部分的面试问题！什么叫数据仓库？(相信inmo...

[职场] ETL工程师面试题库 #知识分享#微信

最新发布

2401_84337879的博客

06-11

607

ETL工程师需要熟悉数据仓库和数据处理的基本理论，掌握ETL相关的工具和技术，具备良好的编程能力和数据分析能力，同时需要具备团队合作精神和良好的沟通能力。b) 数据转换：对数据进行转换处理，以满足数据处理的要求，包括数据清洗、格式转换、数据汇总等；c) 将处理后的数据加载（Load）到目标数据库或数据仓库中，实现数据的集中管理和访问。c) 数据加载：将处理后的数据加载到目标数据库或数据仓库中，实现数据的集中管理和访问。a) 数据抽取：从各种数据源中提取需要的数据，并初步进行数据清洗和处理；

ETL工程师——面试，

qq_44835418的博客

03-14

723

2.1. 为了防范新冠疫情的扩散与传播的背景下，某市的hive数仓里有一张旅馆住宿记录表T，需要计算出有同入住的人员关系以便于筛查密切接触者。同房间的逻辑：（两个人或者多人同一家宾馆lgdm，同一个房间号，彼此入住时间在15分钟以内或者是两个人或者多人同一家宾馆lgdm、同一个房间号、彼此的离店时间在15分钟以内）不包装，简历没有包装，然后直接海投，还是可以，算是有面试机会。2.1现在需要计算这些有同住关系的人员，最终需要的结果字段如下图所示。首先是笔试题，两道很简单的关联， sql关联。

etl工程师 面试题_ETL工程师面试题

weixin_39920629的博客

12-23

1996

一、ORACLE部分1.表：table1(FId,Fclass,Fscore),用最高效最简单的SQL列出各班成绩最高的列表，显示班级，成绩两个字段。2.有员工表empinfo(Fempnovarchar2(10)notnullpk,Fempnamevarchar2(20)notnull,Fagenumbernotnull,Fsalarynumbernotnull);假如...

etl工程师 面试题_面试ETL题总汇

weixin_33219863的博客

12-23

3584

ETL面试题总汇一、分析1．什么是逻辑数据映射？它对ETL项目组的作用是什么？WhatisalogicaldatamappingandwhatdoesitmeantotheETLteam?答：逻辑数据映射(LogicalDataMap)用来描述源系统的数据定义、目标数据仓库的模型以及将源系统的数据转换到数据仓库中需要做操作和处理方式的说明文档，通常以表格或Excel...

etl开发工程师面试题

05-30

作为一个ETL开发工程师，以下是一些可能会被问到的面试题目： 1. 什么是ETL？ 2. ETL过程中的抽取、转换、加载分别是什么意思？ 3. 你使用过哪些ETL工具？ 4. 请介绍一下你对数据仓库的理解？ 5. 你如何处理数据质量问题？ 6. 在ETL过程中，你如何处理增量抽取？全量抽取？增量抽取出现错误如何处理？ 7. 你如何优化ETL作业的性能？ 8. 请介绍一下你对数据清洗的理解？ 9. 你在ETL过程中遇到过哪些问题？如何解决？以上是一些常见的ETL开发工程师面试题目，当然不同公司可能有不同的面试要求和问题。希望这些问题能够对你有所帮助。

etl工程师 面试题_ETL工程师笔试题

etl工程师面试题_ETL工程师笔试题