大数据企业面试真题汇总二

已于 2023-02-13 19:13:28 修改
阅读量1k 收藏
点赞数
分类专栏： Hadoop Hive Spark 大数据安全 文章标签： 面试 大数据 经验分享
于 2023-02-13 18:28:11 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35029061/article/details/129007786
版权

二百零二、e代驾面试题

 1）笔试

有一张很大的表：TRLOG，该表大概有2T左右

CREATE TABLE TRLOG

( PLATFORM string,

USER_ID int,

CLICK_TIME string,

CLICK_URL string)

row format delimited fields terminated by ‘\t’;

数据:

了解本专栏 订阅专栏 解锁全文 超级会员免费看
wespten
关注
专栏目录
订阅专栏
大数据企业面试真题汇总三
悦分享
02-13 1294
1）Map方法之后Reduce方法之前这段处理过程叫Shuffle2）Map方法之后，数据首先进入到分区方法，把数据标记好分区，然后把数据发送到环形缓冲区；环形缓冲区默认大小100m，环形缓冲区达到80%时，进行溢写；溢写前 对数据进行排序，排序按照对key的索引进行字典顺序排序，排序的手段快排；溢写产生大量溢写文件，需要对溢写文件进行归并排序；对溢写的文件也可以进行Com biner操作，前提是汇总操作，求平均值不行。最后将文件按照分区存储到磁盘，等待Reduce端拉取。
大数据企业面试真题汇总一
悦分享
02-13 1308
第1题我们有如下的用户访问数据userIdvisitDatevisitCountu012017/1/215u022017/1/236u032017/1/228u042017/1/203u012017/1/236u012017/2/218U022017/1/236U012017/2/224要求使用SQL统计出每个用户的累积访问次数，如下表所示：用户id月份小计累积u012017-011111u012017-021223u022017-011212u032017-0188u042017-0133第2题 京东有5
hql语法题
斧王，不能再斩杀了吗的博客
10-23 752
有如下场景： 某公司网站每日访问量达到10亿级别的访问量，每次访问记录一条数据，数据包含如下字段：用户ID，访问时间（毫秒级），访问页面。 要求使用hive求出所有在5分钟内访问次数达到100次的用户（求出用户ID即可） 思路：利用窗口函数Lag 详细思路： 1.选出当天访问次数达到100次的用户（即当天有100及以上条数据的用户）：根据用户ID分组，count 2.在每个 用户ID小组内（步骤1...
HIVE_SQL_复杂SQL_求访问深度以及前一跳和下一跳的地址
迎难而上
06-05 627
今天面试遇到了一道题，通过HQL 求访问深度以及当前页与下一页面的地址 前提假设： 1.用户只访问同一page一次 2.用户单一标签页跳转 有如下图1 转换为 图2 格式，即访问路径问题 图1 图2 SELECT tmpB.platform, tmpB.user_id, tmpB.seq, t...
从一道hive面试题的解决思路中理解hive应用
zolalad的专栏
09-01 7481
Hive面试题—理清hive应用思路问题：有一张很大的表：TRLOG该表大概有2T左右。TRLOG： CREATE TABLE TRLOG (PLATFORM string, USER_ID int, CLICK_TIME string, CLICK_URL string) row format delimited fields terminated by '\t'; 数据：
【面试题】京东大数据面试真题汇总，收藏必备
木野归郎
11-17 822
今年冬天冷的好慢，现在空气中吹的风还是暖的...京东大数据面试题_hive中都有哪些join操作？left join：以左侧为主表，返回记录与主表记录数相同，关联不上的字段为空。right join：以右侧表为主表，返回记录与主表记录数相同，关联不上的字段为空。full join：以两个表的记录为基准，返回两个表的记录去重之和，关联不上的字段为null。cross join：返回两个表的笛卡尔积结...
大数据常见面试题及答案
热门推荐
遐想者
03-25 3万+
大数据常见面试题及答案，大部分都有涉及
真offer收割机！190道大数据面试真题大汇总（附答案详解）
数据一哥，公众号：数据社
04-15 8888
如今这个数字化时代，需求大薪资高的，依然非大数据工程师莫属。我跟不少行业大佬聊过，他们纷纷表示，大数据现在依然处在非常强的爆发期，依然是“黄金时代”！这里有两个关键趋势：一是实时化，从传统的T+1数仓到实时数仓，全面实时化是一个必然，数据洞察变得更快了。二是计算场景化，大家从热衷追逐某一两个引擎，逐渐转成，思考可以用哪些引擎解决哪些问题，更关注实际应用场景。这两个趋势，给...
大数据开发（Hive面试真题）
key_honghao的博客
03-21 1807
Hive的三种自定义函数包括UDF（User-Defined Function（用户定义函数））、UDAF（User-Defined Aggregate Function（用户定义聚合函数））和UDTF（User-Defined Table-Generating Function（用户定义表生成函数））。UDF是最常见的自定义函数类型，用于对单个输入值进行处理并返回一个输出值。
大数据scala面试题汇总
dreamBoat的博客
04-25 4262
大数据scala面试题汇总
《吊打面试官》- 大数据工程师50道中大厂面试真题保姆级详解
Byyyi耀的博客
03-23 2994
大数据工程师50道中大厂面试真题保姆级详解
各企业的大数据面试真题
03-01
### 大数据面试知识点梳理 #### 一、Zookeeper (zk) **定义**: Zookeeper 是一个分布式的协调服务，用于解决分布式系统中的各种基础问题，如命名服务、配置管理、集群管理和分布式锁等。 **作用**: - **解决的...
大数据面试100题.pdf
06-01
大数据面试题集覆盖了多个技术领域，包括数据采集、存储、处理和数据库等方面。下面将详细解读相关知识点。 一、数据采集面试题 涉及到Flume和Kafka的使用场景、配置、优势、劣势等。 Flume使用场景： Flume是...
阿里巴巴工程师最新版 1180 道 Java 面试题及答案整理
qq13321123的博客
11-19 1065
最近很多粉丝朋友私信我说：熬过了去年的寒冬却没熬过现在的内卷；打开 Boss 直拒一排已读不回，回的基本都是外包，薪资还给的不高，对技术水平要求也远超从前；我国大概有 400-700 万程序员，其中光 Java 就占了一半。而大厂所需要的程序员是有限的，高薪也只能给到少数人，所以 Java 的竞争才会如此激烈，内卷化也越来越严重。我们不能改变内卷的大形势，能做的也就只有不断提升自己，去适应市场环境，提高自身技术水平，这样才能在跳槽黄金季拿到自己心仪的 Offer！
接口测试用例设计的关键步骤与技巧解析！
qq_43371695的博客
11-20 781
简介、接口测试在需求分析完成之后，即可设计对应的接口测试用例，然后根据用例进行接口测试。接口测试用例的设计也需要用到黑盒测试用例设计方法，和测试流程与理论章节的功能测试用例设计的方法类似，设计过程中还需要增加与接口特性相关的测试用例。
面试干货：软件测试常见面试题(附答案)
最新发布
11-22 469
最近整理收集软件测试面试题，助力提高面试通过率！
面试小札：Java反射原理和具体应用
m0_60235638的博客
11-22 330
代理类实现了相同的接口，在调用方法时，通过反射调用被代理对象的方法，并且可以在前后添加额外的逻辑。例如，当配置文件中指定 service 层的类依赖于 dao 层的类时，Spring会使用反射创建 dao 类的实例，并将其注入到 service 类的实例中。可以实现插件式的架构。一句话：Java反射原理通过获取类的Class对象来访问和操作类的成员（如字段、方法、构造函数），它的应用包括框架开发中依赖注入和Servlet调用、动态代理实现AOP、单元测试访问私有成员以及开发插件系统加载插件类。
操作系统基础——针对实习面试
清酒伴风的博客
11-21 930
本文针对即将实习面试的同学，总结了操作系统基础相关的面试题及其知识点，希望对大家有所帮助😀
鱼厂实习，光速转正了！
努力做最接地气的编程干货分享，感谢关注
11-19 906
从最初那一份懵懂，到如今独立承担项目，回想这一路在鱼厂的成长，每一步都像是在重塑一个新的自己。
上海大数据企业面试真题 pdf
05-13
上海大数据企业面试真题pdf是一份非常有价值的资料，它包含了上海某些大数据企业在面试中所出现过的真实问题，对于准备进入大数据行业的人来说，这是一个非常好的参考。 根据该文档，我们可以了解到大数据企业在面试中所关注的方面，以及他们希望应聘者拥有哪些技能和经验。这包括：熟练掌握大数据相关工具和技术、对数据库、数据仓库和数据挖掘有深入的理解、懂得如何优化和提升系统性能等。 同时，在面试中，大数据企业还会考察应聘者的问题解决能力、沟通表达能力、团队合作精神，以及对业务理解的程度等方面。这些都是非常重要的技能和能力，对于在大数据行业中获得成功而言，至关重要。 总之，这份上海大数据企业面试真题pdf对于正在寻求大数据行业职位的求职者来说，是一份非常有用的工具。通过了解企业在面试中所关注的方面，以及他们希望应聘者拥有的技能和经验，求职者可以更好地为自己的面试做准备，增加自己的竞争力。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

wespten

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值