大厂面经：京东大数据面试题及参考答案（3万字长文）

最新推荐文章于 2024-08-25 23:45:03 发布
最新推荐文章于 2024-08-25 23:45:03 发布
阅读量329 收藏
点赞数 2
分类专栏： 大数据最全面试题-Offer直通车 文章标签： 大厂面试 大厂面经 leetcode 热点现象 flink窗口 hive分桶 jvm调优
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/linweidong/article/details/140745795
版权

目录

Hive窗口函数有什么，什么场景，怎么用

Hive文本拼接函数是什么

Hive的数据存储格式有哪些，优缺点

两个表 join 过程中，空值的情况如何处理？

Hive存储结构的区别？

Hive本身对于SQL做了哪些优化？

Hive分区和分桶区别？

Hive分桶表的作用？

HBase负载均衡怎么实现

Hadoop如何更改文件所有者

Kafka如何监控

LGBM和XGBoost的区别

RNN, GRU, LSTM之间的差别

为什么RNN容易梯度爆炸？

进程的通信方式

进程和线程

逻辑斯特回归过拟合怎么办？

大数据集群间节点是如何通信的

hadoop core-site文件一般配置什么内容

ranger权限管理的最小粒度要什么

KNN的时间复杂度？怎么优化KNN的时间复杂度

SVM核函数的作用是什么

clickhouse的写入和读取为什么快

flink有哪些算子

flink的窗口函数了解吗

flink的精准一次性如何保证的

kafka是如何保证数据不丢失和不重复的，从生产者和消费者考虑

hbase用过吗，rowkey的设计原则是什么

如何解决热点现象

redis的数据结构了解吗

java的集合类有哪些

java实现多线程的几种方式

你知道有哪些实现线程池的方式吗，讲一下有哪些类

udf函数的分类

你实现的udf函数的功能

项目中最大的收获是什么

大数据项目遇到过的最难的需求，怎么解决的

MapReduce的执行过程

zookeper的leader选举机制，常见的一些应用场景，举例说明

kafka介绍一下

spark中jvm调优怎么调

hive优化你用过哪些，数据倾斜遇到过吗

你采用的数据存储格式是什么，相比于其他有什么优势

flink和spark的区别是什么

hashmap的底层原理是什么

你用过的一些linux命令

hbase中rowkey的设计原则是什么，如何解决热点现象

有什么方法取出hashmap中的所有key，怎么去遍历key，不是value

java从编译到运行发生了什么

一台服务器特别卡，应该怎么处理

shullfe为什么环形缓冲区80% 大于或小于行不行

namenode怎么保证开机还有之前的记录

hbase的特点和底层，和mysql有什么区别

zookeper的leader选举机制，常见的一些应用场景，举例说明

常见的排序算法，时间复杂度，空间复杂度

快速排序

归并排序

插入排序

冒泡排序

选择排序

堆排序

synchronized关键字的使用

volatile关键字，和synchronized的区别

Java的内存回收怎么做的

hashmap和treemap的区别

红黑树有什么特点

队列和栈结构

Java的内存回收怎么做的

hashmap和treemap的区别

红黑树有什么特点

队列和栈结构

你项目里的熔断器的原理？

SQL调优怎么做的？

MVC架构里用到了什么设计模式？

那你讲讲Java里的设计模式

给定一颗二叉树，按照从顶部到底部的顺序，返回从右侧能看到的节点值？

示例代码

写Java代码-搜索螺旋排序数组

示例代码

Hive窗口函数有什么，什么场景，怎么用

Hive 支持多种窗口函数，这些函数可以在数据集的每一行上进行计算，并且可以考虑数据集中的其他行。常见的窗口函数包括 ROW_NUMBER(), RANK(), DENSE_RANK(), LAG(), LEAD(), FIRST_VALUE(), LAST_VALUE(), NTH_VALUE(), 以及聚合函数如 SUM(), AVG(), COUNT(), MIN(), MAX() 等。

应用场景：

了解本专栏 订阅专栏 解锁全文
大模型大数据攻城狮
关注
专栏目录
订阅专栏
大厂面经：滴滴大数据面试题及参考答案（3万字长文）
大模型大数据攻城狮的专栏
07-27 380
数据抽取Extract：从源系统（如数据库、日志文件等）中抽取原始数据。Transform：对原始数据进行清洗、转换，以适应数据仓库的要求。Load：将处理好的数据加载到数据仓库中。数据存储ODS：将原始数据直接导入操作数据存储层。DWD：对ODS层的数据进行初步的清洗和转换。DWS：基于DWD层的数据进行聚合和汇总。DWT：按照业务主题对DWS层的数据进行进一步的组织。ADS：根据业务需求对DWT层的数据进行最终的加工和展现。数据查询与分析。
大厂面经：大疆嵌入式面试题及参考答案（4万字长文：持续更新）
大模型大数据攻城狮的专栏
07-29 927
目录 Linux 系统调用的过程，中间发生了什么？ 表格总结 Linux 中断流程，谈谈你对中断上下文的理解 中断流程 中断上下文理解 Linuxschedule()函数的原理和调用的时机 schedule()函数原理 调用时机 页表实现机制，分页的缺点？ 页表机制 分页的缺点 介绍操作系统的多级反馈调度策略，时间片轮转，在项目中如何指定优先级来调度进程完成快速响应（nice命令） 多级反馈队列调度 时间片轮转 使用nice命令 聊内存分配，进程内存分配，段页式存
京东数据开发面试
psywan的博客
07-26 362
1.B树和B+树的区别： B+树中只有叶子节点会带有指向记录的指针（ROWID），而B树则所有节点都带有，在内部节点出现的索引项不会再出现在叶子节点中。 B+树中所有叶子节点都是通过指针连接在一起，而B树不会。 B+树的优点： 非叶子节点不会带上ROWID，这样，一个块中可以容纳更多的索引项，一是可以降低树的高度。二是一个内部节点可以定位更多的叶子节点。 叶子节点之间通过指针来连接，范围扫描将十分简单，而对于B树来说，则需要在叶子节点和内部节点不停的往返移动。 B树的优点： 对于在内
2020九月 京东大数据方向 Java 面试经验、面试题分享
weixin_48655626的博客
09-23 6753
足球运动里，身价最高的运动员就是能够把球踢进的那个人，临门一脚也是价值最高的运动。找工作如同这个阶段，如何把我们积蓄二十几，三十年的知识能力和修养在极短地时间内表达地最好呢？ 在这里，跟大家分享一下我京东大数据方向Java实习面试的经历，希望对面试的朋友有所帮助！ 一面：（顺序可能不对） 1.先讲了一下笔试上的一道算法题，不难，就是找出两个数组合并后的中位数，总体思路就是，比较大小，找下标，但需要注意的是找到了中位数就可以停止循环了。 2.hashmap问的超级细，建议大家仔细看看，后来也问了chm..
大数据工程师入职京东年薪37w（附：面试真题分享）
大数据基础入门教程
12-09 1125
总结：引导面试官到自己擅长的领域，掌握主动权，问题回答不一定完整，说出关键点即可。 1、项目规模，一天/月数据量，各组件版本？ 数据规模：一般100M数据由300万条数据；数据量：上百G；条数：达到几十亿条数据 美团数据规模：负责每天数百GB的数据存储和分析 2、Spark 2.x 和Spark 1.x版本的区别？ 1）Spark2.x实现了Sparksql和HiveSql操作A...
京东大数据面试题
胜利的曙光的博客
09-08 354
京东大数据面试问题整理。
京东面试题（2018 顶级互联网公司面试题系列）
weixin_34018169的博客
10-30 331
一位圈友，用A 兄指代， 能力OK，岗位OK，但是想涨涨薪资， 最好是Double一下。面试京东高级JAVA岗位，挂了。找尼恩来求解没有答上来的题目。 主要是挂在以下的四道题上：关键试题一：什么是 reactor 模式？A 兄说面试前没有准备，不知道。关键试题二：分布式开发中，如何保证数据一致性？A 兄还说面试前没有准备，不知道。关键试题三： 说一说，Java中锁的实现原理A 兄还说面试前没有准备...
大厂面试：字节大数据面试题及参考答案（10万字长文持续更新）
最新发布
大模型大数据攻城狮的专栏
08-25 553
在 Spark 中，宽窄依赖是用来描述 RDD（弹性分布式数据集）之间的依赖关系的概念。窄依赖是指父 RDD 的每个分区最多被一个子 RDD 的分区使用，即子 RDD 的分区可以通过确定的规则从父 RDD 的分区计算得到，并且不需要跨节点进行数据传输。窄依赖通常可以在一个节点上进行计算，不需要进行数据的 shuffle 操作，因此性能较高。宽依赖是指父 RDD 的一个分区可能被多个子 RDD 的分区使用，即子 RDD 的分区需要通过跨节点的数据 shuffle 操作从父 RDD 的多个分区获取数据。
腾讯大数据开发面试题及参考答案（4万字长文-持续更新）
大模型大数据攻城狮的专栏
07-17 413
MapReduce 是一种编程模型，用于大规模数据集的并行处理。它将数据处理任务分解为两个阶段：Map 阶段和 Reduce 阶段。Map 阶段：输入数据被拆分成多个小块，每个小块由一个 Map 任务处理。Map 函数对数据进行键值对形式的转换，生成中间键值对输出。Shuffle 阶段：Map 任务的输出会被排序和分区，相同键的键值对会被发送到相同的 Reducer 上。Reduce 阶段。
22.1.11京东大数据实习面试
weixin_47878012的博客
01-11 1155
先自我介绍，然后问项目经历，我写的项目经历是hbase设计的一个数据库 项目部分 介绍一下这个项目，几个人完成的，用了多久，你负责什么 这个项目你用了什么技术栈， 里面有几张表，表是怎么设计的 TB级别的rowkey怎么设计（类似这种深度的问题还有，想不起来了） Hadoop 谈谈你对hdfs的理解 我说到了FsImage 和 Edits就让详细介绍一下FsImage 和 Edits FsImage 和 Edits的命令（hdfs oiv和hdfs oev） 谈谈SecondaryNam
京东2019校招数据分析工程师笔试题(二).docx
07-16
京东2019校招数据分析工程师笔试题
大数据学长面试京东面试题
m0_46914845的博客
08-11 841
大数据学长面试京东面试题
京东面试经历
zzdurkjava的专栏
05-10 611
Jvm内存结构描述 ++i是否是线程安全的，为什么 什么情况下，索引会失效 mybatis，事物，#和$的区别，防止sql注入， struts2的原理，如何获取执行方法，漏洞原理，如何防止。 spring，核心，流程 rpc框架 了解多少？dubbo如何通信，为什么通信快和普通http请求区别，原理是什么，其中一台服务器挂了如何执行，协调，说了zookeeper，问zookeeper...
面试总结------2024/04/04---项目
m0_68185369的博客
04-04 1485
在以上配置中，我们定义了一个名为order.exchange的直连交换机，以及一个名为order.queue的队列。luaScript：这个Lua脚本从Redis获取指定商品的库存数量，如果库存充足，则减少库存数量，并返回1表示秒杀成功；在发送订单消息时，我们需要设置消息的TTL为30分钟，以便在30分钟后触发超时取消订单的逻辑。执行Lua脚本：使用RScript执行预先加载的Lua脚本，该脚本会检查商品库存是否充足，并进行库存减少操作。加锁：使用lock.lock()方法加锁，确保秒杀操作的原子性。
编程题--疯狂序列----京东大数据笔试
missTu~的博客
06-29 1110
1. 题目描述 东东从京京那里了解到有一个无限长的数字序列: 1, 2, 2, 3, 3, 3, 4, 4, 4, 4, 5, 5, 5, 5, 5, …(数字k在该序列中正好出现k次)。东东想知道这个数字序列的第n项是多少,你能帮帮他么？ 输入描述: 输入包括一个整数n(1 ≤ n ≤ 10^18) 输出描述: 输出一个整数,即数字序列的第n项 输入例子1: 169 输出例子1: 18 2. 解...
【面试题】京东大数据面试真题汇总，收藏必备
木野归郎
11-17 812
今年冬天冷的好慢，现在空气中吹的风还是暖的...京东大数据面试题_hive中都有哪些join操作？left join：以左侧为主表，返回记录与主表记录数相同，关联不上的字段为空。right join：以右侧表为主表，返回记录与主表记录数相同，关联不上的字段为空。full join：以两个表的记录为基准，返回两个表的记录去重之和，关联不上的字段为null。cross join：返回两个表的笛卡尔积结...
提前突击了这近200道大数据面试题，果然头条、京东都给了Offer
大数据研习社
04-23 1820
面试题包括Java、大数据开发、大数据运维、大数据分析、大数据架构等等 Q1：老师线上 6000+规模集群，抛开一些其它组件集群，仅讨论 HDFS 数据存储集群，保守理应也在有 3000 节点左右，想知道这些存储节点只是单集群NameNode 集群来维护吗？还是多集群独立维护的，如果是多集群存储数据，它们之间数据是如何打通进行关联的？如果仅是一个集群的话，我想知道这个集群的 NameNode...
京东面试题分享
kingxin的专栏
08-30 778
应京东生态部邀请，8月29日下午两点准时去面试。作为互联网圈的新人（工作一年，确实经验甚少），不得不说就环境而言，京东总部确实在互联网行业是佼佼者。其次，面试官都是临时抽调的小职员，不得不说想进京东，得有实力和自信。而这两方面，我都准备的不够。在接下来时间，我只能再做准备，以下是给大家一个分享。多一句题外话，虽然没有应聘成功，但努力方向很明确了，也得感谢京东给的这次面试机会。 笔试题 1）现在
京东-供应链研发部数仓面试题
weixin_45321296的博客
03-15 440
京东-供应链研发部-数据库开发岗面试题： 1.oracle分析函数： 语法：function(参数) over（partition/order by/windowing）; Corr() over() –表记录相关系数 Stddev() over()-样本标准差 Stddev_samp() over() –样本标准差 Stddev_pop() over()-总体标准差 Variance() over()-样本方差 Var_samp() over()-样本方差 Var_pop() over()-总体方差 Co
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

大模型大数据攻城狮

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值