大数据开发工程师面试整理-项目经验

于 2024-08-22 10:27:16 发布
阅读量74 收藏
点赞数 2
分类专栏： 面试 大数据 文章标签： 大数据 面试 职场和发展 项目经验
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ispeasant/article/details/141421593
版权
面试 同时被 2 个专栏收录
136 篇文章 2 订阅 ¥9.90 ¥99.00
订阅专栏
大数据
9 篇文章 0 订阅
订阅专栏

在面试或职业发展中，分享项目经验是展示个人能力和专业知识的重要途径。大数据开发工程师的项目经验通常涉及数据处理、系统设计、性能优化以及与团队协作等多个方面。以下是如何有效地展示大数据项目经验的指导，以及一个示范性的项目经验描述。

1. 结构化描述项目经验

● 项目背景：

简要介绍项目的背景和目标，说明项目的业务需求和技术挑战。

● 个人角色：

了解本专栏 订阅专栏 解锁全文
不务正业的猿
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
大数据开发面试题总结-超详细
JohnnyChu的博客
11-18 1万+
1、文件上传： 总结： 客户端上传请求--->namenode检查，返回响应--->客户端真正的文件上传请求，包括文件名，文件大小--->namenode返回上传节点--->客户端准备上传，进行块的逻辑切分--->客户端构建pipline流--->开始上传，先上传到缓存中，再上传到磁盘--->上传完成，关闭pipline流--->上...
面试初体验：经历七场面试大数据开发工程师岗位总结（一）
默主归沙的博客
05-27 2021
最近一周一直在面面试，因为带有玩的性质，所以就喜提0个offer战绩。 不过也是在一次次面试中收获经验。我只想总结一下这周面试大数据开发岗位的精彩表现。 1 招聘信息的收集 网上投简历一般进入互联网还是使用boss直聘和拉勾网。 我有一周时间一直投智联招聘和前程无忧，简直真的石沉大海。 反反复复就那些外包公司。 我不是说这两个平台不好，只是感觉资源相对比较少一点。 boss的话，HR主动性比较大，也能快速回复，发简历约面试也方便。 2 简历的匹配度 2.1 懂得优化简历 1）个人技能这方面：不要全.
大数据开发工程师--面试宝典
风起又波
02-19 3742
1.前言 随着5G终端的快速增长，产生大量的数字信息，这些数据的采集和挖掘对于企业、政府具有重大意义。目前，对于海量数据的存储和挖掘存在诸多难题，例如：大数据技术人才的匮乏、中小企业开发成本过高，大数据生态的不成熟等问题。本文旨在与大数据开发人员一起学习探讨大数据开发技术问题。
2022百度大数据开发工程师实习面试经历
柳小葱的博客
03-02 5494
2022年2月28日，我将我改了4遍的简历上传至boss上，还没开始投递，但收到来自百度的hr消息，于是发了一下简历，没过几天便来自百度的面试邀请,直接上图吧。 实习面试：1. 一面问题2. 二面问题3. 总结 1. 一面问题 自我介绍 你博客的电商分析项目中，我看你用到了很多组件，你能说说这些组件都是在干什么吗？ 了解hadoop的组件吗？说一说yarn在hadoop中的位置，以及执行作业时yarn的作用？ 你刚才提到es，你使用过es吗？了解es的原理吗？ 你会scala吗？ 说一下mapreduc
字节跳动大数据开发面试题-附答案_字节大数据面试题
2301_79097795的博客
04-27 1035
innoDB使用的是聚集索引，将主键组织到一棵B+树中，而行数据就储存在叶子节点上，若使用"where id = 14"这样的条件查找主键，则按照B+树的检索算法即可查找到对应的叶节点，之后获得行数据。1.1版本中增加了host处理，在HTTP1.0中认为每台服务器都绑定一个唯一的ip地址，因此在URL中并没有传递主机名，但是随着虚拟机技术的发展，可能在一台物理机器上存在多个虚拟主机，并且他们共享了一个ip地址，http1.1中请求消息和响应消息都支持host头域，如果不存在还会报出错误。
大数据开发的面试总结
赵广陆
05-30 3439
目录1 谈谈你对大数据的理解吧！MapReduce核心原理？2 HDFS核心原理3 hive原理4 spark家族5 hbase原理6 如何应用大数据技术？7 对开发来说算法意味着什么？推荐系统算法 复盘一下对于我这个java程序员/项目经理/架构师，在简历中写了很多对于大数据项目开发的人的一些问题，也许能帮到大家，因为我是一个对于分布式，高并发，高性能，高可用，海量数据都有解决方案和架构思想一个人，不断的突破自己，能更好的发挥自己在企业中的价值。对于大数据和算法体系可能有些java工程师觉得这不关我
大数据开发工程师面试题锦集
weixin_41070431的博客
06-17 5241
1、一个网络商城1天大概产生多少G的日志？ 10GB 2、1天大概有多少条日志记录（在不清洗的情况下）？ 1千万条 3、日访问量大概有多少个？ 几十万个独立访客 4、注册数大概多少？不清楚几百万吧 5、我们的日志是不是除了apache的访问日志是不是还有其他的日志？ log4j日志 6、你们的服务器有多少台？ 几十台 7、你们服务器的内存多大？ 有的8G，有的16G 8...
2022-华为-大数据研发工程师-秋招面经
思南的博客
10-13 1451
1、技术一面 Q1：根据实习经历介绍自己的技能积累和成长 Q2：介绍最有收获的一次项目 A2：抖音OOM问题的解决 Q3：本科阶段有哪些难忘的事情 A3：支教 Q4：支教的钱怎么获取的 Q5：俄罗斯方块 Q6：冒泡排序 Q7：RPC协议的字典序列 Q8：递归算法中，递归深度比较深的时候，怎么解决 Q9：无限个网页，受限于内存和可查看网页的限制，设计一种数据结构来存储 Q10：如果给你一套全新的代码，你会如何学习，让自己更快地上手 2、技术二面 Q1：详细介绍一下在字节跳动的工作 Q2：详细介绍一下伴随同行系
大数据开发常见面试问题总结
热门推荐
大致若愚的博客
01-03 4万+
1、简述对大数据组件的理解？ Yarn：大数据组件运行的job的管理器 Spark：分布式的利用内存进行分布式运算的大数据组件 Hbase：基于Hadoop的大数据常用数据库 Hive：基于Hadoop的大数据数据仓库，操作和关系型数据库（MySQL）类似 2、hdfs文件系统中NameNode和DataNode的区别和联系？ NameNode存储了元数据，并且调度，协调整个集群 Da...
2024年大数据最全2024大数据面试题+附答案(3)，1-3年大数据开发开发工程师面试经验分享
2401_84183669的博客
05-05 1718
5. Flume常用的source组件包括：avro、exec、netcat、spooling directory、tail等。4. Flume的工作原理是通过source从数据源中采集数据，经过channel存储，再通过sink发送到目标系统中。8. 可以通过在配置文件中为每个source和sink配置自己的channel来实现多个source和sink。6. Flume常用的sink组件包括：hdfs、hbase、logger、avro、null等。处理平台，用于实时流数据处理。
java面试——广州-唯品会-Java大数据开发工程师.zip
09-26
【Java大数据开发工程师面试知识点概览】 在Java大数据开发工程师的面试中，考察的知识点广泛且深入，涵盖Java编程基础、大数据处理框架、分布式系统、数据库管理、算法与数据结构等多个方面。以下是对这些关键领域...
超全大数据面试宝典-大数据面试有这套就够了.pdf
10-29
- **Hadoop相关总结**：讲述Hadoop的端口号、配置文件和集群搭建，HDFS的读写流程，MapReduce的Shuffle过程，Yarn的Job提交流程和调度器，以及Hadoop参数调优和相关项目经验。 - **Zookeeper相关总结**：涵盖...
【Java面试资料】-（机构内训资料）广州-唯品会-Java大数据开发工程师
08-17
这份PDF文档可能包含了丰富的Java大数据开发工程师面试所需的必备知识。对于Java开发者来说，掌握核心的Java语言特性、理解大数据处理框架以及具备良好的工程实践能力是至关重要的。下面将详细阐述这些关键知识点： ...
python数据工程师公司面试题整理
06-28
以上知识点是Python数据工程师面试中常见的考察点，熟练掌握这些内容能够帮助求职者在面试中表现出色。实际面试中，面试官还可能根据公司业务需求，提出具体项目经验、问题解决能力等方面的提问。因此，除了理论知识...
项目介绍8.docx 大数据项目+项目介绍+面试辅导
08-08
他提到了如何从物流报关行业转行到软件测试，再进一步深入大数据开发。他的经验表明，跨领域的学习和适应新环境的能力是获得成功的关键。 【大数据基础设施规划】 在规划大数据项目时，首先要确定集群规模。主人公...
prometheus
2201_75912662的博客
08-18 957
无人驾驶车辆运行中要记录的经度，纬度，速度，方向，旁边物体的距离等等。大都为插入操作较多且无更新的需求，插入数据多，每秒钟插入数据可到达千万甚至是上亿条。分析过去时序数据可以做成多纬度报表，揭示其趋势性、规律性、异常性。分析时序数据趋势可以做大数据分析，机器学习，实现预测和预警。按照时间顺序记录系统、设备状态变化的数据被称为时序数据。不依赖分布式存储，单个服务器节点是自主的。数据带有时间属性，且数据量随着时间递增。某一个地区的各车辆的行驶轨迹数据。模型拉去时间序列数据。可以查看到监控的数据。
数字（智）化采购系统优点_亮点_应用场景
xinyuan_123456的博客
08-19 368
数字化采购系统研发商，系统融合云原生、微服务、大数据、人工智能、物联网等先进技术，构建业务中台、数据中台、AI中台三大核心基座，以采购为切入点，结合供应链管理理念，为招采供应链提供交易、监管、数据、服务、运营为一体的全流程数智化解决方案
Linux之RabbitMQ集群部署
最新发布
m0_54563444的博客
08-21 852
消息中间件也可以称消息队列，是利用高效可靠的消息传递机制进行异步的数据传输并基于数据通信来进行分布式系统的集成。当下主流的消息中间件有等。Kafka是LinkedIn开源的分布式发布-订阅消息系统，目前归属于Apache顶级项目。Kafka主要特点是追求高吞吐量(单机可达到10万级)时效性是毫秒级的，一开始的目的就是用于日志收集和传输。对消息的重复、丢失、错误没有严格要求，适合产生大量数据的互联网服务的数据收集业务。
2024新型数字政府综合解决方案（八）
绿茵场的激情
08-16 248
新型数字政府综合解决方案结合人工智能、大数据、区块链与云计算等先进技术，旨在构建一个智能、高效、透明的政务服务体系，通过全面整合各部门的信息资源，实现数据的实时共享与高效管理，从而大幅提升政府应对复杂社会问题的能力；此外，区块链技术的引入，确保了数据的安全性和透明性，强化了公众对政府信息的信任，在提高政府服务质量的同时，促使市民积极参与社会治理，最终实现数字化转型与可持续发展的战略目标。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

不务正业的猿

谢谢您的支持与鼓励！！！

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值