节前,我们组织了一场算法岗技术&面试讨论会,邀请了一些互联网大厂朋友、今年参加社招和校招面试的同学。
针对大模型技术趋势、大模型落地项目经验分享、新手如何入门算法岗、该如何准备面试攻略、面试常考点等热门话题进行了深入的讨论。
汇总合集:
初试
50分钟左右,大部分时间在问简历上的论文和项目。中间针对项目中的一些细节展开提问或发散到一些八股。
面试官现场搜论文点开,直接针对论文里写的内容问。
- 用过哪些参数高效微调方法?讲一下LoRA。为什么LoRA模块可以用SVD近似?
- llm微调经历。
- 增量预训练和预训练的区别?
- deepspeed的ZeRO2是什么?
- rlhf对齐经历(此处无,但讲了一个rl项目)。
- temperature的作用?在对比学习中发挥什么作用?
- 手撕代码部分是写一个文本分类模型的整体训练流程。
复试
60分钟左右,整体面试过程像聊天一样,比较轻松。整体上交流部分有接近一半时间在聊rl。
- codealpaca和sharegpt的数据是什么样的?用什么指标评估?
- 用过rlhf对齐吗?
- ppo的全称?proximity体现在哪里?
- Q–learning也是学习策略,那它和policy based方法的区别在哪里?
- 对数据选择问题,给出一个公式化定义。
- 分布式集合通信中allreduce的实现方式。
- 手撕代码是给一个数算立方根。
复试后第二天流程进入hr面。
hr面
大概五六分钟,自我介绍后问了下实习时间这种的信息,很快就结束了。
hr结束后进入云证,提交信息后进入录用评估。
录用评估6天后oc🎉
技术交流
前沿技术资讯、算法交流、求职内推、算法竞赛、面试交流(校招、社招、实习)等、与 10000+来自港科大、北大、清华、中科院、CMU、腾讯、百度等名校名企开发者互动交流~
我们建了算法岗面试与技术交流群, 想要进交流群、需要源码&资料、提升技术的同学,可以直接加微信号:mlc2040。加的时候备注一下:研究方向 +学校/公司+CSDN,即可。然后就可以拉你进群了。
方式①、微信搜索公众号:机器学习社区,后台回复:技术交流
方式②、添加微信号:mlc2040,备注:技术交流+CSDN