QLoRA 面试题
共 2 篇真实面经 · 涵盖 卓望 / 拼多多 等 2 家公司
卓望 AI 工程师校招面:异常控制流、LoRA 与全量微调、初始化对称性
卓望 27 届校招 AI 工程师一面:自我介绍、Python 的 try-except-else-finally 执行流程与 finally 中 return 的行为、LoRA 与全量微调、QLoRA 的区别与适用场景,以及模型初始化方法与全零初始化的对称性问题。
拼多多大模型算法秋招二面:LoRA 微调与注意力原理
拼多多大模型算法秋招二面,从 LoRA 的低秩假设与 rank 和 alpha 配比切入,覆盖 QLoRA 的量化与训练不稳定、注意力缩放与长上下文优化路线、RoPE 外推与 YaRN,以及显存估算、梯度累积和混合精度溢出排查。