腾讯大数据测开-20240630

昨天面了一个小小厂，公司是 100-599 规模的，做的是量化人工智能，和 deepseek 公司有点像，然后他们后端技术栈主要是 java➕springcloud。现在这个点日常实习有点少，很多都是暑期实习 26 届。所以想先干着，沉淀一下，丰富一下简历。想着干两个月，五月份再投投中厂或者大厂日常实习。优点就是每周可以只去三天，不加班，下午六点下班，离学校近，半个小时车程，前期会有技术老师带，但是自己也需要独当一面，独立做一些开发任务。缺点：钱少😂😂

部门与岗位：TEG - 混元大模型团队 - 大模型对齐一面自我介绍，过实习，讲论文，论文过的比较细，有说的笼统的地方面试官会实时进行询问交流了解哪些大模型，简要挑一两个介绍一下，当时说了 Qwen 和 DeepSeek，然后面试官又问了这两个有什么区别接着上一问，为什么大家都开始探索 MoE 架构，MoE 相比 Dense 有什么好处在之前实习的时候用 LoRA 微调过 Qwen，于是问了有没有全量微调过，有没有对比过两者的性能表现讲一下大模型训练和推理的流程，SFT 和 RLHF 的作用分别是什么在 RLHF 中，目前主流的强化学习算法有哪几个，写一下损失函数的表达式代码：22. 括号生成代码：多头自注意力一面问的八股还是比较多的，问的也比较细，而且还写了两道代码题，整个面试花的时间也比较多，大概一个半小时左右二面自我介绍，过实习和论文，面试官会一起进行探讨，包括工作的动机、贡献和结果，也会提一些问题和建议之前实习用 DeepSpeed 微调过 Qwen2-72B，于是面试官问了 ZeRO-1，ZeRO-2，ZeRO-3 三个模式的区别当时你用 DeepSpeed ZeRO-3 来微调 Qwen2-72B，每一张卡占用的显存大概是多少，估算一下为什么是占这么多的显存除了 DeepSpeed，还用过其他的什么优化方法吗我看你也用到了 LoRA，知道 LoRA 的原理吗，A 和 B 两个矩阵怎么初始化，有了解过其他的初始化方法吗对 RLHF 了解的多吗代码：3. 无重复字符的最长子串二面更多的是结合具体的工作来问的，从用到的东西来引出问题，问的也比较灵活。当然因为部门主要是做对齐的，所以也大概聊了聊 RLHF三面自我介绍，挑一个觉得做的比较好的论文和实习讲一下，面试官问的比较详细，为什么选现在这种方案，为什么 work，其他方案有考虑吗在微调 Qwen 的时候，数据是怎么构造的，有用到什么数据清洗方法吗，数据配比是怎么做的讲一下 RLHF 的流程，之前有用 RLHF 做过模型对齐吗在做对齐的时候，为什么 SFT 之后还要做 RLHF，只用 SFT 可以吗知道哪些强化学习算法，除了 PPO 和 DPO 这些呢，DeepSeek 用的 GRPO 相比于 GPT 的 PPO 做了哪些改进开放题：对目前大模型的发展有什么看法代码：零钱的两个题 322. 零钱兑换518. 零钱兑换 II三面面试官更聚焦于对齐这一块的内容，考的比较深。由于之前没有接触过强化学习，答得还是比较吃力的，不过面试官还挺好的，会一起讨论来做引导四面自我介绍，过论文和实习，问的也比较细，这里能明显的感受出来面试官的视角更系统，会把这些工作串起来问我看你简历上没写 RLHF，平常有用过 RLHF 吗推导一下神经网络反向传播的过程一道排列组合的概率题开放题：你觉得大模型目前还有哪些可以改进的点四面整体更看重思维和基础，没有考察什么八股总结一共四轮技术面，整体来说强度比较大，对于大模型八股的考察比较细，对大模型的理解问的也比较深刻，包括一些数理逻辑基础，考察的比较全面需要内推码的可以用下面这个链接：内推链接：https://join.qq.com/resume.html?k=ANQI6RfQ3rhPS2dpyIkeSw#26届实习##大模型##八股##面经##腾讯##内推#

如题，cpp选手被通知拿到字节推荐架构组的offer base北京，要求3月底到岗，暑期实习有转正上海一家量化，做交易系统，还没确定offer，个人感觉有点希望....对推荐架构不是很有兴趣，听面试官介绍感觉有点像洗数据的？且不太想留北京，但架不住字节大厂身份...想问问各位牛友的看法而且暑期实习的岗位是不是最好跟未来真的想做的岗位是一致的呢？#offer帮选#

2025 Shanghai Software Developer Summer Internshippart1是HackerRank里的，个人实力不济，选择躺平。第一道写一个newsProvider类，需要实现AddSubscription，RemoveSubscription，NewsReceived，HashMap方法。第二道写一个卫星网络的类，要实现SatelliteConnected，RelationshipEstablished，MessageReceived三个方法。too hard!part2是20道不定项选择题：多线程利用多CPU架构；关系数据库中规范化是什么；二维数组两种遍历方式的快慢；哈希一些操作的时间复杂度；Linux的system call时间开销为50ns；对于动态数组，哪项平均时间复杂度最低；小明想学python和java，不推荐哪本书；子网掩码定义同一网络的IP地址范围；UDP传输会发生什么情况；四个16进制数哪些小于100；给栈操作选最后栈的内容；选择邻接矩阵比领接链表的优势；在多线程程序中修复错误共享；二进制表示16位整数需要多少位；TCP/IP在哪些情况下不是好的选择；位运算；哪一个概念不用于多线程中的同步；在给的一个二叉搜索树中对随机的一个node平均比较几次；向空堆中插入65个元素，深度是多少；哪些协议用于Linux进程间通信。part3是9个小游戏。1、Balloon，每次充气花费$0.1, 超过某个值会爆炸，爆炸前收回当前的金额。第一次有30轮，金额不限；第二次20轮，在上次获得的金额基础上打气。本人采用激进的策略结束时是$35,应该不是投资goat。2、Skyscraper，类似汉诺塔，三个柱子，一些不同颜色的块移动到答案一致。3、Shapeshift，考反应，出现矩形按左方向键，圆形按右方向键。4、the switch，有两个框，上面看和是不是奇数，下面框看两组箭头是不是相同。5、code compare， 一个字符串，有四个选项，选相同字符串，每次估计就5-6秒。我只能记住前三个来做判断(囧)6、number Box，四个数和中间的结果，通过加减乘除法计算出结果7、figure it out，猜盖住的牌。最多16种组合，图形，颜色，图纹，点。每次会显示和盖住的牌对比错误和正确几项。另外两个记不清了，求原谅。  #找实习#