#数值计算

从 RMSNorm 面试题延伸：平方求和为什么也会溢出

2026/12/8

读到 RMSNorm 的公式，很容易把实现写成“逐个平方、求平均、开根、再相除”。对普通数字，这条路径没有问题。但把输入换成两个极大的有限数，平方可能先变成无穷，最后得到的归一化结果反而接近零。数学答案并没有变成零，坏掉的是中间计算。

2026/9/9

先说明属性：这是一篇经典题解析，题目出自本地历史面试资料，并非任何公司的当前招聘原题。这类「禁用数学库、手写开方」的题目在手写代码环节反复出现，值得吃透。