认知颠覆 · COGNITIVE OVERTURN
过拟合是"信息泄露"而非"学太多"
经典解释是"模型太复杂学了噪声",更精确的理解是"模型从验证集泄露了信息"(通过手动调参)。正则化、交叉验证的本质是防止这种信息泄露。这个视角解释了为什么深度学习(参数远多于数据)不过拟合——如果用正确的方式评估。
来自这本书的解读报告
《机器学习:一个概率视角》
本书回答了如何用概率论统一整个机器学习领域的问题,答案是将所有ML方法重新表述为概率推断
阅读完整解读报告 →