认知颠覆 · COGNITIVE OVERTURN
正则化的本质是编码先验知识
Dropout、L2、数据增强等技术看起来是"防止过拟合的技巧",但本质上是在编码"我们对问题的先验信念"——Dropout假设神经元间独立,L2假设参数服从高斯分布,数据增强假设目标函数对某些变换不变。理解这一点,就能自己发明新的正则化方法
来自这本书的解读报告
《深度学习:理论与实践》
这本书回答了深度学习如何从理论落地到实践的问题,答案是建立从数学原理到工程实现的完整认知桥梁
阅读完整解读报告 →