可迁移模型 · TRANSFERABLE MODEL
有效自由度:模型真实复杂度由约束决定,而非参数数量
参数数量只是表面复杂度。正则化、平滑、约束等操作会降低模型的有效自由度——即模型真正被数据「说服」的程度。Ridge回归有100个参数,但若正则化很强,其有效自由度可能只有10。
来自这本书的解读报告
《统计学习基础》
这本书回答了高维复杂数据下如何平衡灵活性与泛化能力问题,答案是偏差-方差权衡框架下的正则化与模型平均
阅读完整解读报告 →
参数数量只是表面复杂度。正则化、平滑、约束等操作会降低模型的有效自由度——即模型真正被数据「说服」的程度。Ridge回归有100个参数,但若正则化很强,其有效自由度可能只有10。
这本书回答了高维复杂数据下如何平衡灵活性与泛化能力问题,答案是偏差-方差权衡框架下的正则化与模型平均