机器学习的“阿喀琉斯之踵”是偏差与方差的权衡

任何学习系统的根本困境在于“欠拟合”（偏差太大，规则太简单）与“过拟合”（方差太大，规则太复杂）之间的永恒权衡。这个权衡不仅存在于机器学习，也存在于人类认知：教条主义是偏差，机会主义是方差。真正的智能是动态平衡的艺术。