跨书共振 · CROSS-BOOK RESONANCE
注意力机制的悖论:越灵活越脆弱
注意力机制赋予模型"看任意位置"的自由度,但这种自由度在数据不足时反而导致**对齐崩溃**——模型学会了"偷懒"(如始终关注固定位置而非真正对齐)。RNN-T 的单调注意力约束证明:**有时限制自由度反而提升性能**。这与《思考,快与慢》中"约束即自由"的理念形成跨领域呼应。
来自这本书的解读报告
《语音识别与合成》
这本书回答了机器如何听懂人话和说人话的问题,核心答案是从流水线拆解走向端到端建模
阅读完整解读报告 →