信息瓶颈是架构设计的核心矛盾

所有信息处理系统都面临同一个矛盾——压缩越强，信息损失越大；保留越多，计算成本越高。注意力机制的本质是在"完全压缩"（单向量）和"不压缩"（全序列保留）之间找到动态平衡点——让系统根据当前需求决定保留多少信息。这个原则适用于任何信息架构设计。