更改

Transformer (查看源代码)

2026年7月1日 (三) 19:38的版本

添加1字节、 2026年7月1日 (星期三)

→‎缩放点积注意力

第42行：第42行：

缩放点积注意力是 Transformer 中最核心的计算机制，其基本形式可以表示为：

缩放点积注意力是 Transformer 中最核心的计算机制，其基本形式可以表示为：

+

<math>

<math>

\mathrm{Attention}(Q, K, V)

\mathrm{Attention}(Q, K, V)

558

个编辑

取自“https://wiki.swarma.org/index.php/特殊:移动版差异/50410”