マルチヘッド・アテンション

書いてみる

関連タグ

#トランスフォーマー (1,330)
#多頭アテンション (5)
#Artificial_Intelligence (93)
#エンコーダ・デコーダ (4)
#バッチ正規化 (6)
#レイヤー正規化 (1)

言語AIの進化史⑱トランスフォーマー（自己アテンション機構）

澁谷直樹 @ キカベン
1か月前

トランスフォーマーの自己アテンションの理解⑦エンコーダ・ブロックの詳細

澁谷直樹 @ キカベン
2年前