注意力蒸留

書いてみる

関連タグ

#Hedgehog (134)
#HedgehogAttention (1)
#アソシエイティブリコール (2)
#タスク (9,300)
#データセット (948)
#トランスフォーマーAPI (1)
#モデル (17,403)

The Hedgehog & the Porcupine: Expressive Linear Attentions with Softmax Mimicry

Ikemen Mas Kot
10か月前