ログイン
会員登録
RetNet
書いてみる
関連タグ
#RWKV (37)
#transformer (287)
#メモリ (860)
#モデル (13,796)
#Arxivデータセット (1)
#BPTT (1)
人気
急上昇
新着
定番
有料のみ
4件
人気の記事一覧
気になったのでシュッと RetNet を調べてみた
bbz
1年前
16
シンプルさと計算効率の間で: Transformerアーキテクチャの強みってなに?
Koboichi
1か月前
Scaling Transformer to 1M tokens and beyond with RMT
Ikemen Mas Kot
4か月前
Retentive Network: A Successor to Transformer for Large Language Models
Ikemen Mas Kot
5か月前