注意機構

書いてみる

関連タグ

#transformer (359)
#ChatGPT (102,492)
#モデル (16,124)
#AI (341,116)
#LLM (7,236)
#インコンテキスト学習 (17)

最新AI「MiniMax Text」で長文処理が超簡単に！✨400万トークン対応で、長い論文やデータ分析もラクラク💖Lightning Attentionで高速&低コスト、GPT-4o並みの性能もスゴイ

葉加瀬あい (AI-Hakase)🎈動画&Note でAI解説🎥https://x.gd/F2Mvl
13日前

生成AIと脳との不思議な邂逅

ぱるさあ
10か月前

Base of RoPE Bounds Context Length

Ikemen Mas Kot
8か月前

Analyzing Multi-Head Self-Attention: Specialized Heads Do the Heavy Lifting, the Rest Can Be Pruned

Ikemen Mas Kot
7か月前

LSTM-based Deep Neural Network With A Focus on Sentence Representation for Sequential Sentence Classification in Medical Scientific Abstracts

Ikemen Mas Kot
1年前

次世代AIにも繋がるグローバル・ネットワーク・ワークスペース理論

ぱるさあ
1年前

Generative Pretrained Transformerを小学生でもわかる様に解説してくれたGPT-4

Zun-Beho
1年前

Convolutional neural network with parallel convolution scale attention module and ResCBAM for breast histology image classification

Ikemen Mas Kot
8か月前

Transformers Implement Functional Gradient Descent to Learn Non-Linear Functions In Context

Ikemen Mas Kot
9か月前

Can Mamba Learn How to Learn? A Comparative Study on In-Context Learning Tasks

Ikemen Mas Kot
9か月前