MMLU

書いてみる

関連タグ

#LLM (6,208)
#AI (322,666)
#ベンチマーク (452)
#ChatGPT (88,700)
#モデル (14,779)
#CS (3,393)

【論文瞬読】MMLU-Pro: 大規模言語モデルの真の能力を引き出す革新的なベンチマーク

AI Nest
5か月前

AIの知能指数を測る？！ MMLUで明らかになるAIの得意不得意

Yoshito Kamizato@AI企業BtoBマーケター
1か月前

MMLUデータセットとは何か: LLMの性能測定

マーケットフィット観測所
6か月前

GPT-4も苦戦!? 最新LLMベンチマーク「MMLU-Pro」についてまとめ

AI情報発信@Shinano Matsumoto
5か月前

Dynamic Memory Compression: Retrofitting LLMs for Accelerated Inference

Ikemen Mas Kot
6か月前

Google、マルチモーダル生成AIモデル「Gemini」リリース

Happyデジタル
1年前

Air Street Capital社のState Of AI Report 2023を読む（4）

鈴木いっぺい (Ippei Suzuki)
1年前

LLMのキャリブレーション："logprob"の値が高ければ結果を信頼できるのか？

マーケットフィット観測所
5か月前

AIは、何に対して祈るのだろう？おかわり　( What does AI pray for ? Second , )

レコードノイズ(recordnoise)
10か月前