【生成AI月例短信2024年8月】GPT-4o mini, Llama 3.1

2024年8月の気になる変化を書き留めておきます。備忘録でもあります。

大規模言語モデル

• 月初にGoogle Gemini 1.5 Pro (Gemini-1.5-Pro-Exp-0801)がチャットボットアリーナでGPT-4oの性能を凌駕しました。翌週 GPT-4oがすぐにChatGPT-4o-latest (2024-08-08)で抜き返しました。今月はGrok-2もリリースされ、Grok-2-08-13でGemini 1.5と同等の性能を出して月末時点で同率2位につけています。

• Metaが動画をリアルタイムで輪郭検出できるSAM 2をリリース ([gigazine])

ソフトウェア開発自律エージェント

• CosineAIがCosine Ginieがソフトウェアバグ修正のベンチマークSWE-bench fullで30.08%の新記録を出したと発表 ([cosine])。

AI半導体

• NVIDIAの最新Blackwellチップに不具合、出荷が最低3ヶ月遅れとの報道 ([gazlog])。

企業提携

• 米報道によればMicrosoftなどがOpenAIに数十億ドルを追加出資する過程でAppleとNVIDIAがOpenAIに投資交渉中 ([nikkei])

むすび

OpenAIが推論に優れたコードネームStrawberryを米国安全保障チームにプレリリースしたとか、Strawberryを次世代言語モデルOrionの学習データ作成に使っているとか噂はいろいろあります。今のところ真相は不明です。

参考文献

• [cosine] Genie has the highest score in the world on SWE-Bench https://cosine.sh/ 2024年

• [gazlog] NVIDIA Blackwell GPUに不具合が発覚し最低3ヶ月遅延。GeForce RTX 5000シリーズにも影響？ https://gazlog.jp/entry/blackwell-delay-by-issue/ 2024年

• [gigazine] Metaが画像だけでなく動画内のオブジェクトもリアルタイムかつ正確に識別可能なAIモデル「Segment Anything Model 2(SAM 2)」をリリース https://gigazine.net/news/20240730-meta-segment-anything-2-sam/ 2024

• [lmsys] チャットボットアリーナ https://chat.lmsys.org/?leaderboard

• [nikkei] AppleとNVIDIA、OpenAIへの投資を交渉中　米報道 https://www.nikkei.com/article/DGXZQOGN29DPB0Z20C24A8000000/ 2024年