🤖 ChatGPTが視覚👀と聴覚👂を獲得、そして音声会話もできるように

OpenAIは、ChatGPTに新たな音声と画像認識機能を追加しました。これにより、ユーザーは音声での対話や画像を使ってChatGPTとコミュニケーションを取ることができます。この機能は、次の2週間でPlusとEnterpriseユーザーに順次展開される予定です。

📱 新しいインターフェース

音声対話: モバイルアプリの設定から音声対話を有効にすることで、ChatGPTと音声で対話できます。家族に寝る前の話をしてもらったり、食事のテーブルでの議論を解決したりできます。

Use your voice to engage in a back-and-forth conversation with ChatGPT. Speak with it on the go, request a bedtime story, or settle a dinner table debate.

Sound on 🔊 pic.twitter.com/3tuWzX0wtS

— OpenAI (@OpenAI) September 25, 2023

画像認識: モバイルアプリで画像をキャプチャまたは選択することで、ChatGPTに画像を見せることができます。これを使って、例えば冷蔵庫の中身を確認して夕食のメニューを考えたり、複雑なグラフを解析したりできます。

ChatGPT can now see, hear, and speak. Rolling out over next two weeks, Plus users will be able to have voice conversations with ChatGPT (iOS & Android) and to include images in conversations (all platforms). https://t.co/uNZjgbR5Bm pic.twitter.com/paG0hMshXb

— OpenAI (@OpenAI) September 25, 2023

🛡️ 安全性と透明性

OpenAIは、この新しい技術が持つリスク（例：公共の人物を偽装する悪意のある行為など）に対処するための対策を講じています。また、モデルの限界についても透明性を持っています。特に、非英語圏のユーザーに対しては、その限界を理解した上で使用するように助言しています。

🚀 今後の展開

PlusとEnterpriseユーザーに先行して提供され、その後、他のユーザーグループにも展開される予定です。現在は、英語以外の合成音声サポートの発表はありませんが、今後追加されることを期待します。