AIしげちゃん（スマホ版）Ver 2.4
2023.08.15
生成AI(GPT-3.5/4)と音声認識・合成(Google Cloud Speech)により、VRM形式の3Dアバターと音声対話できるスマホアプリ
基本機能
音声による質問を認識し、生成AIの回答を音声で話す
生成AIの回答等に応じて3Dアバターの表情や動作が変わる
追加機能
生成AIの回答を音声だけでなくテキストウインドウでも表示
気象庁の気象情報APIを利用し、指定した地域の天気予報等を答える
環境センサーと連携し、温湿度の値や不快指数等を答える
スマートリモコンと連携し、部屋の照明や家電製品を制御する
ウェイクワード(起動音声コマンド)の代わりにマイクボタンをタッチすることで、音声入力待機状態にできる
音声入力待機時に待機ウィンドウをクリックすると、プリセットされた質問をランダムに行い、生成AIに回答させることができる
アイドル時にプリセットされた独り言をランダムに喋る。
3Dアバターをクリックすると、プリセットされた独り言をランダムに喋らせることができる
タイトルをタッチするとプリセットされた動作をランダムに行う。
ChatdollKitをベースにさせていただき、いくつか機能を追加して、概ねやりたかったことはできたので、ほぼ完成版かなw