聖武天皇と奈良の大仏② 無料対話型生成AIの性能比較！「聖武天皇と大仏」でバトル
ChatGPT3.5のチャッくんとBard（現Gemini）のバー君、BingAIのビー君
どれも無料の対話型生成AI。
どれが性能高いのか？
ちょうど、聖武天皇と大仏についての教材研究をしていたので、
それを活用して検証してみました。
すべて同じプロンプトです。
＃タスク
テーマについて議論してください。
＃ルール
登場人物を3人出してください。全員小学6年生。一人は歴史の知識が豊富なA、もう一人は変わった視点で意見を言うB、3人目は学力が低く、言っていることが理解できずに疑問が多いC
・疑問に対しては残りの２人が必ず答えます。
＃テーマ
東大寺の大仏のような大きな大仏をなぜ聖武天皇はつくろうとしたのか
①ChatGPT3.5のチャッくんの回答
②Bardのバー君の回答
結果発表です。
この中で一番、プロンプトに忠実に議論できたのは、
Bardのバー君でした
チャッくんもビー君はどちらも大して差がなく、当時の社会情勢について触れておらず、仏教を普及させるという視点でしか議論されていません。
それに対して、バー君は、当時の社会不安について触れており、その不安を払拭するための手段として大仏づくりがあったと議論しています。
ビー君は、Chatgpt-4を搭載したBingチャットなどとタイトルバーに表示されているけど、ちょっと物足りなさを感じました。
ただ今回のテーマでは、バー君が抜きんでていたけど、得意不得意があるようで、プロンプトによっては、お答えできませんって返ってくることもあります。
それぞれのよさを知って使い分けるのがよさそうです。
すくなくとも社会の教材研究にはビー君が群をぬいて優れていると言えます。
本当のChatgpt-4でやったらどうなるんだろ…
使いこなす自身ないから、お金払ってまで使おうとは思ってないけど…
どなたか興味ある方はやってみてください。
もしやった人がいたら教えてくださいね！
Bardで十分満足できる内容だっただけに、Geminiも興味ありあり、今度時間あったらやってみますね！
お楽しみに！