Examining Real-World Medication Consultations and Drug-Herb Interactions: ChatGPT Performance Evaluation
1. **研究の学術的背景と問い**
OpenAIがリリースしたChatGPTは、自然なタスクを処理する能力とそのユーザーフレンドリーなインターフェースで大きな注目を集めています。この研究の中心的な問いは、「ChatGPTによる薬剤に関する相談の回答の正確さと適切さはどう評価されるべきか？」です。
2. **研究の目的及び学術的独自性と創造性**
この研究の目的は、ChatGPTによる医薬品に関するアドバイスの精度と適切さを評価することです。この研究の独自性と創造性は、AIの応答の適切さを専門家が評価するという新たな視点を提供しています。
3. **研究の着想に至った経緯と位置づけ**
ChatGPTのリリース以降、その可能性が多く議論されてきました。しかし、実際にはその評価が短絡化されていたり、専門的な視点が不足していました。そこでこの研究では、薬剤師によるChatGPTの応答の評価を行い、その精度と適切さを評価しました。
4. **研究で何をどこまで明らかにしたか**
この研究では、基本的な医薬品に関する質問に対するChatGPTの応答は、一般の医薬品相談に対しては医療関係者が病院で参照するよりも高い適切さを示すことが明らかにされました。
5. **研究の有効性の検証方法**
2人の経験豊富な薬剤師がChatGPTからの各応答の適切さを評価しました。評価にあたり矛盾があった場合は、第三の薬剤師が最終的な決定を行いました。