ドイツで公開運用されたパーキンソン病の情報提供AIチャットボットを、会話単位で評価した前向き観察研究。
- RAG型のjAImesが公開後129日間に行った2035会話(6146メッセージ)を、自動トリアージと専門医レビューで評価した
- 自動判定は1803件(88.6%)が良好、224件(11.0%)が部分的に適切、8件(0.4%)が不適切。良好と判定された100件の再確認で4件に重大な誤りがあった
- 確認された重大事象には、認知症を伴う例への不適切なメマンチン推奨と、自殺念慮の訴えで緊急対応が作動しなかった例が含まれる
出典:Lancet Reg Health Eur / Real-world use and evaluation of a generative AI chatbot for Parkinson's disease information: a prospective observational study.