وجدت دراسة أن برنامج الدردشة تفوق على الأطباء عند تقييم تاريخ الحالات الطبية، حتى عندما كان هؤلاء الأطباء يستخدمون روبوت الدردشة.
في إحدى التجارب، كان أداء الأطباء الذين تم إعطاؤهم برنامج ChatGPT لتشخيص المرض أفضل قليلاً من الأطباء الذين لم يستخدموه. لكن برنامج الدردشة وحده تفوق على جميع الأطباء.
وحسب صحيفة الأميركية فقد كان الدكتور آدم رودمان، الخبير في الطب الباطني في مركز بيث إسرائيل ديكونيس الطبي في بوسطن، يتوقع بثقة أن روبوتات الدردشة المصممة لاستخدام الذكاء الاصطناعي ستساعد الأطباء في تشخيص الأمراض، لكن ثبت أنه كان مخطئاً.كشفت دراسة ساعد الدكتور رودمان في تصميمها، أن أداء الأطباء الذين تم إعطاؤهم برنامج ChatGPT-4 إلى جانب الموارد التقليدية؛ كان أفضل قليلاً من الأطباء الذين لم يكن لديهم إمكانية الوصول إلى الروبوت، فيما تفوق برنامج ChatGPT وحده على الأطباء، ما جعل رودمان يعرب عن صدمته من النتائج