연구진은 이미지 질문 답변, 보고서 생성, 쉬운 언어로 바꾸기 등 정적인 작업에 초점을 맞춘 기존 의료 다중 모드 벤치마크의 한계를 지적하며, 환자 교육은 더욱 복잡한 요구 사항을 갖는다고 강조합니다.
MedImageEdu는 다회차, 증거 기반 방사선학 환자 교육을 위한 새로운 벤치마크로, 보고서 텍스트와 사례 이미지를 제공하고, 환자의 교육 수준, 건강 문해력, 성격 등을 반영하는 숨겨진 프로필을 기반으로 의사와 환자가 상호 작용합니다.
MedImageEdu는 다중 모드 에이전트가 증거를 기반으로 교육할 수 있는지 평가하기 위한 통제된 테스트베드를 제공하며, 언어 유창성이 시각적 기반의 충실성을 능가하고, 안전이 가장 취약한 영역이며, 감정적으로 긴장된 상호 작용이 어렵다는 점을 밝혀냈습니다.