연구진은 의료 영상-언어 모델(VLM)의 오류를 수정하는 모델 편집 기술의 성능을 평가하기 위해 M3Bench 벤치마크를 공개했어요.
M3Bench는 실제 임상 환경의 다양한 변수를 반영하여 편집된 모델의 신뢰성, 정확성, 일반화 가능성을 평가하는 데 초점을 맞추고 있어요.
연구 결과, 기존 편집 방법들은 특정 기준에서 강점을 보이지만, 임상 환경의 복잡성을 모두 해결하지 못하며, 잠재 공간 기하학적 문제로 인해 어려움을 겪는 것으로 나타났어요.