연구진이 PubMed Central(PMC) 논문을 활용해 의료 멀티모달 모델 확장을 위한 MedPMC 프레임워크를 공개했어요.
MedPMC는 610만 건의 PMC 논문에서 1100만 개의 의료 이미지-텍스트 쌍을 큐레이션했으며, 의료 관련 이미지의 정확도를 높였어요.
MedPMC로 훈련된 CLIP 모델은 기존 모델 대비 벤치마크에서 평균 7.1%p 성능 향상을 보였어요.
연구진은 MedPMC 프레임워크, 데이터셋, 벤치마크, 사전 훈련된 모델을 공개했어요.