연구진이 뇌·시각·언어를 통합하는 BrainJanus 모델을 개발했어요. 이 모델은 신경 활동을 시각 및 언어 표현과 연계하는 Unified Brain Tokenizer를 사용합니다.
BrainJanus는 뇌에서 이미지 및 텍스트를 생성하고, 이미지와 텍스트를 뇌 활동으로 인코딩하는 any-to-any 생성을 지원합니다.
다양한 실험에서 BrainJanus가 뛰어난 성능을 보였으며, 생물학적 해석 가능성을 보존하며 일반적인 뇌 모델링 패러다임으로 활용될 수 있습니다.