연구진이 오디오-언어 모델(LALM)의 미세한 음성 속성 인식 성능을 향상시키는 IAAN(Identifying and Amplifying Acoustic Neurons) 기술을 개발했어요.
IAAN은 훈련이나 라벨링 없이 오디오 인코더의 신경세포를 분석하여 음성 정보를 가장 잘 나타내는 세포를 식별하고 증폭하는 방식이에요.
Audio-Flamingo-3, Qwen2.5-Omni, Kimi-Audio 모델에서 평균 정확도가 각각 25.7점, 21.4점, 9.7점 향상되는 효과를 보였어요.
기존 디코딩 단계나 언어 모델 내부 개입 방식보다 효과적이며, 특정 신경세포 선택이 중요함을 확인했어요.