연구진이 실제 음악 녹음에서 작동하는 멀티 악기 음악 채보 모델 MuScriptor를 공개했어요. 기존 방식은 단악기 녹음이나 복잡한 음악 믹스에 취약하다는 한계가 있었어요. 합성 데이터를 활용한 사전 훈련과 실제 음악 오디오로의 미세 조정, 강화 학습 후처리 방식을 결합해 성능을 개선했어요.
MuScriptor는 악기 존재 여부에 대한 조건을 추가해 맞춤형 채보를 지원하며, 다양한 장르의 실제 음악 녹음에서 활용 가능해요. 기존 합성 데이터 기반 모델은 현실적인 음악 환경에서 성능이 떨어지는 문제점을 개선했어요. 연구 결과와 모델은 오픈웨이트로 공개돼 연구 커뮤니티에 기여할 예정입니다.