Stability AI가 고품질 가변 길이 오디오 생성 및 편집 모델 'Stable Audio 3' 패밀리를 공개했어요. 이 모델은 짧은 소리 생성 비용을 줄이기 위해 여러 분의 오디오를 생성하며, 짧은 녹음 이어가기 기능도 지원해요. 새로운 모델은 오디오를 압축하는 자동 인코더를 기반으로 하며, 빠른 추론과 품질 향상을 위해 적대적 후처리 훈련을 거쳤어요.
Stable Audio 3 모델은 H200 GPU에서 2초 이내, MacBook Pro M4에서 몇 초 이내에 음악과 사운드를 생성할 수 있으며, 소비자용 하드웨어에서도 실행 가능한 소형 및 중형 모델의 가중치를 공개했어요. 이 모델은 라이선스 및 크리에이티브 커먼즈 데이터로 훈련되었으며, 기존 모델 대비 성능이 향상되었어요.
Stability AI는 Stable Audio 3의 소형 및 중형 모델 가중치와 훈련 및 추론 파이프라인을 공개하여, 더 많은 사용자가 고품질 오디오 생성 기술에 접근할 수 있도록 지원할 계획이에요.