Grok 4.5를 활용한 자동 연구 루프가 Parakeet CPU STT 성능을 2.1배 향상시켰습니다. 엔코더 최적화를 통해 98%의 벽 시간 개선을 달성했습니다. 최적화 과정에서 QDQ MinMax를 활용하여 EPYC에서 RTF를 51.7% 낮췄습니다. Mac에서도 1.4배의 성능 향상을 확인하여 특정 호스트에 국한된 결과가 아님을 입증했습니다.
엔코더 최적화 과정에서 스레드, 아레나, ORT 최적화 등 다양한 시도가 있었지만, 대부분 소음으로 판단되었습니다. 최적화 결과, 절대 JFK WER은 동일하게 유지되었으며, 페어와이즈 평균 WER은 약 0.09% 미만으로 개선되었습니다. 다만, 다국어 테스트는 수행되지 않았습니다.
자동 연구 루프는 프로덕션 결정 (freeze 여부, 품질 기준 설정, 공개 대상 결정)을 담당하고, 사용자는 품질을 판단하는 역할을 수행했습니다. 코드, 스크립트, 장부, 모델 가중치는 댓글에서 확인할 수 있습니다.