Pulse · AI 뉴스

llama-swap, 모델 동시 실행 기능 강화: 새로운 그룹핑 기능 출시

llama-swap · 2026-04-30

llama-swap이 모델 그룹핑 기능을 새롭게 선보이며, 모델이 단일 그룹에만 존재하던 기존 방식에서 벗어나 사용자가 원하는 그룹을 자유롭게 구성할 수 있게 됐어요.

새로운 기능은 모델 요청 시, '비용'을 고려하여 필요한 모델만 실행하고 나머지는 언로드하여 효율성을 높여요.

사용자는 큰 모델 전용 그룹, STT와 큰 모델 조합 그룹, RAG 활용 그룹 등 다양한 그룹을 설정하여 모델을 관리할 수 있어요.

##모델출시##llama-swap##그룹핑##동시실행
매일 핵심 AI 소식을 한국어로, 빠르게
App Store 에서 Pulse 받기 앱에서 열기