Qwen2.5-7B 모델을 Claude Haiku 성능 수준으로 파인튜닝: API 비용 $3, 레이블링 없이

사용자가 Orlog 의사결정 엔진을 위해 Qwen2.5-7B 모델을 파인튜닝하여 Claude Haiku 성능에 근접하는 결과를 얻었어요. DV-DPO 방법을 사용해 1,040개의 학습 페어를 생성하는 데 약 3달러의 API 비용이 들었어요. 모델은 96%의 복합 성능을 달성했으며, Ollama에서 사용 가능한 GGUF 형식으로 제공돼요.