LLM 기반 다중 에이전트 소프트웨어 개발 시스템에서 토큰 소비량이 초기 생성보다 코드 리뷰와 검증에 집중되는 경향이 있다는 연구 결과가 발표됐어요. ChatDev가 수행한 30개 소프트웨어 개발 태스크에서 코드 리뷰 단계가 평균 59.4%의 토큰을 사용했어요. 이는 소프트웨어 개발 과정에서 코드 품질 관리가 중요한 역할을 반영하는 결과로 해석돼요.
연구는 LLM 기반 에이전트의 실행 추적을 소프트웨어 개발 생명 주기(SDLC) 단계에 매핑하여 토큰 소비량을 정량적으로 분석했어요. 초기 코드 생성 단계 이후, 코드 리뷰 및 검증 단계에서 토큰 소비량이 급증하는 패턴을 확인했어요. 이 결과는 LLM 에이전트 기반 개발 시스템의 효율성을 높이기 위해 코드 리뷰 자동화 기술 개발이 필요함을 시사해요.
이 연구는 LLM 에이전트 기반 소프트웨어 개발의 새로운 가능성과 함께, 토큰 사용량 최적화를 위한 추가적인 연구가 필요하다는 점을 강조해요. 특히 코드 리뷰 자동화 및 검증 프로세스 개선을 통해 개발 효율성을 높이고, 토큰 소비량을 줄일 수 있을 것으로 기대돼요.