연구진은 LLM 기반 다중 에이전트 시스템(MAS)의 협업 역량 부족 문제를 지적하며, CollabSim이라는 새로운 시뮬레이션 프레임워크를 소개했어요.
CollabSim은 CSCW 연구를 기반으로 에이전트의 협업 역량을 체계적으로 분석하고, 상호작용 조건 조작 및 에이전트의 내부 상태를 탐색할 수 있도록 설계됐어요.
4가지 LLM을 대상으로 실험한 결과, CollabSim은 조건 효과를 포착하고 모델 성능 패턴을 구분하며, 작업 의존적인 에이전트 설계 효과를 밝혀냈어요.