OmniGameArena는 12개의 Unreal Engine 5 게임으로 구성된 새로운 벤치마크입니다. Solo, PvP, Coop 게임을 통합하고 에이전트 개선 동역학(IDC)을 통해 에이전트의 기술 프롬프트를 자율적으로 개선합니다. IDC는 에이전트 점수 변화와 학습된 기술의 행동을 분석하여 성능 개선을 측정합니다.
냉간 시작 벤치마크 점수 외에도 IDC는 에이전트가 게임을 플레이하면서 점수가 어떻게 변하는지, 그리고 학습된 기술이 새로운 작업에서 어떻게 수행되는지를 보여줍니다. 12개의 VLM 에이전트와 4개의 최상위 에이전트에 대한 결과를 보고합니다.
OmniGameArena는 상업용 VLM, 오픈 웨이트 VLM, 특수 게임 정책을 포함한 다양한 에이전트 클래스를 공정하게 평가하는 데 사용될 수 있습니다.