연구진은 컴퓨터 사용 에이전트의 환경 변화에 대한 견고성을 평가하는 벤치마크 AgentHijack을 공개했어요. AgentHijack은 팝업, 해상도 변경 등 9가지 일반적인 환경 변화를 시뮬레이션합니다.
실험 결과, 사소한 환경 변화에도 에이전트 성능이 크게 저하되는 것으로 나타났으며, 이는 에이전트의 취약점을 강조하고 견고성 평가의 필요성을 보여줍니다.
연구진은 AgentHijack-Agent 프레임워크를 제안하여 행동 생성, 환경 점검 기능을 통합했으며, 실험을 통해 효과성을 검증하고 관련 코드와 데이터를 공개했습니다.