연구진이 자율 에이전트의 문서 작업 신뢰성을 평가하는 벤치마크 'DocOps'를 발표했어요. DocOps는 문서 작업을 세분화한 분류 체계를 기반으로, 에이전트의 성능을 검증합니다. 현재까지의 에이전트는 장거리 작업, 상태 추적, 의미 검증, 메타데이터 관리에서 한계를 드러냈어요.
DocOps 분석 결과, 최첨단 에이전트조차 복잡한 문서 작업에서 심각한 제한 사항을 보였어요. 장기 상태 추적 실패, 피상적인 의미 검증, 구조적 메타데이터 파괴 등의 문제점이 발견됐습니다.