CAPTCHA는 봇을 차단하는 데 널리 사용되지만, 강화 학습 기반 모델 훈련 데이터 부족으로 해결 방법 연구가 미흡했어요. 연구진은 CAPTCHA 해결 벤치마크 CaptchaBench를 구축하고, 16,000개의 샘플을 생성하여 상세한 지역 및 프로세스 수준의 주석을 제공했어요. CaptchaMind는 명시적 추론 과정 감독을 통해 82.9%의 평균 성공률을 달성하며 기존 방법보다 성능이 뛰어났어요.
CaptchaBench는 기존 방법들이 미세한 시각적 디테일 캡처 및 영역 수준 비교에 어려움을 겪는다는 점을 보여줬어요. CaptchaMind는 8개의 작업에서 71.0%의 실제 환경 성공률을 기록하며, 기존 방식보다 우수한 성능을 입증했어요.
연구진은 CAPTCHA 해결을 위한 대규모 훈련 데이터 확보 및 프로세스 수준 주석 제공의 중요성을 강조하며, CaptchaMind의 성공을 통해 강화 학습 기반 접근법의 가능성을 제시했어요.