연구진은 체스 엔진의 전략을 인간이 이해하기 쉽게 설명하는 '체스 전략 언어화'라는 새로운 과제를 제안했어요. 체스 전략을 자연어로 표현하는 파이프라인과 평가 프레임워크를 설계하고 실험을 진행했어요. 실험 결과, 자연어가 인간과 LLM 플레이어 모두에게 전략 정보를 전달하는 유망한 매체임을 확인했어요.
연구는 체스 전략 평가 시 메인 라인 외의 상황 고려 중요성, 개념 기반 설명의 한계, LLM 대신 인간 평가의 한계를 보여줬어요. 체스 전략 언어화는 체스 엔진의 작동 원리를 이해하고 LLM 기반 체스 플레이어 개발에 기여할 수 있어요.
연구진은 체스 전략 언어화 과제를 통해 자연어의 잠재력과 LLM 평가의 한계를 확인하고, 앞으로 인간과 LLM이 협력하여 체스 전략을 이해하고 발전시킬 수 있는 가능성을 제시했어요.