연구진은 RAG(Retrieval-Augmented Generation)를 활용하여 현재 뉴스 정보를 기반으로 핀란드 맥락에 맞는 풍자적인 사전 정의를 생성하는 새로운 파이프라인을 개발했습니다.
풍자적인 정의 생성 평가를 위해 새로운 평가 프레임워크를 도입하고 6명의 평가자가 100개의 정의를 평가하여 다양한 실험 조건을 분석했습니다.
연구 결과, 생성된 정의는 유머보다 정치적이라고 인식되었으며, LLM이 정치적 관련성 평가에서는 인간의 판단과 잘 일치하지만 유머 평가에서는 낮은 성능을 보였습니다.