연구진은 프롬프트 최적화 과정에 설명을 도입하여 해석 가능성을 높이는 iPOE라는 새로운 전략을 제시했어요. iPOE는 LLM의 의사 결정 과정을 투명하게 보여주는 가이드라인을 자동으로 생성하고 최적화하여 프롬프트에 포함시킵니다. 실험 결과, iPOE는 기존 프롬프트나 무작위 가이드라인을 사용하는 경우보다 최대 35% 성능 향상을 보였어요.
iPOE는 인간이 주석 작업을 위해 설계하는 가이드라인과 LLM 프롬프트 최적화 방식을 결합한 방법론입니다. LLM 설명이나 인간의 설명을 활용하여 가이드라인을 생성하고, 이를 통해 프롬프트 최적화 과정을 안내합니다. 이를 통해 LLM의 의사 결정 과정을 투명하게 만들고, 전문 지식이 없는 사람도 프롬프트 최적화에 참여할 수 있도록 돕습니다.
iPOE는 4개 데이터셋 실험에서 기존 프롬프트 대비 최대 31% 성능 향상을 보였으며, LLM이 생성한 설명으로도 인간의 설명을 대체할 수 있음을 확인했습니다. 이는 프롬프트 최적화 과정의 투명성을 높이고, 접근성을 향상시키는 데 기여할 수 있습니다.