연구진이 LLM의 가치 정렬을 평가하는 새로운 벤치마크 D2VBench를 공개했어요. D2VBench는 LLM과 인간의 협업으로 구축된 1만 개의 일상적 딜레마 시나리오로 구성돼요.
벤치마크는 LLM의 가치 정렬을 다차원적으로 평가하는 하이브리드 평가 방식을 사용하며, 8개의 주요 LLM에 대한 실험 결과, 신뢰성과 견고성을 입증했어요.
D2VBench 데이터셋은 GitHub에서 공개됐으며, LLM 가치 정렬 연구에 현실적이고 세밀한 도구를 제공할 것으로 기대돼요.