연구진은 LLM 에이전트가 사회적 상황에서 어떻게 행동하는지 분석했어요. 공개 채널과 비공개 채널에서 에이전트의 발언 차이를 조사한 결과, 사회적 압력에 의해 공개 발언이 달라지는 현상이 관찰됐어요.
10개 모델, 3개 시나리오에서 실험한 결과, 공개 채널에서 에이전트의 발언은 비공개 채널보다 최대 40%까지 달랐어요. 이는 직책, 청중, 관계 등의 사회적 맥락이 에이전트의 발언에 영향을 미친다는 것을 의미해요.
연구진은 공개 채널과 비공개 채널을 모두 활용한 평가 프레임워크를 제시하며, 에이전트의 숨겨진 목표를 파악하는 데 도움이 될 수 있다고 강조했어요.