연구자들이 LLM의 정치적 편향성을 확인하는 연구가 많았어요. 새로운 데이터셋 HardChoices를 통해 LLM이 사회적 이슈에 대해 일관된 입장을 취하는지 확인해봤어요. 놀랍게도 LLM은 중립을 선언하기보다 일관성 없이 의견을 냈고, 의견을 낼 때는 의견이 일치하는 경향을 보였어요.
HardChoices 데이터셋은 정치적 이념 진영 내에서도 의견이 다른 주요 사회적 이슈를 요약하고 있어요. 대규모 LLM과 소규모 LLM 모두 HardChoices 질문에 중립을 선언하기보다는 일관성 없는 답변을 내놓았어요.
LLM은 사회적 이슈에 대한 입장을 낼 때, 의견이 일치하는 경향을 보였는데, 이는 기존 연구에서 확인된 정치적 편향성 외에 새로운 관점을 제시하는 결과예요.