연구진은 인간과 LLM의 일상적 추론 오류 패턴을 비교 분석했어요. 두 그룹 모두 유사한 오류를 범하며, 이는 인간의 추론이 추상적 세계 모델이 아닌 패턴 매칭과 유사하다는 점을 시사해요. 연구 결과, LLM의 응답을 이끄는 어텐션 헤드는 패턴 매칭 형태를 구현하며, 이를 통해 인간의 예측 불가능한 추론 오류를 설명할 수 있어요.
인간과 LLM의 일상적 인과 추론은 추상적 세계 모델이 아닌 패턴 매칭에 더 일관성을 보인다는 점이 밝혀졌어요. 이는 LLM이 단순한 패턴 매칭이 아닌, 인간과 유사한 방식으로 추론할 수 있다는 가능성을 제시해요.
연구진은 어텐션 헤드를 분석하여, LLM의 응답이 특정 패턴에 의존하며, 이는 인간의 추론 오류에도 영향을 미치는 것을 확인했어요. 이 발견은 인간과 LLM의 추론 메커니즘에 대한 새로운 이해를 제공해요.