연구진은 미디어 편향 탐지 모델의 설명 가능성을 다각도로 평가했어요. BERT와 RoBERTa 모델을 기반으로 예측 성능, 설명의 타당성, 메커니즘 충실도를 분석했죠.
전문가 근거와 토큰 수준의 정렬을 비교하여 설명의 타당성을 평가하고, 모델의 주의 집중 메커니즘이 예측 신호를 얼마나 잘 반영하는지 확인했어요.
주의 집중을 감독하는 튜닝은 설명의 타당성을 개선했지만, 모델 구조에 따라 설명 방법의 효과는 크게 달랐고, 모델 크기가 메커니즘 압축 가능성을 결정하지 않는다는 점도 확인했어요.