연구는 LoRA 방식으로 조정된 오픈 웨이트 LLM(Gemma-3-27B-it)을 활용한 자동 에세이 채점의 교차 프롬프트 일반화 및 모국어(L1) 채점 효과를 분석했어요.
Gemma-3-27B-it 모델은 8개의 새로운 프롬프트에 대한 12,100개의 TOEFL 에세이를 평가했는데, 77.79%의 전체 채점 정확도를 기록했어요.
모델은 유럽어권 배경 응시자의 에세이에 더 높은 점수를 부여하는 모국어 관련 채점 편향을 보였으며, 이는 학습 데이터 구성과는 무관한 현상이에요.