연구진이 Mistral 7B, Orca 2-7B, LLaMA 3.1-8B, Falcon 7B, SciBERT 등 5개 LLM을 과학 논문 인용 기능 분류에 활용해 성능을 평가했어요. Falcon 7B 모델을 파인튜닝해 ACL-ARC 데이터셋에서 73.3%의 F1 점수를 기록하며 기존 방식보다 성능을 개선했어요. 새로운 AC3 데이터셋을 공개했는데, 이는 중립적 언급과 평가적 언급을 구분하는 7가지 분류 체계를 포함하고 있어요.
AC3 데이터셋은 다양한 컨텍스트 추출 방식을 통해 분류 성능에 미치는 영향도 분석했어요. 연구는 기존 연구 동향 분석에서 지적된 LLM 비교 연구의 공백을 메우는 최초의 연구 중 하나로 평가받고 있어요.