StupidScaredSquirrel 사용자가 오픈 모델의 효율성 현황을 분석했어요. 효율성은 활성 파라미터 대비 점수로 정의하며, 패레토 최전선에 있지 않은 모델은 제외했어요. Artificial Analysis의 집계 벤치마크는 완벽하지 않지만, 전반적인 지표로 활용했어요.
분석 결과, 특정 모델들이 효율성 최적 현황을 보이는 것으로 나타났으며, 이는 활성 파라미터 대비 높은 점수를 의미해요. 사용자는 이 벤치마크가 오픈 모델 성능 평가에 유용하다고 판단했어요.