엔지니어링(ENGINEERING Ingegneria Informatica S.p.A.)에서 개발한 EngGPT2MoE-16B-A3B는 160억 파라미터의 MoE 모델로, 이탈리아 LLM 성능 평가에서 경쟁 모델 대비 우수한 성과를 보였습니다.
ARC-Challenge, GSM8K, AIME24, MMLU, HumanEval 등 국제 벤치마크에서 FastwebMIIA-7B, Minerva-7B, Velvet-14B, LLaMAntino-3-ANITA-8B 모델보다 성능이 뛰거나 비슷했으며, RULER 벤치마크에서 가장 긴 컨텍스트(32k) 설정에서 최고 성능을 기록했습니다.
ITALIC 이탈리아 벤치마크에서는 Velvet-14B 모델을 제외하고 다른 모델과 비슷하거나 더 나은 성능을 보여주었으며, GPT-5 nano, Qwen3-8B 등 일부 국제 모델보다는 낮은 성능을 나타냈습니다.