Anvar Azizov이 4비트 GLM-5.2 모델을 4대 DGX Spark에서 실행한 결과, Terminal-Bench 2.1에서 70.8%의 성능을 기록했습니다. 이는 정밀 모델의 81.0%에 비해 다소 낮은 수치입니다.
실험 환경은 4대 DGX Spark (GB10)을 사용했으며, 메모리 사용량 최적화 및 NVFP4 4비트 KV 캐시를 적용하여 100K 컨텍스트를 지원했습니다.
결과적으로, 4비트 모델은 정밀 모델 성능의 약 87% 수준을 보였으며, 인프라 문제 및 환경 설정으로 인한 오류 가능성을 확인했습니다.