NVIDIA가 텍스트 기반 이미지 생성 모델 'NL-Diffusion-Image'를 공개했어요. 이 모델은 토큰화된 이미지 패치 기반의 마스크 디스크리트 확산을 활용해 고해상도 이미지를 생성합니다.
기존 Diffusion LLM과 유사하게 반복적인 병렬 마스크 해제 방식으로 작동하며, 이미 생성된 토큰을 수정하는 메커니즘을 도입했어요.
모델은 Nemotron-Labs-Diffusion을 기반으로 하며, 그룹화된 교차 엔트로피(GCE) 목적 함수를 통해 대규모 어휘 학습을 효율적으로 처리합니다.