Pulse · AI 뉴스

디퓨전 언어 모델의 적응형 멀티-스텝 룩어헤드 디코딩

AdaLook · 2026-07-17

마스크 디퓨전 언어 모델(DLM)은 마스크된 토큰을 반복적으로 개선하여 병렬 텍스트 생성을 가능하게 합니다. AdaLook은 후보 점수 분산에 따라 롤아웃을 계속할지 여부를 동적으로 결정하고, 중간 롤아웃 상태가 추가 탐색을 필요로 할 때 브랜치 확장을 지원합니다. 다양한 벤치마크와 모델에서 실험 결과, AdaLook은 기존의 단일 스텝 룩어헤드 디코딩 방법보다 정확도와 디코딩 스텝 간의 균형이 더 좋습니다.

##디퓨전##언어모델##룩어헤드##AdaLook
매일 핵심 AI 소식을 한국어로, 빠르게
App Store 에서 Pulse 받기 앱에서 열기