앤트로픽(Anthropic)이 LCLM(Latent Context Language Models)이라는 새로운 컨텍스트 압축 모델 패밀리를 공개했어요. 이 모델은 기존 방식보다 정확도와 효율성 모두 향상된 성능을 보여줘요.
LCLM은 0.6B 엔코더와 4B 디코더로 구성되어 있으며, 350B 토큰으로 1:4, 1:8, 1:16의 압축 비율로 사전 훈련했어요.
LCLM은 장기적인 관점의 에이전트에게 효율적인 기반을 제공하며, 필요에 따라 관련 세그먼트를 확장하여 사용 가능해요.