솔라카일이 Anthropic의 Global Workspace / Jacobian Lens 논문을 기반으로 Gemma, Qwen 등 오픈 모델에 실험을 진행했어요. 모델 내부 상태를 시각화하고, 답변의 신뢰도를 판단하는 데 활용했죠.
실험 결과, 로컬 모델이 자신 있게 오답을 내놓을 때 내부 상태가 흐릿해지는 경향을 발견했어요. 이를 바탕으로 작은 로컬 모델이 잘못된 답변을 할 위험을 감지하는 로우터 개발에 성공했죠.
Gemma 모델에서 작업 공간 특징(workspace features)은 출력 신뢰도(output confidence)보다 정확도가 높았지만, Qwen 모델에서는 효과가 미미했어요. 향후 로컬-클라우드 라우팅에 활용될 가능성을 보여줍니다.