Pulse · AI 뉴스

LLM API 비용 최대 96% 절감: 0.57MB 라우터로 로컬-클라우드 분기 및 PII/탈옥 방지

mpcfintech · 2026-07-19

사용자가 LLM API 비용을 줄이기 위해 0.57MB 라우터를 개발했어요. 이 라우터는 프롬프트를 분석하여 로컬 또는 클라우드 모델로 라우팅하고, PII 감지 및 탈옥/인젝션 스크리닝 기능도 제공해요.

실제 프롬프트 2,022개에 대한 테스트에서 전체적으로 82%의 정확도를 보였으며, 87.5%의 탈옥 시도 차단 성공률을 기록했어요.

VS Code/Cursor 확장, npm SDK, 호스팅 API 등 세 가지 방법으로 사용해 볼 수 있으며, VS Code 마켓플레이스 및 Open VSX에서 무료로 사용할 수 있어요.

##LLM##API##라우팅##보안##절감
매일 핵심 AI 소식을 한국어로, 빠르게
App Store 에서 Pulse 받기 앱에서 열기