Muse Glimmer, 로컬 에이전트 작업을 겨냥한 Meta의 30B 오픈웨이트 모델

사양

컨텍스트 창은 128K 토큰이다. Meta의 호스팅형 Muse Spark 계열과는 별개의 배포 선택지이고, 릴리스에는 모델 카드와 배포 안내가 포함됐으며 최적화된 소프트웨어 통합은 나중에 따로 제공됐다. 로컬에서 실행하면 추론 과정을 사용자 기기 안에 둘 수 있지만, 연결된 도구나 외부 서비스가 어떤 정보를 밖으로 내보내는지는 그쪽 설정에 달려 있다. 가중치는 자유롭게 내려받아 쓸 수 있으나 학습 데이터와 코드가 완전히 공개된 것은 아니어서 엄밀한 오픈소스는 아니다.

가격

제공 업체는 DeepInfra 한 곳이다. 100만 토큰당 입력 0.30달러, 출력 1.20달러이고 컨텍스트 128K, 정밀도 bf16이다. 업체가 하나뿐이라 가격 비교는 어렵고 가중치를 직접 받아 로컬에서 돌릴 때의 하드웨어 요구 사항과 API 비용을 따로 비교해야 한다.

성능

10개 점수가 공개됐다. 코딩에서 SWE-Bench Pro는 51.2%로 24개 중 21위, SWE-Bench Verified는 76%로 70개 중 29위, Terminal-Bench 2.1은 51.7%로 36개 중 35위다. 도구 연결 평가 MCP Atlas는 75.5%로 13개 중 9위, 컴퓨터 조작 OSWorld-Verified는 65.9%로 29개 중 21위다. 도구 없이 푼 Humanity's Last Exam은 22%로 24개 중 21위, GPQA Diamond는 83.5%로 66개 중 34위, 지식 업무 GDPval-AA v2는 953점으로 21개 중 21위다. 멀티모달에서는 CharXiv Reasoning이 78.8%로 16개 중 14위다.

참고할 점

순위만 보면 대부분 중하위권이지만 30B라는 작은 크기, Apache 2.0 라이선스, 로컬 실행을 염두에 둔 설계가 이 모델의 성격이다. 컨텍스트가 128K로 짧은 편이어서 긴 문서에는 한계가 있다. 순위보다 기기 안에서 에이전트를 돌려야 하는 상황인지를 먼저 따져 봐야 한다. 직전 Muse Spark 1.2가 컨텍스트 1M의 폐쇄형 호스팅 모델이었던 것과 대비된다.