Meta Muse Spark Open 공개: 816B MoE 오픈웨이트, 1M 컨텍스트
Meta가 2026년 10월 15일 Muse Spark Open 가중치를 공개했다. 총 816B, 활성 42B MoE에 1M 토큰 컨텍스트를 지원하며 라이선스는 상업 이용이 제한적이다.
Meta가 2026년 10월 15일 Muse Spark Open 가중치를 공개했다. 총 816B, 활성 42B MoE에 1M 토큰 컨텍스트를 지원하며 라이선스는 상업 이용이 제한적이다.
핵심 요약
Meta가 2026년 10월 15일 Muse Spark Open의 가중치를 공개했다. 총 816B 파라미터의 Mixture-of-Experts(MoE) 모델이다. 토큰당 활성 파라미터는 42B다. Meta는 이를 "미국 최고 성능 오픈웨이트 모델"이라고 주장한다. 이 평가는 Meta 자체 주장이며 독립 검증은 확인되지 않았다. API 전용으로 나온 Muse Wonder(10월 12일)와는 별개의 제품이다.
주요 사양
1. MoE 구조
전문가(expert) 256개 중 토큰마다 8개를 활성화한다. 62개 층이며 hidden 크기는 8192다. 전체 크기는 크지만 한 토큰을 처리할 때 쓰는 연산은 42B 규모다.
2. 1M 토큰 컨텍스트
컨텍스트 윈도우는 1,048,576 토큰이다. 긴 문서와 대형 코드베이스를 한 번에 넣을 수 있다.
3. 멀티모달 입력
입력은 텍스트, 이미지, 오디오, 비디오를 받는다. 출력은 텍스트만 지원한다.
4. 체크포인트
체크포인트는 BF16(약 1.5TB)과 NVFP4로 제공된다. 양자화 형식인 NVFP4는 용량을 줄이는 대신 정밀도를 일부 포기한다.
제공 채널
| 구분 | 제공처 |
|---|---|
| 가중치 | Hugging Face, SageMaker, Google Cloud Model Garden, Microsoft Foundry |
| API | Baseten, Fireworks, Groq, Modal, Nebius, OpenRouter, Together |
직접 호스팅이 어려우면 API 제공처를 통해 쓸 수 있다.
로컬 실행
로컬 실행은 가능하지만 현실적인 장벽이 높다. Hugging Face 포스트는 Mac Studio 여러 대와 MLX를 쓰는 방법을 소개한다. 3비트 MLX 양자화는 344GB이고, 2비트 llama.cpp 구성에서는 초당 18토큰 수준이 보고됐다. Unite.AI는 NVFP4에 약 700GB, BF16에 약 2TB의 VRAM이 필요하다고 추정했다. Engadget은 Mac Studio 4대 구성 비용을 약 $38,000로 추정했다. 이 수치들은 공식 사양이 아니라 매체 추정이다.
라이선스
라이선스는 Muse Model License다. 상업 이용이 제한적이다. 정확한 조건은 도입 전에 원문을 확인해야 한다. 오픈웨이트라는 표현이 오픈소스 라이선스와 같은 뜻은 아니다.
사용성 분석
연구 기관과 자체 인프라를 가진 기업이 주요 대상이다. 가중치 접근이 가능하므로 내부 평가와 파인튜닝 실험이 가능하다. 개인 개발자는 API 제공처에서 먼저 시험하는 편이 현실적이다. 구체 벤치마크 수치는 이 글에서 다루지 않는다. 성능 주장은 직접 검증이 필요하다.
장점과 한계
장점은 가중치 공개, 1M 컨텍스트, 멀티모달 입력, 다양한 배포 채널이다. 한계는 하드웨어 요구량, 제한적인 상업 라이선스, 텍스트 전용 출력이다. 성능 우위 주장도 아직 독립 검증이 없다.
전망
대형 MoE 모델의 가중치가 주요 클라우드와 추론 서비스에 동시에 올라왔다. 이는 배포 생태계가 빠르게 준비됐다는 신호다. 다만 로컬 실행 비용이 높아 실사용은 클라우드와 API 중심이 될 가능성이 크다. 독립 평가가 나오면 Meta 주장의 타당성이 가려질 것이다.
결론
Muse Spark Open은 816B 규모의 가중치를 공개한 모델이다. 1M 컨텍스트와 멀티모달 입력이 강점이다. 라이선스와 하드웨어 비용이 도입의 변수다. 대규모 인프라를 가진 팀과 오픈웨이트 연구자에게 추천한다. 평점은 4점이다.
장점
- 816B 규모 가중치 공개와 활성 42B의 MoE 효율
- 1M 토큰 컨텍스트 윈도우
- 텍스트, 이미지, 오디오, 비디오 입력 지원
- 주요 클라우드와 다수 API 제공처의 폭넓은 배포 채널
단점/한계
- BF16 약 1.5TB로 로컬 실행에 고가 하드웨어가 필요
- Muse Model License의 상업 이용 제한
- 출력이 텍스트에 한정
- 성능 우위 주장이 Meta 자체 발표이며 독립 검증 미확인
참고 자료
댓글0개
주요 기능/특징
1. 총 816B / 활성 42B MoE (256 전문가 중 토큰당 8개, 62층, hidden 8192) 2. 1,048,576 토큰 컨텍스트 윈도우 3. 텍스트, 이미지, 오디오, 비디오 입력 / 텍스트 출력 4. BF16(약 1.5TB)과 NVFP4 체크포인트 제공 5. Hugging Face, SageMaker, Google Cloud Model Garden, Microsoft Foundry에서 가중치 제공
핵심 인사이트
- 총 816B 중 토큰당 42B만 활성화하는 MoE 구조라 연산량은 전체 크기보다 작다
- 컨텍스트 1,048,576 토큰으로 대형 코드베이스와 긴 문서를 한 번에 처리할 수 있다
- 입력은 텍스트, 이미지, 오디오, 비디오를 받지만 출력은 텍스트만 가능하다
- 가중치가 Hugging Face와 3대 클라우드 플랫폼에 동시에 올라 배포 접근성이 높다
- Baseten, Fireworks, Groq, Modal, Nebius, OpenRouter, Together가 API로 제공해 직접 호스팅 부담을 피할 수 있다
- 로컬 실행은 Mac Studio 다수와 MLX가 필요하며, Engadget은 4대 구성 비용을 약 $38,000로 추정했다
- Muse Model License는 상업 이용이 제한적이어서 오픈웨이트와 오픈소스를 구분해 봐야 한다
- '미국 최고 성능 오픈웨이트 모델'은 Meta의 주장이며 독립 검증은 확인되지 않았다
이 리뷰가 유용했나요?
공유하기
관련 AI 리뷰
Meta Enterprise Platform 출범: 몽고DB CEO 영입해 기업 AI 총괄
Meta가 기업 고객용 AI 사업부 'Meta Enterprise Platform'을 출범하고 몽고DB CEO 출신 CJ 데사이를 영입해 총괄을 맡겼다. 이 발표로 몽고DB 주가는 17% 이상 급락했다.
Meta 'Arena' 앱 준비 포착: Llama AI로 예측 시장 자동화, 가상 화폐로 규제 우회
내부 문서에 따르면 Meta가 Llama AI 기반 예측 시장 앱 'Arena'를 준비 중이다. AI가 질문 생성과 결과 판정을 자동화하며, 가상 화폐로 금융 규제를 우회할 것으로 알려졌다.
Meta Llama 4 Scout & Maverick: MoE 멀티모달로 오픈소스 AI 판도를 바꾸다
Meta가 4월 5일 Llama 4 Scout와 Maverick을 공개했다. 최초 오픈웨이트 MoE 멀티모달 모델로 Scout는 1000만 토큰 컨텍스트, Maverick은 400B 파라미터로 GPT-4o를 능가했다.
