Open Source
GitHub, HuggingFace의 최신 AI 오픈소스 프로젝트를 탐색하세요.
메타(Meta) AI가 공개한 다국어 음성·텍스트 번역 및 인식 파운데이션 모델 모음이다. 약 100개 언어를 지원하는 통합 번역 모델 SeamlessM4T를 기반으로, 운율을 보존하는 SeamlessExpressive와 실시간 동시통역·스트리밍 음성인식을 지원하는 SeamlessStreaming을 결합해, 음성-음성 번역·음성-텍스트 번역·자동 음성인식(ASR)·텍스트 번역을 하나의 모델 계열로 처리한다. 핵심에는 새로 설계한 UnitY2 아키텍처와 Conformer 기반 W2v-BERT 2.0 음성 인코더가 쓰여 Whisper와는 독립적인 학습·구조를 갖는다. 코드는 MIT 라이선스로 공개됐으나, 공개된 사전학습 가중치 다수는 비영리(CC-BY-NC 4.0) 조건으로 배포되어 상업적 활용 전 확인이 필요하다.
ggml-org
OpenAI Whisper의 C/C++ 포팅 - 로컬 STT의 사실상 표준

microsoft
60분 음성 단일 패스 처리 보이스 AI
m-bain
단어 수준 타임스탬프와 화자 분리를 지원하는 70배 빠른 Whisper 기반 ASR 라이브러리

SYSTRAN
CTranslate2 기반 Whisper 4배 고속 음성 인식 라이브러리