Open Source
GitHub, HuggingFace의 최신 AI 오픈소스 프로젝트를 탐색하세요.
Molmo는 Ai2(Allen Institute for AI)가 공개한 오픈 멀티모달 언어 모델 패밀리로, OLMo 코드베이스에 비전 인코더와 생성형 평가 파이프라인을 통합해 구축됐다. 독점 VLM의 출력을 증류하는 대신 PixMo라는 자체 수집 이미지 캡션·QA 데이터셋으로 처음부터 학습한 것이 특징이며, 학습·추론·평가 코드와 데이터, 가중치를 전부 공개해 재현 가능성을 강조한다. MolmoE-1B(MoE 구조), Molmo-7B-O, Molmo-7B-D, Molmo-72B 등 크기별 모델을 제공하고, 이미지 속 객체를 좌표로 짚어내는 포인팅 기반 grounding과 카운팅 능력에서 강점을 보인다.
OpenBMB
휴대폰에서도 돌아가는 초경량 이미지·비디오 이해 멀티모달 LLM
haotian-liu
GPT-4V 수준의 시각적 지시 조정 멀티모달 AI 모델
baidu
Baidu가 공개한 DeepSeek-OCR 계승 문서 파싱 VLM

OpenBMB
스마트폰에서 실행 가능한 멀티모달 AI 모델