NVIDIA Flora 공개: 로봇 영상 라벨링 모델 3종, 비상업 라이선스
NVIDIA가 로봇·인간 영상에 캡션과 보상 라벨을 붙이는 Flora 모델 3종의 가중치를 공개했다. GPT-6 Astra 대비 약 125배 저렴하다는 주장은 자체 평가이며 라이선스는 비상업용이다.
NVIDIA가 로봇·인간 영상에 캡션과 보상 라벨을 붙이는 Flora 모델 3종의 가중치를 공개했다. GPT-6 Astra 대비 약 125배 저렴하다는 주장은 자체 평가이며 라이선스는 비상업용이다.
핵심 요약
NVIDIA GEAR 연구소가 로봇·인간 영상에 라벨을 붙이는 모델 모음 Flora를 공개했다. Hugging Face 모델 카드의 공개일은 2026년 10월 15일이다. Jim Fan이 10월 20일 가중치 공개를 알렸고(Digg 보도), The Decoder가 10월 25일 상세히 다뤘다. NVIDIA는 Flora를 GR00T 모델 학습에 쓰는 데이터 엔진이라고 설명한다.
비교 수치는 모두 NVIDIA가 직접 낸 결과이며 독립 검증을 거치지 않았다. 가중치는 공개됐지만 라이선스는 비상업용이다.
구성: 모델 3종
NVIDIA 연구 페이지의 논문 제목은 "Flora: An Open Model Suite for Scaling Robotics Data Engines"다. Hugging Face 컬렉션에는 아래 모델이 올라 있다.
| 모델 | 기반 모델 | 크기 | 역할 |
|---|---|---|---|
| Flora-TempSeg | Qwen3.5-9B (LoRA) | 약 9B | 영상을 하위 동작 구간으로 분할, JSON 출력 |
| Flora-Captioner | Qwen3.5-27B | 27B | 구간별 명령형 한 문장 설명 생성 |
| Flora-Rewarder | Qwen3.5-27B | 27B (HF 메타데이터 28B) | 성공도와 단계별 품질 점수 산출 |
The Decoder에 따르면 라벨은 세 용도로 쓰인다. 행동 설명은 학습 데이터 선택에, 단계별 진행 평가는 시행착오 학습에, 작업 성공 판단은 배포된 로봇 모니터링에 쓴다.
주요 내용
1. 보상 라벨 형식
Flora-Rewarder 모델 카드에 따르면 출력은 세 가지다. 에피소드 전체는 1(완전 실패)부터 5(완전 성공)까지 정수 점수다. 0.5초 단위 스텝은 1(실패), 2(차선), 3(정상)으로 분류한다. 루브릭 모드는 추론 기록과 단계별 점수를 낸다. 입력 프롬프트는 결과·스텝 모드 16,384토큰, 루브릭 모드 32,768토큰까지다.
2. 규모와 비용 주장
NVIDIA 페이지는 GR00T 학습 중 하루 20만 시간 분량을 512개 GB300 GPU로 라벨링한다고 밝혔다. Fan의 발표는 이를 500개로 반올림했다(Digg 보도). NVIDIA는 GPT-6 Astra보다 약 125배 저렴하다고 주장한다.
The Decoder에 따르면 영상 1시간 라벨링 비용은 Flora가 약 $0.72, GPT-6 Astra가 약 $88.50, Claude Opus 5가 약 $42다. 이 수치는 GPU 시간당 $10 임대료를 가정한 추정이며 운영 중 측정값이 아니다.
3. 벤치마크: 전 항목 우위는 아니다
NVIDIA 연구 페이지의 GPT-6 Astra 대비 수치다. 화살표는 좋은 방향을 뜻한다.
| 벤치마크 | Flora | GPT-6 Astra |
|---|---|---|
| DenseCaptionBench Human100 Seg F1@0.5 (↑) | 54.6 | 44.2 |
| DenseCaptionBench Robot200 Seg F1@0.5 (↑) | 66.9 | 71.9 |
| WGO-Bench Seg F1@0.75 (↑) | 50.3 | 46.0 |
| WGO-Bench Gold-window 정확도 (↑) | 64.7 | 77.4 |
| RoboReward MAE (↓) | 40.0 | 55.4 |
| Robometer OOD Kendall (↑) | 72.0 | 82.3 |
| DenseRewardBench Macro F1 (↑) | 46.2 | 40.7 |
| RubricBench Pooled L1 오차 (↓) | 6.5 | 3.6 |
8개 중 4개는 Flora가, 4개는 Astra가 앞선다. The Decoder는 실패 스텝 탐지에서 Flora-Rewarder가 53.3%를 잡았고 경쟁 모델은 11.7%를 넘지 못했으며, 정상 스텝의 약 11%를 실패로 잘못 표시한다고 전했다. 연구진은 GPT-6 Astra가 설명 품질을 평가하는 동시에 평가 대상 모델이라는 점을 인정했다.
사용 조건과 한계
세 모델 카드 모두 NVIDIA OneWay Noncommercial License를 적용한다. 용도는 비상업 로봇 연구개발로 제한되고, 상업·프로덕션 사용은 지원하지 않는다. 로봇을 직접 제어하거나 물리 시스템의 유일한 안전 모니터로 쓰는 것도 의도된 용도가 아니다. 기반 모델 Qwen3.5는 Apache 2.0이다.
실행은 Linux, PyTorch(Hugging Face Transformers), BF16 기준이며 Ampere·Blackwell·Hopper·Lovelace GPU를 지원한다. 테스트는 H100에서 했다. NVIDIA 연구 페이지에 코드 저장소 링크는 없다. The Decoder는 긴 동작을 지나치게 잘게 나누거나 가끔 동작을 잘못 설명하는 약점을 전했다.
장단점
장점은 분할·설명·보상을 한 파이프라인으로 처리하고, 일부 지표에서 GPT-6 Astra를 앞서며, 가중치가 공개돼 직접 내려받을 수 있다는 점이다. 한계는 비상업 라이선스, NVIDIA 자체 평가에 의존한 수치, Astra가 앞서는 지표 4개, 비용 수치가 추정이라는 점이다.
전망
독립 기관의 재현 평가와 코드 저장소 공개 여부는 아직 확인되지 않았다. Digg 페이지의 댓글에서는 흔들리는 영상이나 어두운 조명에서의 동작, 지연 시간과 신뢰성을 묻는 의견이 있었다. 라이선스 변경 계획은 확인된 바 없다.
결론
Flora는 로봇 데이터 라벨링 전 과정을 오픈 가중치로 내놓은 연구 공개다. 다만 비용과 성능 비교는 NVIDIA 자체 수치이고 라이선스는 연구용에 한정된다. 로봇 학습 데이터를 직접 만드는 연구자에게 추천하며, 상업 서비스에 쓰려는 팀은 라이선스부터 확인해야 한다. 평점은 4점이다.
장점
- 영상 분할, 설명, 보상 라벨을 한 모델 모음으로 처리한다
- 일부 벤치마크에서 GPT-6 Astra보다 높은 점수를 NVIDIA가 보고했다
- 가중치가 Hugging Face에 공개돼 직접 내려받아 실험할 수 있다
- NVIDIA가 GR00T 학습에서 하루 20만 시간 규모로 실제 사용한다고 밝혔다
단점/한계
- 비상업 라이선스라 프로덕션과 상업 서비스에는 쓸 수 없다
- 비용과 성능 비교가 NVIDIA 자체 평가이며 비용 수치는 추정치다
- 루브릭 점수와 일부 영상 지표에서는 GPT-6 Astra가 앞선다
- 긴 동작을 과도하게 쪼개고 가끔 동작을 잘못 설명하는 약점이 보고됐다
참고 자료
댓글0개
주요 기능/특징
1. TempSeg(9B), Captioner(27B), Rewarder(27B) 3종, Qwen3.5 기반 파인튜닝 2. 영상 분할, 동작 설명, 성공도와 단계별 보상 라벨을 한 파이프라인으로 생성 3. GR00T 학습 중 하루 20만 시간 라벨링, 512 GB300 GPU 사용 (NVIDIA 발표) 4. GPT-6 Astra 대비 약 125배 저렴하다는 주장, 벤치마크 8개 중 4개에서 Astra를 앞섬 (NVIDIA 자체 평가) 5. NVIDIA OneWay Noncommercial License: 비상업 로봇 연구개발 전용
핵심 인사이트
- Flora는 TempSeg(약 9B), Captioner(27B), Rewarder(27B) 세 모델로 구성되며 모두 Qwen3.5를 파인튜닝했다
- Hugging Face 모델 카드 공개일은 2026-10-15이고, Jim Fan의 가중치 공개 발표는 10월 20일, The Decoder 보도는 10월 25일이다
- NVIDIA는 GR00T 모델 학습 중 512개 GB300 GPU로 하루 20만 시간 분량의 영상을 라벨링한다고 밝혔다
- The Decoder에 따르면 영상 1시간 라벨링 비용은 Flora 약 $0.72, GPT-6 Astra 약 $88.50, Claude Opus 5 약 $42이며 GPU 시간당 $10를 가정한 추정이다
- NVIDIA 연구 페이지의 8개 벤치마크 중 4개는 Flora가, 4개는 GPT-6 Astra가 앞서 전 항목 우위는 아니다
- RoboReward MAE는 Flora 40.0, GPT-6 Astra 55.4로 Flora가 낮고, 루브릭 오차(RubricBench)는 Astra 3.6이 Flora 6.5보다 낮다
- 연구진은 GPT-6 Astra가 설명을 평가하면서 동시에 평가 대상이라는 점을 인정했다
- 가중치는 공개됐지만 NVIDIA OneWay Noncommercial License로 비상업 연구개발에만 쓸 수 있고, NVIDIA 연구 페이지에는 코드 저장소 링크가 없다
이 리뷰가 유용했나요?
공유하기
관련 AI 리뷰
AWS TorchNeuron 공개 베타: Trainium용 네이티브 PyTorch 백엔드
AWS가 2026년 10월 20일 Trainium용 네이티브 PyTorch 백엔드 TorchNeuron을 Apache 2.0 오픈소스 공개 베타로 내놓았다. .to('neuron')으로 모델을 옮겨 쓴다.
NVIDIA Nemotron 3.5 Super VL 공개: 120B MoE 멀티모달 오픈 모델
NVIDIA가 2026년 10월 15일 Nemotron 3.5 Super VL을 공개했다. 총 120B MoE 멀티모달 모델이며 Bolt 경량 모델도 함께 나왔다. 성능 수치는 NVIDIA 자체 주장이다.
FLUX.3 Image Klein 공개: 5.6B 오픈웨이트, RTX 8GB 로컬 실행
Black Forest Labs가 2026년 10월 15일 FLUX.3 Image Klein 가중치를 공개했다. 생성과 편집을 한 모델로 처리하며, 연매출 500만 달러 미만은 상업 이용이 무료다.
Liquid AI d1 공개: 단일 패스 결정 모델, RTX 4090 응답 8ms
Liquid AI가 결정 모델 d1-3B와 d1-omni-600M의 가중치를 Hugging Face에 공개했다. 단일 forward pass로 결정을 반환한다. 엣지 AI 개발자가 참고할 만하다.
