TRL은 Hugging Face가 개발한 파운데이션 모델 사후 학습 전문 라이브러리입니다. SFT(지도 파인튜닝), GRPO(그룹 상대 정책 최적화), DPO(직접 선호도 최적화) 등 최신 학습 기법을 통합 제공합니다. 2026년 3월 31일 v1.0.0 메이저 릴리즈를 달성하며 단순 실험 도구에서 프로덕션급 사후 학습 플랫폼으로 전환했습니다. 보상 모델 학습, RLHF 파이프라인, 선호도 정렬까지 LLM 사후 학습의 전 과정을 커버합니다.