FinRL은 AI4Finance Foundation이 관리하는 금융 강화학습 오픈소스 프레임워크다. 시장 환경(Market Environments), 심층 강화학습 에이전트(DRL Agents), 금융 애플리케이션의 세 계층으로 구성되며, 에이전트가 시장 환경과 상호작용하며 순차적 의사결정 정책을 학습하는 train-test-trade 파이프라인을 제공한다. A2C·DDPG·PPO·SAC·TD3 등 DRL 알고리즘으로 주식 트레이딩 전략을 실험할 수 있다. 이 저장소는 교육·벤치마크·연구 프로토타이핑용 원조 라이브러리로 유지되며, 실거래 배포 등 프로덕션 용도로는 후속 프로젝트 FinRL-X(FinRL-Trading)를 권장한다. MIT 라이선스다.