NVIDIA AI, PyTorch 기반 에이전틱 강화학습 프레임워크 'Molt' 공개

NVIDIA NeMo 팀이 에이전트 강화학습 프레임워크 Molt를 Apache 2.0으로 공개했다.

Molt는 약 8.6천 줄의 RL 코드로 작고 연구 친화적으로 설계됐으며, Ray, vLLM, NVIDIA AutoModel을 포크 없이 조합한다.

평범한 Python 에이전트, 토큰 정확 루프백 처리, 도구 사용·코드 실행·비전 언어·온폴리시 증류용 레시피를 지원한다.

런치 스크립트와 컨테이너를 함께 제공하며, 2노드 16개 H100 구성의 학습·롤아웃 분리 워크로드를 겨냥한다.

토큰 동일성, 정책 버전 처리, MoE 라우팅 정확도를 높여 대규모 후학습 실험의 복잡도를 낮춘다.