Hugging Face, 포스트트레이닝용 TRL v1.0 출시
hugging face가 ppo, dpo, grpo를 포함한 75개 이상의 방법을 구현한 포스트트레이닝 라이브러리 trl v1.0을 출시했습니다. 이 라이브러리는 월 300만 다운로드를 처리하며, 급변하는 ai 패러다임을 관리하기 위한 chaos-adaptive 설계를 지원합니다. 시맨틱 버저닝에 따라 안정 코드와 실험 코드를 분리합니다.
허깅 페이스(Hugging Face)는 사후 훈련 대규모 언어 모델을 위한 라이브러리인 TRL v1.0을 출시했다. 라이브러리는 PPO에서 DPO 및 RLVR과 같은 GRPO 접근 방식에 이르는 75가지 이상의 방법을 구현한다. 필요에 따라 다른 알고리즘에 걸쳐 변경되는 보상 모델과 같은 엄격한 추상화를 피함으로써 AI 분야의 불안정성을 해결한다. TRL은 현재 한 달에 300만 건의 다운로드를 지원하며, Unsloth 및 Axolotl과 같은 주요 다운스트림 프로젝트의 인프라로 사용된다.