Hugging Face 在 TRL 中推出 RLOO 训练器

Hugging Face 在 TRL 库中上线 RLOO 训练器，作为 PPO 的在线 RLHF 替代方案，可节省 50% 至 70% 显存并带来 2 至 3 倍训练加速。