跳到正文
原文
Hugging Face Blog·· 2025-06-03AI 评分53

Hugging Face TRL 发布 vLLM 共置模式以优化 GRPO 训练效率

No GPU left behind: Unlocking Efficiency with Co-located vLLM in TRL

AI 导读

Hugging Face TRL 引入 vLLM 共置(colocate)模式,允许训练和推理在同一组 GPU 上共享资源,消除了服务器模式下因进程分离导致的 GPU 空闲等待。

来源:Hugging Face Blog · huggingface.co