跳到正文
原文
Hugging Face Blog·· 2025-05-25AI 评分12

Liger GRPO 与 TRL 集成在 DeepSpeed ZeRO3 下出现形状不匹配

🐯 Liger GRPO meets TRL

AI 导读

用户在使用 Qwen2.5-0.5B-Instruct 以 bf16 精度结合 DeepSpeed ZeRO3 测试 Liger GRPO loss 时,于 TRL 的 GRPO Trainer 中触发形状不匹配报错。

来源:Hugging Face Blog · huggingface.co