跳到正文
原文
Hugging Face Blog·· 29 天前精选AI 评分78

使用 TRL 和 OpenEnv 训练编码模型绘制水彩画的开源复现指南

Training a coding model to paint watercolours with TRL and OpenEnv

AI 导读

作者基于 Hugging Face 平台完整复现了通过强化学习训练大语言模型编写 JavaScript 代码以生成水彩画的过程,并开源了所有训练脚本、环境和数据集。文章详细解析了结合 HPSv3 评分与 Qwen3-VL-30B-A3B-Instruct 视觉判断器的奖励机制设计,对比了三种不同权重配置的实验结果,展示了如何利用人工筛选的图像池引导模型学习特定审美风格。

推荐理由

完整公开了基于TRL和OpenEnv的强化学习训练代码、环境配置及三种奖励混合策略的实验对比,为复现美学偏好模型提供了可迁移的工程参考。

来源:Hugging Face Blog · huggingface.co