Hugging Face Blog·· 2023-06-12精选AI 评分60
Hugging Face 研究：基础模型能否像人类一样标注数据？
Can foundation models label data like humans?
AI 导读
Hugging Face 发布研究，探讨使用 GPT-4 等基础模型进行自动化数据标注和模型评估的可靠性，并将其作为 Open LLM Leaderboard 扩展的一部分。
推荐理由
通过对比人类标注与 GPT-4 自动评估，揭示了后者在偏好判断中的位置偏差及对冗长回复的过度奖励。
来源：Hugging Face Blog · huggingface.co