
首个奖励模型评分基准!清华复旦港科大联合攻克AI评委“偏科”
首个奖励模型评分基准!清华复旦港科大联合攻克AI评委“偏科”模型胡乱论证“1+1=3”,评测系统却浑然不觉甚至疯狂打Call?是时候给奖励模型打个分了!
来自主题: AI技术研报
6725 点击 2025-05-10 17:13
模型胡乱论证“1+1=3”,评测系统却浑然不觉甚至疯狂打Call?是时候给奖励模型打个分了!
今年,CVPR共有13008份有效投稿并进入评审流程,其中2878篇被录用,最终录用率为22.1%。
大模型竞技场规则更新,GPT-4o mini排名立刻雪崩,跌出前10。
在LLM能力突飞猛进的当下,所有研究者似乎都在关注数据、算力、算法等模型开发的各个方面,但OpenAI研究员Jason Wei最近发布的一篇博客文章提醒我们,模型评估的工作同样非常重要。如何开发出优秀的评估测试,对AI能力的发展方向至关重要。