AiWizz
我的动态
返回资讯列表
#219网络采集2天前IT之家

OpenAI 挑战 AI 评测基准 SWE-Bench Pro:约 30% 存在评测缺陷

IT之家 7 月 9 日消息,OpenAI 昨日(7 月 8 日)发布博文, 挑战行业权威评测基准 SWE-Bench Pro,认为在 731 个公开测试任务中,约 30% 存在评测缺陷。 IT之家注:SWE-Bench Pro 是由 Scale AI 推出的大语言模型与 AI 智能体编程能力评测基准,因高度贴近实际企业级开发且具备极高的防作弊标准,现已成为 AI 软件工程领

查看原文
20
5.7k
0评论
30.1k浏览
登录后可顶、赞、评论和收藏立即注册登录

相关贡献者

IT

<p data-vmark="21e1">IT之家 7 月 9 日消息,OpenAI 昨日(7 月 8 日)发布博文,<strong>挑战行业权威评测基准 SWE-Bench Pro,认为在 731 个公开测试任务中,约 30% 存在评测缺陷。</strong></p><p data-vmark="06f1">IT之家注:SWE-Bench Pro 是由 Scale AI 推出的大语言模型与 AI 智能体编程能力评测基准,因高度贴近实际企业级开发且具备极高的防作弊标准,现已成为 AI 软件工程领


---


原文来源:IT之家

https://www.ithome.com/0/974/531.htm

查看原文 →

讨论 (0)

暂无评论,来抢沙发吧