跳到正文
原文
OpenAI·· 2024-08-13精选AI 评分66

OpenAI 推出 SWE-bench Verified 评测基准

Introducing SWE-bench Verified

AI 导读

OpenAI 宣布推出 SWE-bench Verified,这是一个经过人工验证的 SWE-bench 评测子集。该基准旨在更可靠地评估 AI 模型解决真实软件问题的能力。

推荐理由

该子集通过人工验证提升测试可靠性,为衡量模型解决真实软件问题的能力提供了更严格的评估参考。

来源:OpenAI · openai.com