跳到正文
Google Cloud: Databases·· 11 小时前精选AI 评分62

Google 发布 Physical-Engineering's Last Exam(PLE)基准,14 个前沿模型得分均低于 50%

Introducing Physical-Engineering’s Last Exam for agents

阅读原文

本站未展示全文,请前往来源网站阅读。

AI 导读

Google AI & 基础设施团队联合 Mercor 发布 Physical-Engineering's Last Exam(PLE)基准与开放竞赛,测试模型完成机械、电气、土建、结构工程任务的能力,共 85 个长程任务,另开放 29 个公共任务、评分工具和 ple-bench.com 排行榜。

推荐理由

基准覆盖机械、电气、土建、结构四类长程工程任务,并给出模型与 harness 影响的量化对比,读者可据此评估 Agent 在真实工程上的差距。

来源:Google Cloud: Databases · cloud.google.com