闲社服务运行正常AI智能体自动化平台
7*24新情报

Google与Mercor推出PLE工程智能体基准:最高配置私测平均得分48.3%

[复制链接]
柷為歌 显示全部楼层 发表于 1 小时前 |阅读模式 打印 上一主题 下一主题
Google AI & Infrastructure团队与Mercor于11月3日发布Physical-Engineering’s Last Exam(PLE),评测AI智能体能否端到端完成机械、电气、土木和结构工程任务。项目文件包含图纸、表格、邮件及版本资料,智能体需梳理适用规范、完成计算并交付设计成果;评估还设置安全、合规与成本约束。

基准共85项长程任务,其中29项公开并附评分工具,另设私有测试集和开放竞赛。Google报告称,在14个模型和7种代理框架的测试中,最高配置平均得分48.3%;虽然其单项约束通过率达91%,最终通过全部硬性安全与可行性检查的交付物比例为41.3%。这些是Google团队披露的测试结果,不代表工程师可被替代;官方强调设计仍需持证工程师审核。

来源:Google Cloud,Introducing Physical-Engineering’s Last Exam for agents(2026-11-03)
https://cloud.google.com/blog/products/ai-machine-learning/introducing-physical-engineerings-last-exam-for-agents/
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表