闲社

标题: Google三个月律师实验:AI提质但初级判断力未显著增长 [打印本页]

作者: hmilywill    时间: 1 小时前
标题: Google三个月律师实验:AI提质但初级判断力未显著增长
事件概述

Google Research 于 2026 年 10 月 7 日发布一项为期三个月的随机对照实地实验,研究 AI 辅助是否会增强或削弱专业经验。实验在 11 家知识产权律师事务所招募 133 名执业专利律师,比较持续使用 Google Labs 专利写作助手与暂不使用 AI 的对照组,并在工具撤除后测试无辅助判断力。

研究对象与发布方

研究由 Google Research 的 David Autor、Tanya Rodchenko 等团队开展,论文题为《Does AI Assistance Enhance or Erode Expertise? Evidence from a Three-Month Field Experiment in Patent Drafting》,并与国家经济研究局(NBER)论文相互对应。研究把律师按资历分为七年以下的初级组和七年以上的资深组。

关键发现

在专利起草任务中,AI 组在使用 10 天后质量评分平均提高约 0.34 个标准差,使用 90 天后约提高 0.38 个标准差,且主要体现在减少较差成果、增加合格成果。90 天后,研究人员让所有律师在不能使用 AI 的情况下对含有错误的专利文本进行人工修订,以测量长期形成的判断力。资深律师在该无辅助任务中比对照组高约 0.45 个标准差;初级律师平均没有显著提升,成绩反而出现更明显的两极分化。

适用对象与实际影响

企业法务、律师事务所、职业培训和知识型团队可把这项研究用作 AI 培训设计参考:AI 能快速提高当下交付质量,但不能默认等同于初级人员获得了资深判断力。培养计划可以把 AI 辅助起草与定期的无辅助复核、错误诊断和导师反馈结合,持续测量工具移除后的独立能力。

限制与注意事项

研究样本来自与 Google 有业务往来的 11 家知识产权律所,规模有限,观察期只有三个月,不能直接代表所有法律领域或其他职业。工具和模型也在快速变化,若重新实验结果可能不同。文中报告的是研究团队在特定任务和评分标准下的效果,不构成对所有 AI 办公工具或律师绩效的普遍保证。

官方来源

Google Research:Does better work always mean better workers?(2026-10-07)




欢迎光临 闲社 (https://www.xianshe.com/) Powered by Discuz! X5.0