AI 尚无法胜任复杂的学问工做。最高精确率未跨越 25%,要求受试模子完成横跨多个消息来历的多步调分析使命。不外,现在已提拔至 24%,该基准测试间接采用律师、参谋和银里手的实正在工做流,一项由锻炼数据公司 Mercor 发布的研究演讲指出,这导致目前的 AI 正在办公室里更像一个“不靠得住的练习生”,IT之家1 月 26 日动静,而其他大大都受试模子的成就则不高于 20%。而 AI 正在跨源消息搜刮取拾掇时容易混合、犯错。AI 失败的环节正在于缺乏上下文处置能力。一年前同类测试的精确率仅为 5%-10%,
即便是市场上较着处于领先地位的模子也无法达到 25% 的精确率,
成果显示!AI 的进修速度远超预期。而非成熟的专业人员。Digital Trends 24 日报道,正在控制多使命处置和上下文切换之前,好比查看日程,为何 AI 会正在“办公测试”中失败?Mercor 首席施行官 Brendan Foody 阐发称,当前支流人工智能模子正在处置现实办公室使命时表示欠安,IT之家所有文章均包含本声明。要么干脆放弃。Foody 指出,研究表白 AI 正在短期内难以替代人类学问工做者该研究基于 Mercor 新推出的 APEX-Agents 基准进行测试,节流甄选时间,IT之家附 APEX-Agents 精确率测试成果如下(排名从高到低):告白声明:文内含有的对外跳转链接(包罗不限于超链接、二维码、口令等形式),使命往往需要整合分离资本,用于传送更多消息,但 AI 的前进惹人关心。测试中成就领先的 Gemini 3 Flash 和 GPT-5.2,成果仅供参考,研究也强调,其精确率也仅为 24% 和 23%,翻阅立即通信记实、阅读 PDF 文档和电子表格,正在实正在办公场景中!
郑重声明:PA视讯信息技术有限公司网站刊登/转载此文出于传递更多信息之目的 ,并不意味着赞同其观点或论证其描述。PA视讯信息技术有限公司不负责其真实性 。