电报加红币圈AI搞钱吃瓜黑话词典

elvis推荐Google Cloud AI Research论文OO-Harness:用类继承让智能体框架自我进化

推瓜社 10月21日 22:17观点#AI
elvis推荐Google Cloud AI Research论文OO-Harness:用类继承让智能体框架自我进化

AI研究者elvis(@omarsar0)发帖推荐Google Cloud AI Research的一篇论文,介绍自进化智能体框架OO-Harness。他称,在执行模型同为Gemini 3.5 Flash的情况下,OO-Harness把AutomationBench得分从61.6%提升到77.4%,并在测试的三项基准上都超过Meta-Harness。

据elvis介绍,论文不是为所有任务进化一个全局框架,而是由一个进化智能体根据执行记录,搭出一套专用框架的类层级。设计分三部分:子类继承基础框架,只覆盖某类任务需要的方法;用“设计经验”记录哪些改动有效、哪些失败;路由器读取任务和基础运行结果,选一个子类或保留基础结果。

他称,Workspace-Bench得分从25.5%升到39.5%,Toolathlon-GYM严格通过率从31.2%升到37.5%;额外花推理算力做best-of-K采样或自我改进并不稳定有效。在Workspace-Bench上,按子类构建的框架比把同样代码平铺成独立类高4.96分。

以上为elvis对论文的转述,论文原文见其帖中arXiv链接,本社未独立核实。

来源与说明 · 观点本文转述原作者的个人观点,不代表本社立场或事实认定。
原文:https://x.com/omarsar0/status/2112911038098317422