⌘ K
… 读取采集状态 同步中...
雷
原文
三节课·· 23 天前AI 评分0

重磅!从 Agent 开发到 Agent 算法,进阶指南来了

AI 导读

重磅!从 Agent 开发到 Agent 算法,进阶指南来了 Datawhale干货 作者:郭子扬,东南大学研究生**** 前几天,和朋友讨论了一个有争议的问题:agent开发和agent算法有什么区别?这应该也是很多人找工作关心的点 我理解是,把一个agent从0快速做到60是开发,做到80并不断追高就是算法 在这个迭代过程中,不能只靠自己视角下定义的过程指标来判断效果,最终还是要接受上线后的真实业务指标检验。但上线验证周期长、成本高,不可能每次迭代都等线上反馈。所以需要构建离线 Benchmark,尽可能对齐线上效果,用快速的离线评估来指导先验策略迭代。最后再上线获取真实后验,反过来修正和补充新的先验策略 所以我认为,一套相对完整的Agent业务迭代方法论是:Benchmark → 策略 → 上线 从一个 make sense 的方案,到真正 work,再到足够 solid,中间还有很多方法论,后面慢慢展开 01 Benchmark:很多算法实习生的第一份工作 很多算法实习生的第一份工作,就是把 Benchmark 做 solid。比如审今年ICLR的论文,这个判断标准天然主观很模

本文当前提供导读和图片预览,完整图文请查看原文。

来源:三节课 · mp.weixin.qq.com