⌘ K
… 读取采集状态 同步中...
雷
原文
人人都是产品经理· Z Finance·· 6 天前精选经营分98

a16z 对谈 Vals 联创:公开刷榜成遮羞布,AI 评测急需独立机构

a16z对谈Vals联创:公开刷榜成了大厂最大的遮羞布,AI评测急需独立机构

AI 导读

a16z 对谈中,AI 评测公司 Vals 联创 Rayan 指出 Llama 4 在公开榜单表现亮眼,但在 Vals 保密测试中低于预期,证实公开 Benchmark 失效。他主张建立独立验证机制,并披露 Vals 团队曾在一个月内消耗约 150 万美元价值的 Token,为同期员工工资的 10 倍,凸显了 AI 使用成本与效率评估的紧迫性。

推荐理由

提供AI成本评估新视角,提示公开榜单失效风险,助电商在AI工具采购中避免盲目跟随榜单而忽视真实任务成本。

本文当前提供导读和图片预览,完整图文请查看原文。

来源:人人都是产品经理 · woshipm.com