⌘ K
… 读取采集状态 同步中...
雷
热点事件持续更新

HSS基准测试揭示多模态AI视觉推理短板

2 篇报道2 个报道来源12 小时前更新

先了解这件事

AI 综述

Elorian与Scale AI发布HSS基准测试,包含522个图像与短视频问题,旨在评估多模态模型对隐含信息的解读能力。测试结果显示,主流AI模型在直觉视觉推理任务上表现不佳。GPT 6 Astra的pass@1得分为53.6,远低于93.1的人类基线;开源模型GLM-5.3-flash和Kimi K3得分更低,分别为26.8和25.5。Import AI 476期报道中再次引用了这些具体数据,强调中国开源模型在该任务上表现落后,但未提供新的数值或时间线冲突,事实与早先报道保持一致。

AI 根据报道生成 · 9 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. Import AI (Jack Clark)
    Import AI 476:创意与 RSI;弱于中国的开源权重模型;AI 进军太空

    Elorian 和 Scale AI 发布的 HSS 基准测试显示,GPT 6 Astra 在直觉视觉推理任务上的 pass@1 仅为 53.6,远低于人类基线 93.1。GLM-5.3-flash 和 Kimi K3 表现更差,得分分别为 26.8 和 25.5。HSS 包含 522 个问题,涵盖图像与短视频,旨在评估多模态模型对隐含信息的解读能力。

  2. Import AI
    Import AI 476:直观视觉推理基准、中国开源模型表现落后及太空 AI 竞赛

    Elorian 和 Scale AI 发布的基准 HSS 显示 GPT-6 Astra 的 pass@1 仅 53.6,远低于人类基线 93.1,且中国开源模型 GLM-5.3-flash 和 Kimi K3 表现更弱。

本事件热度走势

当前热度 14·可比范围峰值 18(10月13日 00:00)·近 24 小时可比范围变化 –

0510152010月13日00:0010月13日03:0010月13日05:0010月13日08:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。