Moonshot AI 发布 PerceptionBench:多模态模型视觉感知能力诊断基准

Moonshot AI 发布 PerceptionBench,一个从 40 多个现有基准中模型实际失败案例归纳出的视觉感知基准,包含 10 项原子感知能力和 3000 道验证题。所有测试模型准确率均未超过 60%,且大量正确答案在重复提问时无法复现,表明模型更多是猜测而非真正感知。PerceptionBench 旨在精确诊断多模态 AI 的视觉感知断裂点,推动其实现忠实、一致的视觉理解。

Moonshot AI 发布 PerceptionBench,一个从 40 多个现有基准中模型实际失败案例归纳出的视觉感知基准,包含 10 项原子感知能力和 3000 道验证题。所有测试模型准确率均未超过 60%,且大量正确答案在重复提问时无法复现,表明模型更多是猜测而非真正感知。PerceptionBench 旨在精确诊断多模态 AI 的视觉感知断裂点,推动其实现忠实、一致的视觉理解。

信息来源:Moonshot AI:Kimi Blog

转载请注明出处:https://www.ysthink.site/4247/
(0)
的头像
上一页 2026年7月17日
下一页 2026年7月17日

相关推荐

  • Airtap iMessage 新功能:发条短信让 AI 替你操作手机

    Airtap 推出 iMessage 新功能,用户只需给美国号码发一条 iMessage,其云手机上的 AI Agent 就能通过视觉模拟点击,替用户完成 TikTok 刷视频、星巴克点单等操作,无需安装对应 App。其架构分为三层:大脑(理解指令)、AutoPilot(视觉操控屏幕)、云手机(24小时在线)。但支付等敏感操作仍需用户手动完成,信任与授权仍是所有 Agent 厂商的难题。

    AI资讯 2026年7月15日
    00
  • xAI 起诉 Grok 用户制作儿童性虐待内容,不再否认模型被滥用

    xAI 首次对一名 Grok 用户提起诉讼,指控其利用该模型制作儿童性虐待图像(CSAM)。此前 xAI 一直否认 Grok 能生成此类内容,此次诉讼标志着其立场转变。案件聚焦用户滥用行为,而非模型本身的技术缺陷。

    AI资讯 2026年7月17日
    00
  • 美国威胁因知识产权盗窃对中国AI模型实施制裁

    美国财政部长Scott Bessent周二表示,美方将审查中国开源模型是否存在知识产权盗窃行为,若证实将对中国AI公司实施制裁。Bessent称政府支持开源模型但不支持IP盗窃,并称有能力对盗窃美国公司技术的外国模型进行制裁。此举正值中国模型(如Moonshot AI的Kimi K3)能力与受欢迎度持续提升,威胁OpenAI、Anthropic等美国头部AI企业的商业模式。

    AI资讯 2026年7月21日
    00
  • Anthropic 支持 AI 发展节奏请愿

    我们支持这份请愿,我们的 CEO、多位联合创始人及高级员工均已签署。

    我们上月发表的关于递归自我改进的研究指出,需要借助工具审慎把控 AI 前沿的发展节奏,以便社会做好准备。我们很高兴看到该领域已达成广泛共识。https://www.pacingthefrontier.com/

    AI资讯 6小时前
    00
  • 用AI Skill自动生成可协作HTML PPT

    Vista 基于 bento PPT 改造了一个 Skill,输入内容或主题即可自动生成可编辑、在线演示并支持协作的 HTML PPT。安装指令为 `npx skills add joeseesun/qiaomu-bento-ppt`,推荐使用 Kimi K3 或 Opus 4.8+ 等前端审美好的模型。

    AI资讯 2天前
    00

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

自6.2开始主题新增页头通知功能,购买用户可免费升级到最新版体验