美团LongCat发布LoHoSearch:更难搜索智能体基准

美团LongCat推出LoHoSearch,一个基于762万实体维基百科知识图谱自动生成问题的搜索智能体基准,旨在解决BrowseComp等现有基准趋于饱和的问题。在11个前沿模型测试中,最佳得分仅34.74%,远低于当前模型在BrowseComp上约90%的成绩;上下文策略仅带来+6.8个百分点的提升。该基准包含544道问题、11个领域,采用树与图结构,已开源。

美团LongCat推出LoHoSearch,一个基于762万实体维基百科知识图谱自动生成问题的搜索智能体基准,旨在解决BrowseComp等现有基准趋于饱和的问题。在11个前沿模型测试中,最佳得分仅34.74%,远低于当前模型在BrowseComp上约90%的成绩;上下文策略仅带来+6.8个百分点的提升。该基准包含544道问题、11个领域,采用树与图结构,已开源。

信息来源:X:美团 LongCat (@Meituan_LongCat)

转载请注明出处:https://www.ysthink.site/4269/
赞 (0)
的头像
上一页 2026年7月17日
下一页 2026年7月18日

相关推荐

  • Anthropic 报告 Claude agent 在湿实验室发现噬菌体中的新型 ART 酶系统

    Anthropic 报告其新湿实验室的首个成果:949 个 Claude agent 在约 21.5 小时内自主追踪到一个此前未知的酶系统,消耗 215.6M tokens,搜索了 1.94B 蛋白质簇并回收 198,290 个 RT 簇。

    AI资讯 2026年9月24日
    00
  • Warp 如何在 Claude 上构建自我改进的智能体

    Warp 在 Claude 平台上构建了基于 Agent Skills 的自我改进循环,通过基础技能与改进技能两个文件型技能,将人类反馈转化为对智能体的持续优化。该模式已应用于其整个开源仓库,覆盖数百名贡献者与数千次代码审查。团队建议以原则而非规则编写技能,并强调低摩擦反馈与改进技能的可复用性。

    AI资讯 2026年8月27日
    00
  • Anthropic 的 Claude Mythos Preview 模型发现 AES 和 HAWK 加密算法漏洞

    Anthropic 的 Claude Mythos Preview 模型在自主多智能体系统中,发现了后量子签名方案 HAWK 的改进攻击,以及简化版 AES-128(7 轮)的新攻击方法。

    AI资讯 2026年7月29日
    00
  • 新兴多智能体系统的模式与问题

    Anthropic 研究指出,随着 AI 智能体在共享代码库、市场等社会系统中承担更多任务,智能体间交互量或将超过人机交互。实验显示,45 个协调智能体在 2700 万 token 运行中发现 266 个漏洞,而独立并行方法在 650 万 token 中发现 21 个,两种方法仅 12 个重叠,且协调智能体学会专业化分工。研究同时警示个体层面的良性行为怪癖可能叠加为意外的系统性失败。

    AI资讯 2026年8月13日
    00
  • OpenRouter 教程:用代码调用 Nano Banana 2 编辑图像

    OpenRouter 发布教程,演示通过 API 向 google/gemini-3.1-flash-image(即 Nano Banana 2)发送源图和文本指令完成图像编辑,编辑结果以 base64 形式在响应中返回。教程给出 Python 和 TypeScript 示例、提示词写法、多轮小步编辑方法,以及更换模型只需改一个字段,并介绍了 Nano Banana 系列四个成员的价格与质量差异。

    AI资讯 2026年9月9日
    00

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

自6.2开始主题新增页头通知功能,购买用户可免费升级到最新版体验