HyperBrowseComp:面向网页浏览 Agent 的多语言多模态压力测试基准
HyperBrowseComp: A Multilingual and Multimodal Stress Test for Web-Browsing Agents
AI 导读
研究者发布 HyperBrowseComp,一个面向网页浏览 Agent 的多语言、多模态基准,包含 423 道由母语或高水平使用者人工编写并验证的题目,覆盖 13 种语言。题目要求给出简短且可公开核实的答案,需要定位冷门证据、追踪多步线索链,或查阅视频、扫描文档、图像、地图等异构来源。为降低仅靠参数化知识作答的可能,作者用无联网模型筛除较容易的题目。评测在统一 Agent 协议下,使用模型厂商自带搜索与共享外部检索框架两种方式,并对部分题目做了人类评估以对照模型表现与投入。