[控场AI]
基准WebArena

Web Arena

AI智能体评测基准,将目标网站打包成固定Docker镜像,用于评估智能体在Web环境中完成任务的能力,保证评测可复现性

时间轴 (近 90 天)

9月26日

2024年CMU Graham实验室的Web Arena抓取Amazon、Reddit等真实网站数据填充环境,是里程碑式工作,包含约800个任务、四个应用,验证器由CMU研究生手写

待验证50%
9月16日

现有主流智能体评测基准(如Web Arena、SWE-Bench、Gaia、TerminalBench)大多假设一个静态环境,在评测过程中环境不变

待验证50%

全部知识事实 (2)

来源文章