WebArena作者Shuyan Zhou加入Meta超级智能实验室,主攻AI浏览器
她今年年初离开杜克大学,回到Meta的超级智能实验室,明确核心工作是开发AI浏览器;其代表作WebArena用812项任务测试AI操作真实网页的能力,OSWorld中最强模型完成率仅12.24%。
AI解读:Shuyan Zhou这次换工作的关键信息不是“又一位华人学者进Meta”,而是她明确要做AI浏览器。浏览器智能体过去多在简化网页或静态数据集上测试,一旦放到真实网站,页面会变、权限不同、操作要连续完成,评测和训练的难度立刻上一个台阶。
她此前的产品WebArena就是冲这个缺口去的:用开源软件搭出电商、论坛、代码协作等可独立部署的网站,再生成812项任务,检验AI能否按自然语言指令完成搜索、点击、输入和页面跳转。这套环境对做浏览器智能体的团队有直接用处,因为它是可重复使用的真实交互基准。
OSWorld把范围从浏览器扩到整个计算机系统,369项任务横跨浏览器、文件系统和办公软件。论文发表时人类完成率72.36%,最好的模型只有12.24%,这个差距说明跨应用操作仍远未解决,也解释了Meta为什么要把她招进超级智能实验室。
普通读者短期内不会因此多出一个能自动订机票的AI,这个目标是她申请博士时的个人动机。真正受影响的是做浏览器智能体和计算机操作智能体的研究者与产品团队,他们会多一个具备WebArena、VisualWebArena和OSWorld经验的核心作者,而视觉定位、长程规划、错误恢复和安全权限仍是公开的待解问题。
Meta超级智能实验室成立于2025年6月,整合了TBD Lab、FAIR、产品与应用研究团队和MSL Infra;今年4月发布首个模型Muse Spark,9月推出个人智能体Muse,可处理邮件、填表、购物和长期计划。Shuyan Zhou的浏览器工作与Muse这条产品线方向接近,但两者如何衔接,来源未披露。
哈工大校友、WebArena作者Shuyan Zhou宣布,她于今年年初离开学术界,加入Meta的超级智能实验室(Superintelligence Labs,简称MSL)。
她明确表示,在Meta最核心的工作是开发AI浏览器。这一研究兴趣源于她申请博士时的初心:希望有一天能送给妈妈一台可以由对话驱动、能自动购买机票的设备。
Shuyan Zhou是哈工大计算机校友,同时拥有香港大学计算机学士学位。2018年本科毕业后,她进入卡内基梅隆大学语言技术研究所,接连攻读硕士和博士,2024年博士毕业。
据量子位报道,她谷歌学术论文引用已达9569次,h-index为25。2020年开始读博时,她的研究重心就聚焦于如何让AI进入真实数字环境替用户完成任务:用户讲出想做什么,智能体判断该打开哪个页面、点击哪里、填写哪些信息,以及出错后如何重新调整。
这并非她第一次进入Meta。2024年她曾加入Meta的GenAI,在Ruslan Salakhutdinov领导的团队工作,研究Llama通用计算机操作智能体。去年她离开Meta到杜克大学任教,直到今年初。
她的代表作WebArena是博士阶段的项目产出,是一个用于构建自主代理的现实网页环境,提供真实交互与任务执行功能。在WebArena出现前,许多浏览器智能体在简化网页或静态数据集上接受测试,这些环境便于实验,但难以反映真实网站中的连续操作、页面变化和用户权限等情况。
WebArena用812项任务测试AI操作真实网页
WebArena利用开源软件重新搭建电商、论坛、代码协作和内容管理等网站,形成一套可独立部署和重复使用的交互环境。
Shuyan Zhou和团队设计了241类任务模板,生成812项测试任务,用于检验AI能否根据自然语言指令连续完成搜索、点击、输入、页面跳转和内容修改等操作。
顺着这条路,她又参与了VisualWebArena。该项目延续WebArena的基本框架,但把评测重点从文字信息扩展到图片、图标和页面布局,加入910项需要视觉理解的网页任务。
此后,Shuyan Zhou与香港大学XLANG团队等机构共同完成OSWorld,将评测范围从浏览器进一步扩展到整个计算机系统。OSWorld包含369项计算机操作任务,涉及浏览器、文件系统、办公软件和多个应用之间的协同操作。
- WebArena:241类任务模板,812项测试任务,测试搜索、点击、输入、页面跳转和内容修改
- VisualWebArena:在WebArena框架上加入910项需要视觉理解的网页任务
- OSWorld:369项计算机操作任务,覆盖浏览器、文件系统、办公软件和多应用协同
OSWorld中人类完成率72.36%,最好模型只有12.24%
OSWorld于2024年4月首次公开,随后入选NeurIPS 2024数据集与基准赛道。论文发表时的数据显示,人类在测试任务中的完成率为72.36%,而表现最好的模型只有12.24%。
量子位列举了Shuyan Zhou之后做AI浏览器可能面临的挑战:视觉定位、长程规划、动态环境、错误恢复、安全权限。这些问题的公开评测差距,是超级智能实验室招她做浏览器智能体时面对的现实起点。
Meta超级智能实验室成立于2025年6月,是Meta重组AI业务的整体组织,将负责下一代基础模型的TBD Lab、负责长期研究的FAIR、负责产品落地的产品与应用研究团队,以及提供算力和工程支持的MSL Infra整合到一个体系里。
按照扎克伯格的设想,超级智能不能替代人类,而要理解用户需求,通过Meta AI、WhatsApp、Instagram、智能眼镜等入口帮用户实现价值。
- OSWorld论文发表时人类完成率72.36%,最好模型12.24%
- 2024年4月首次公开,入选NeurIPS 2024数据集与基准赛道
- MSL成立于2025年6月,整合TBD Lab、FAIR、产品与应用研究团队和MSL Infra
MSL已发布Muse Spark与个人智能体Muse
在完成组织调整和人才招募后,MSL已在推出实际成果。今年4月,Meta发布MSL成立后的首个模型Muse Spark,一款面向个人智能体场景设计的多模态推理模型。
9月,Meta推出由Muse Spark驱动的个人智能体Muse。用户可以向它交代目标,由它处理邮件、填写表格、购物或制定长期计划,未来将接入AI智能眼镜。量子位认为,Muse这条路和Shuyan Zhou的研究路线有直接关联。
在MSL已公开的管理者和研究人员中,华裔占比接近一半,包括总负责人Alexandr Wang、首席科学家赵晟佳、首席研究员宋飏,以及从事强化学习、模型后训练和智能体研究的毕树超、从事AI安全和可信智能体研究的Dawn Son等。
- 2025年4月:MSL首个模型Muse Spark,面向个人智能体场景的多模态推理模型
- 2025年9月:个人智能体Muse,可处理邮件、填写表格、购物、制定长期计划,未来接入AI智能眼镜