五支大学团队入选首届Alexa Prize SimBot挑战赛最终现场交互阶段。团队选拔基于客户反馈及各团队技术论文的科学价值等多方面因素。入选的五支大学团队信息如下:
团队名称 | 大学 | 学生团队负责人 | 导师 |
---|---|---|---|
EMMA | 赫瑞瓦特大学 | Amit Parekh | Alessandro Suglia |
GauchoAI | 加州大学圣塔芭芭拉分校 | Jiachen Li | Xifeng Yan |
ScottyBot | 卡内基梅隆大学 | Jonathan Francis | Yonatan Bisk |
SEAGULL | 密歇根大学 | Yichi Zhang | Joyce Chai |
SlugJARVIS | 加州大学圣克鲁兹分校 | Jing Gu | Xin Wang |
用户可通过在Echo Show或Fire TV设备上说“Alexa, play with robot”与决赛团队的SimBot进行交互。用户的评分和反馈将帮助学生团队改进机器人系统,角逐总额65万美元的奖金。该奖项是独特的产学研合作项目,提供敏捷的现实世界实验框架和工具以加速科学发现。
SimBot挑战赛致力于推动具身AI代理的科学进展,使其能够有效与人类互动、理解、学习并协作完成指定任务。某中心高级首席科学家表示:“下一代自主AI助手需具备鲁棒性和多功能性,能够通过多模态交互与人类、其他代理及环境进行学习并解决复杂任务。”
作为项目支持,某中心向团队提供了数据、软件工具、机器学习模型、视觉与对话AI流水线以及具身AI框架Alexa Arena,帮助团队在线创新、部署和实验AI理念。决赛阶段,团队需开发能最佳响应虚拟世界内多模态传感器输入的机器人系统。用户可通过设备与大学AI模型驱动的虚拟机器人互动,完成渐进式复杂任务并提供反馈。
获胜团队将于5月初的决赛活动中揭晓。所有十支半决赛团队的技术论文将于今年晚些时候在某中心科学网站发布。
TEACh数据集 某中心同步公开了TEACh数据集,包含3000多段模拟用户与模拟机器人之间的对话数据,用于协作完成家庭任务。该数据集中,模拟用户无法与环境对象交互,模拟机器人不知晓待完成任务,要求双方通过通信协作解决问题。2022年6月结束的挑战赛公开基准阶段即基于TEACh的“对话历史执行(EDH)”基准,评估模型根据对话历史及过往动作预测机器人后续行动的能力。