跳到正文
原文
arXiv 人工智能· Kabir Swain, Sijie Han, Antonio Torralba·· 3 小时前AI 评分51

EnvDreamer:面向具身智能的大规模多模态环境生成框架与数据集

EnvDreamer: Large-Scale Multimodal-to-Environment Generation for Embodied AI

AI 导读

研究人员提出 EnvDreamer 框架,利用大语言模型与视觉语言模型自动生成用于具身智能和机器人训练的 Unreal Engine 5 虚拟环境。在生成的环境中训练的策略无需显式建图或人工任务监督,在导航、重排和操作等多项具身基准上取得了具有竞争力的表现。该框架支持图像条件重建以进行真实到仿真研究,同时开源了包含 20,000 个环境及任务程序与元数据的 EnvDreamer-20k 数据集。

来源:arXiv 人工智能 · arxiv.org