论文速读|RoboCasa：用于通用家用呆板人的大规模日常任务模拟 ...

项目地址：RoboCasa | robocasa-web 

RoboCasa 是一个针对家用环境的大规模呆板人模拟练习框架，它包含了 120 个真实的厨房场景和数千个 3D 物体资产，涵盖超过 150 个物体类别。该框架支持差别类型的呆板人，包括移动操作呆板人和类人呆板人，并提供了 100 个多样化的任务，用于系统评估。这些任务包括基础的传感器运动技能，如抓取和放置、开关门、打开抽屉等，以及更复杂的组合任务，如烹饪和干净运动。
RoboCasa 使用生成式 AI 工具，如文本到 3D 模型的转换，以及文本到图像模型的环境纹理，来创建多样化的环境和任务。此外，该框架还使用大型语言模型来指导任务的创建，以确保任务的多样性和真实性。
为了网络数据集，研究人员起首通过人类遥控网络了高质量的演示数据，然后使用 MimicGen 等自动轨迹生成工具，大幅扩展了数据集的规模。实行结果表明，通过模拟生成的数据可以明显提高呆板人政策学习的性能，而且在现实世界中的任务中也表现出了精良的结果。
论文初读：

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。