新加坡国立大学邵林团队推出FLIP模型!让机器人像人类一样规划复杂任务,高效又通用

新加坡国立大学邵林团队推出FLIP模型!让机器人像人类一样规划复杂任务,高效又通用

新加坡国立大学 LinS Lab 邵林团队近期提出通用机器人规划模型 FLIP,为机器人任务规划带来全新范式。该模型受人类基于世界模型规划能力启发,构建以图像流为核心的世界模型,包含动作生成、动力学预测和价值评估三大模块,可在机器人视觉空间完成复杂任务规划,适用于可行变物体操作和灵巧手操作等通用机器人任务。

通过图像流生成网络、流条件视频生成网络及创新视觉语言表示模型训练方法,FLIP 实现从初始图像和任务目标出发,生成多图像流方案,预测短期视频并评估选择,合成长期规划。实验显示,其在模拟和真实环境中均表现优异,具备出色的长期规划、高质量视频生成及策略指导能力,还展现了良好的交互性、零样本迁移和可扩展能力。

目前该研究成果已发表于 ICLR 2025,并在 CoRL 2024 LEAP Workshop 作口头报告。

以下是项目和论文链接:

隐藏内容!
登录后才能查看!
© 版权声明

相关文章