北京人形机器人创新中心联合北京大学、香港科技大学研发的WoW具身世界模型,让机器人能够像人类一样,理解和处理复杂的事物。这种新型的模型让机器人能够自主地"预演"未来,从而提高其执行力。
据悉,这种模型可以在家居场景下进行应用,对于机器人的运动能力有重要意义。 researchers 在实验中发现,由于机器人难以理解为什么水杯倒满后会洒出来,WoW具身世界模型就成了必要的解决方案。
WoW具身世界模型通过生成一个未来状态并使用逆动力学模型将其转换为机器人的具体执行操作。该模型在人形、类人形、机械臂等不同本体机器人的适用范围广泛,并能模拟水洒在电脑上等极端情况,为真机训练难以实现的数据采集提供重要补充。
这一项研究让 machine 们具备了自主进化能力,而这些能力是通过WoW具身世界模型的自我教导来实现的。这种自适应性使得WoW模型能够在多模态世界中进行学习和推理,形成了一个像打乒乓球一样的传球机制,使其能不断提高自身能力。
此外,该团队还发表了一份全球首有的针对WoW具身世界模型的综合基准。该基准旨在评估世界模型在感知理解、预测推理、决策规划和泛化执行等方面的能力,从而为其训练和迭代提供外部支撑。
这种具备自主进化能力的多模态世界模型体系,能够让机器人不仅能够"想象"和"验证",还能通过在真实环境中的试错学习形成因果理解。最终,这种能力也使得它能够自我提升,不断地提高其对真实场景的适应性。
据悉,这种模型可以在家居场景下进行应用,对于机器人的运动能力有重要意义。 researchers 在实验中发现,由于机器人难以理解为什么水杯倒满后会洒出来,WoW具身世界模型就成了必要的解决方案。
WoW具身世界模型通过生成一个未来状态并使用逆动力学模型将其转换为机器人的具体执行操作。该模型在人形、类人形、机械臂等不同本体机器人的适用范围广泛,并能模拟水洒在电脑上等极端情况,为真机训练难以实现的数据采集提供重要补充。
这一项研究让 machine 们具备了自主进化能力,而这些能力是通过WoW具身世界模型的自我教导来实现的。这种自适应性使得WoW模型能够在多模态世界中进行学习和推理,形成了一个像打乒乓球一样的传球机制,使其能不断提高自身能力。
此外,该团队还发表了一份全球首有的针对WoW具身世界模型的综合基准。该基准旨在评估世界模型在感知理解、预测推理、决策规划和泛化执行等方面的能力,从而为其训练和迭代提供外部支撑。
这种具备自主进化能力的多模态世界模型体系,能够让机器人不仅能够"想象"和"验证",还能通过在真实环境中的试错学习形成因果理解。最终,这种能力也使得它能够自我提升,不断地提高其对真实场景的适应性。