开源生成式物理引擎Genesis，可模拟世界万物

这是生成大模型时代 —— 它们能生成文本、图像、音频、视频、3D 对象…… 而如果将所有这些组合到一起，我们可能会得到一个世界！

现在，不管是 LeCun 正在探索的世界模型，还是李飞飞想要攻克的空间智能，又或是其他研究团队提出的其它类似概念，我们都毫无疑问地在离这个世界越来越近。

2024年12月24日，Genesis横空出世。

据项目贡献者 CMU 机器人研究所博士生 Zhou Xian 和领导者 Chuang Gan 教授在 X 上分享的内容看，该项目耗费了 2 年多时间，海内外近 20 家机构参与了内部测试，最终这个联合团队得到的 Genesis 生成式物理引擎可以生成 4D 动态世界，而其基础是一个用于通用机器人和物理 AI 应用的物理模拟平台。

Genesis，意为「创世纪」，从名字也能看出，这或许真是一个新世界的起点。

Genesis是什么？

Genesis是卡内基梅隆大学、马里兰大学、斯坦福大学、麻省理工学院等研究机构联合推出的开源生成式物理引擎，能模拟世界万物。

Genesis能用简单的语言描述，快速生成精确的物理模拟，包括物体运动、人物动作和机器人策略等。引擎的特点在于高度的物理准确性、快速的模拟速度(比现实世界快约43万倍)，及用户友好的Python化设计。

Genesis能模拟各种材料和物理现象，提供一个轻量级、超快速的机器人仿真平台，及一个强大而快速的照片级写实渲染系统。

Genesis能将用户的自然语言描述转换为数据模式，用在生成式数据引擎。

Genesis为通用机器人、具身AI和物理AI应用而设计，预示着物理模拟和机器人技术领域的重大进步。

Genesis主要功能

• 物理模拟:模拟各种材料和物理现象，包括物体的运动、碰撞、流体动力学等。
• 机器人仿真:提供轻量级、超快速的机器人仿真平台，支持多种机器人类型，如机械臂、腿式机器人、无人机、软体机器人等。
• 照片级渲染:拥有强大而快速的照片级写实渲染系统，能生成高质量的视觉输出。
• 生成式数据引擎:将用户的自然语言描述转换为数据模式，用在生成模拟场景。
• 交互式3D场景:支持完全交互式的3D场景生成，包括家居室内场景、游戏环境等。
• 开放世界物体生成:能生成开放世界中的铰接式物体，提供高质量的mesh资产软体。
• 机器人模拟:针对软性机器人实现逼真的模拟，如虫、柔软的抓手等。
• 面部动画和语音同步:生成面部动作和表情，与语音同步，实现逼真的面部动画。

Genesis的技术原理