刚刚,AI颠覆物理模拟:
一句话精准仿真,
学术圈半壁江山联手耗时24个月研究成果
来源:量子位(公众号 QbitAI) 作者:梦晨 克雷西 发自 凹非寺
一滴水滴落到一个啤酒瓶上,然后沿着瓶子表面慢慢滑落
一个手里拿着棍子的微型悟空在桌子表面冲刺3秒钟,然后跳到空中,并在着陆时向下摆动右臂。
摄像机从他的面部特写开始,然后稳步跟随角色,同时逐渐缩小。
当猴子跳到空中时,在跳跃的最高点,动作会暂停几秒钟……摄像机围绕角色旋转 360 度,然后缓慢上升,然后动作继续。
它是一个从头开始重建的通用物理引擎,能够模拟各种材料和物理现象。 它是一个轻量级、超快速、Python化和用户友好的机器人仿真平台。 它是一个强大而快速的照片级写实渲染系统。 它是一个生成式数据引擎,可将用户提示的自然语言描述转换为各种数据模式。
生成4D物理世界
物理准确且空间一致的视频 摄像机运动和参数 人类和动物角色的动作 机器人操作和运动策略,可部署到现实世界 完全交互式 3D 场景 开放世界铰接式物体生成 语音音频、面部动作和表情
角色运动
一位日本武士正在表演拳击。
一名罗马士兵像僵尸一样向前走。
一名中国风的战士表演江南Style舞蹈。
机器人策略
移动式franka机械臂将地板上的所有物品都扔进篮子里。
一个宇树H1-2人形机器人向前走。
四足机器狗双重后空翻
宇树H1人形机器人执行单脚跳跃。
由24(4x6)架无人机组成的机队一起从地面起飞并一起进行翻转。
3D & 全互动场景生成
一个带有客厅(包括用餐空间)、洗手间、书房和卧室的家居室内场景。
互动实体俄罗斯方块游戏。
开放世界铰接式物体
软体机器人
蠕虫。
柔软的抓手操纵盒子并拿起笔帽。
面部动画和语音
文本“Genesis是一个为通用机器人/嵌入式人工智能/物理人工智能应用而设计的物理平台。”对应的面部运动和语音,表情从中性过渡到愤怒,再到开心。
代码已开源,pip install
可在不同的系统(Linux、MacOS、Windows)和不同的计算后端(CPU、Nvidia GPU、AMD GPU、Apple Metal)上原生运行。 统一的仿真框架中集成了各种物理求解器:刚体、MPM、SPH、FEM、PBD、稳定流体。 支持刚性和铰接体、各种类型的液体、气体现象、可变形对象、薄壳对象和颗粒材料的仿真(和耦合) 支持多种机器人:机械臂、腿式机器人、无人机、软体机器人等,并广泛支持加载不同的文件类型:MJCF (.xml)、URDF、.obj、.glb、.ply、.stl 等 支持基于原生光线追踪的渲染 Genesis旨在与可微仿真完全兼容。目前,MPM求解器和Tool求解器是可微的,并且很快将添加其他求解器的可微性(从刚体仿真开始) Genesis包含一个基于物理且可微分的触觉传感器仿真模块,将很快集成到公开版本中(预计在 0.2.0 版本)
https://github.com/Genesis-Embodied-AI/Genesis
https://genesis-embodied-ai.github.io
https://genesis-world.readthedocs.io
为伟大思想而生!
AI+时代,互联网思想(wanging0123),
第一必读自媒体
商务合作、投稿及内容合作,请联系后台小编
或271684300@qq.com