3D World Simulator 联合研究团队 / 独立收录记录

3D World Simulator

3D World Simulator 通过粒子-体素自编码器与三维潜在动力学,在统一表示中预测未来外观、几何和触觉观测,支持不同相机视点的渲染。

表征与状态预测视频与传感模拟最近一次技术来源阅读于 2026-11-042 份原始材料

技术资料

能做什么,使用时要注意什么。

输入与结果

提供什么
历史三维潜在状态与机器人动作。
得到什么
未来外观、几何与触觉观测。
动作的作用
预测以动作为条件。

开放情况与使用边界

材料说明的限制

训练配置按任务限定体素网格、工作空间与触觉设置。

资料尚未确认
开放方式开源情况需要区分的对象已收录材料不足以判断,未确认不代表没有相应能力。

分类与用途

本站根据所引材料归纳的检索标签。标签可以重叠,不表示能力验证;未知不表示不支持。

模型类型
  • 表征与状态预测核心世界模型预测未来表征、token 或状态;不因内部使用 latent 就归入此类。
  • 视频与传感模拟生成视频序列或未来传感器观测;具体控制方式另行说明。
控制方式
  • 机器人动作以机器人动作或指令条件预测后续观察。
  • 相机位姿 / 轨迹以相机位姿或轨迹控制观察视角。
应用领域
  • 机器人材料明确涉及机器人学习、规划或模拟。

核心三维潜在动力学与多模态观测共同记录;几何观测不直接等于通用空间资产生成。论文为 2026-11-03 v1,不再使用未知发布日期。

分类依据

来源与原文

按原始材料集中查阅;相同原句合并展示,对应资料与阅读日期一并保留。

3D World Simulator · 项目原始材料

arxiv.org

核对原文摘录 · 1 段,支持 2 项资料
一句话认识 / 输出什么

阅读于 2026-11-04

We introduce 3D World Simulator, an action-conditioned multimodal world modeling framework that jointly predicts appearance, geometry, and tactile observations from a unified 3D representation.

背景资料阅读于 2026-11-04

3D World Simulator · 项目原始材料

github.com

核对原文摘录 · 2 段,支持 4 项资料
原阅读方向 / 输入什么 / 动作是否影响预测

阅读于 2026-11-04

The model predicts the next latent from the last `--n-history` latents and actions.
材料说明的限制

阅读于 2026-11-04

each task has specific set parameters in `tasks.py`, including specific voxel grid dimensions, workspace bounds, whether it has tactile sensing, among other information.

背景资料阅读于 2026-11-04

本站整理来源中的声明,不核查厂商声明真伪,不评价模型优劣。了解收录方式 →