同系列 · 研究与产品进展
官方仓库发布 V-JEPA 2.1
V-JEPA 2.1 更新基础视频表征的训练方法,关注高质量、时间一致的稠密特征。仓库同时保留 2-AC 的代码与权重。
V-JEPA 2.1 的发布不代表 2-AC 已升级到该架构;本页仍记录论文中的动作条件变体。
本页聚焦 V-JEPA 2-AC。论文在预训练后冻结视频编码器,在学到的表征之上另行训练动作条件预测器,研究与机器人规划相关的预测。
本页聚焦 V-JEPA 2-AC,接口与限制不自动代表 V-JEPA 2 基础模型。
开放情况是所引材料中的声明;当前访问方式与服务状态请以官方页面为准。开放权重不等于开源。
自回归预测会累积误差,限制长时程规划的可靠性。
按原始材料集中查阅;相同原句合并展示,对应资料与阅读日期一并保留。
补充阅读入口,当前技术字段未引用该页摘录。
post-training a latent action-conditioned world model, V-JEPA 2-AC, using less than 62 hours of unlabeled robot videos from the Droid dataset.After pretraining, we freeze the video encoder and learn a new action-conditioned predictor, V-JEPA 2-AC, on top of the learned representation.predicting the representations of future video frames conditioned on past video frames, actions, and end-effector states.To achieve this, we train V-JEPA 2-AC, an autoregressive model that predicts representations of future video observations conditioned on control actions and proprioceptive observations.Long horizon planning with world models is limited by a number of factors.
First, autoregressive prediction suffers from error accumulation:[checkpoint](https://dl.fbaipublicfiles.com/vjepa2/vjepa2-ac-vitg.pt)本站整理来源中的声明,不核查厂商声明真伪,不评价模型优劣。了解收录方式 →